对神经网络某一层做了小改进,效果却提升显著,可以发论文吗?

it2024-12-17  10

公众号关注 “ML_NLP”

设为 “星标”,重磅干货,第一时间送达!

知乎:青春没有终点

编辑:深度学习自然语言处理公众号 链接:见原文链接

学术分享,侵删~

如果你的"小改进"只是把5*5卷积核变成3*3这种,下面的内容就不用看了。

结论是,可以发论文,只是论文的档次就取决于你的能力了。

看过《中国好声音》和《中国梦之声》这种节目吧,和投论文是一样的。

一般来说,一个很容易令人接受的参(tou)赛(gao)者,需要具备包括但不限于以下几个因素中的其中一部分因素:

1. 流畅的故事

"1982年的一个夜晚,伴随着突如其来的雷声,一个伟人诞生了,他就是大名鼎鼎的企业家:王布斯。

令人惊讶的是,第二天他就学会了喊爸爸妈妈,不到10天的时间竟然背下了唐诗三百首,出满月那天,他竟然喝倒了三桌的客人。

王布斯一岁的时候,因为常年酗酒,得了肝癌,被狠心的父母扔到了大山深处。还好,一公一母两只狼经过一番搏斗,王布斯打倒了公狼,母狼被他的气质折服,收留了他,才使得一代伟人没有因此夭折。现在西伯利亚还有这只母狼的雕像。所以,8岁以前,王布斯一直以为自己是一只狼。"

(以上转自《王布斯传》)

只有这样的故事,才能打动裁判和观众。

同样,你的论文也要有完整的思路,比如研究现状+痛点+切入点+方法+好处,一气呵成。

2. 充分的证据

参赛者在陈述完自己感人的一生后,镜头一般会切到亲自到现场助阵的父母,或者让几个亲朋好友出来露个脸,把你从小到大的感人事迹念叨念叨。邻居也不要放过,最好还能找几个路人甲路人乙,仇人都能请过来就更牛掰了。

论文也是如此,fancy的idea再加上一点理论分析和证明,是不是看起来更加有说服力了。

3. 惊艳的展示

无论你的故事如何优雅,无论亲朋好友如何挺你,都不能够说明你真的具备这种能力。是骡子是马拉出来溜溜,倒是唱两句证明一下你吹下的牛逼。于是,伴随着你动听的歌喉,梦想导师就转身了。

而你的论文,则需要做充足的实验,你为自己方法吹下的任何一个牛逼,都要设计实验验证。

4. 爸爸

你以为你很有才华就能参加《中国好声音》吗?恐怕没那么简单。一般来说,要么就是爸爸很有钱,要么就得"爸爸"很有钱[滑稽]。

投论文也是,最好有个大牛加持,他的学识和人脉,总会对你论文的润色和投稿产生帮助。当然这个就是锦上添花了,其实可有可无。

接下来,是关于你的成果。

“对神经网络某一层做了小改进,效果却提升显著,可以发论文吗?工作量是不是太少了”

1.故事

你能为你的"小改进"找到一套合适的理论进行包装吗?你能够挖掘出你的"小改进"的意义所在吗?

**2.**你在一种样本集上"效果却提升显著",那么在其他样本集上呢?如果把你的改进放到另一个网络结构上,还会有提升吗?你能够设计实验再证明一下你故事中的"理论"和"意义"吗?

3. 证据

有能力最好从某个角度证明一下你的idea,哪怕只证明一下你idea的一部分,哪怕用比较简单的理论证明。尤其是现在你这种情况,只有一个idea,还是需要扩充一下论文内容的。

4. 爸爸

我猜你没有大牛加持,否则也不会来这问了。

以上。

下载1:动手学深度学习

在机器学习算法与自然语言处理公众号后台回复“动手学”, 即可获取547页《动手学深度学习》电子书和源码。 本书同时覆盖深度学习的方法和实践, 不仅从数学的角度阐述深度学习的技术和应用, 还包含可运行的代码, 为读者展示如何在实际中解决问题。

下载2:仓库地址共享 在机器学习算法与自然语言处理公众号后台回复“代码”, 即可获取195篇NAACL+295篇ACL2019有代码开源的论文。开源地址如下:https://github.com/yizhen20133868/NLP-Conferences-Code

仓库地址共享: 在机器学习算法与自然语言处理公众号后台回复“代码”, 即可获取195篇NAACL+295篇ACL2019有代码开源的论文。 开源地址如下: https://github.com/yizhen20133868/NLP-Conferences-Code 重磅!机器学习算法与自然语言处理交流群已正式成立 群内有大量资源,欢迎大家进群学习! 额外赠送福利资源!邱锡鹏深度学习与神经网络,pytorch官方中文教程,利用Python进行数据分析,机器学习学习笔记,pandas官方文档中文版,effective java(中文版)等20项福利资源

注意:请大家添加时修改备注为 [学校/公司 + 姓名 + 方向] 例如 —— 哈工大+张三+对话系统。 号主,微商请自觉绕道。谢谢!

推荐阅读: Longformer:超越RoBERTa,为长文档而生的预训练模型 一文直观理解KL散度 机器学习必读TOP 100论文清单:高引用、分类全、覆盖面广丨GitHub 21.4k星

最新回复(0)