我在知乎上看到了2021年底大佬的总结。看完之后感觉受益匪浅。作者是田渊栋先生,博士毕业,目前在,我想在新的一年里给你带来不同的收获。
以下为原文。
今年,我们在小组中开辟了一个相对较大的方向,组织并带领团队一点一点地前进,并取得了一些初步的成果。(三篇ICML,四篇NeurIPS,一篇AAAI[1],一篇SIGCOMM[2],还有一篇CGO tool paper[3]),包括三篇ICML long oral,一篇一作ICML[4]获得优秀论文奖提名[5]。年底投了几篇ICLR文章的质量也很好。研究内容围绕着两条主线,一条是加强算法设计的学习及其在智能优化方向上的应用,另一条是对自我监督学习的理解和改进。非常感谢所有的合作伙伴!
业余时间,我完成了一部小说《破晓之钟》[6]》,续集《幽夜星火[7]》也在写作中。
更重要的是,我们的女儿出生在11月初,给家人带来了很多快乐。
总的来说,今年很忙,也很丰富多彩。
随着年龄的增长,限制有越来越多的限制,家庭责任和健康将逐渐成为越来越强烈的限制,让有梦想的人陷入无能为力的困境。如何摆脱这个困境,首先想象一个崇高的梦想,然后设定一个可以实现的目标,并逐步实现它,这是一个终身的家庭作业。
对自己提出了更高的要求。
在战略上,要区分主次
不必做不必要的工作,找出什么对自己最重要,什么应该果断放弃,说没有时间并不羞辱,但逐渐成熟。
今年,我参加了公司辅导实习生的活动,每天和实习生聊天。实习生抱怨每次赶论文都要熬夜好几天。我告诉她我从来不熬夜赶论文,她几乎惊呆了——当然,她还是要经常在博士阶段熬夜,但博士毕业后,尤其是近几年,开始追求。原则,原因很简单,如果结果是最后一刻,如何有时间思考和验证实验结果是否正确?这也可以减少每份贡献的数量,并提高稿件的质量。
我当过几次领域主席(Area Chair),作为最后一位主要负责任的作者,帮助改写了许多反驳评论的作者(rebuttal)可以清楚地发现,如果作者对一篇文章尽了最大努力,他可以感受到并愿意提高分数。
我记得我以前写过一个知乎回答,说我每天可以工作十多个小时,但现在看起来已经过时了。还有一天工作十几个小时的意识,但条件是这件事真的很重要,真的很有意义,值得去做。最糟糕的情况是,忙但不知道为什么他们的目标,努力工作但死亡,这不仅给了他们虚幻的安全感和满足感,而且注定了下一个悲剧的命运,结局是最糟糕的,最好躺下来享受生活。
,想清楚怎么去做,花多少时间和资源去做,哪个部分可以拿来主义,哪个部分必然存在亮点和创新。基本盘定下来,大格局也定下来,有意想不到的喜悦是锦上添花,结果不尽如人意,至少有办法保证。此外,预测别人看不到的问题和陷阱,并采取一切手段,包括技术或非技术,以尽量避免这样的事情。所谓智者见于未萌,而不是真着火到处灭火。
在执行方面,有必要安排所有可以安排的事情
如何快速切换多任务,如何不忘记不紧急但重要的事情,如何利用零碎的时间进行有意义的阅读和思考是非常重要的。今年下半年,我花时间写了一个时间管理软件,总结和整理待办事项、文章笔记、想法和团队的项目进度,然后通过一些简单的代码自动分析自定义标签,输出一个全面的时间表。这样可以解决文档分散太多太乱的问题。
稍微整理一下,代码在这里开源[8],如果你感兴趣,你可以玩。当然,多任务切换的关键在于你是否能在一段时间内集中注意力,做好一件事,然后做下一件事。如果定了具体的目标,所有的工具都只是辅助的,必要时可以放弃。
记住别人给自己的批评,经常反思
记得去年这个时候,我还在花很多时间一个个反驳我们的贡献ICLR2021文章的评委给出了18个问题[9]。当时觉得评委竟然贬低了我们的工作一文不值,列出的每一个问题都是胡说八道,很生气。但现在回想起来,虽然证明不严格等都是胡说八道,细节中提出的问题也暴露出他没有仔细阅读,但如果你想想他提出这些问题的根本动机,有一件事是合理的——文章中有太多的想法要表达,而且写得不是特别清楚。对比去年和今年年初的两篇文章,一篇是被比较的ICLR和ICML连续拒稿,另一篇拿了ICML优秀论文提名,感慨良多。所有这些都有内在原因,理解这些内在原因可以提高你的工作质量。
我很幸运能遇到如此严肃的评论——这样的思考使被拒绝的坏事成为一件好事。你知道,批评是一种稀缺的资源,高质量的批评是罕见的,因为其他人没有时间和精力仔细阅读他们的结果,更不用说提出任何有用的建议了。我半年前写了一篇关于批评的文章[10],年底还是要重申这一点。
不能故步自封,要经常翻棋盘
你以前的优势可能成为下一步成长的绊脚石。认识到每一种能力都是有用和有限的,在适当的时间和场合使用它,在其他时间和场合故意限制它,这比拥有和炫耀技能更困难和困难。而这一切的选择,都是为了一个宏大的目标,为了自己的长远发展。俗话说好游客溺水,好骑手堕落,说做自己擅长的事的事情,经常掉以轻心,事实上,它有更深层次的意义——有技能的人,有点粗心,可能成为他们自己技术的奴隶。
最后,有空多看历史
历史是一个大规模的离线强化学习训练集,比自己强100倍。能在历史书上留下一笔钱的杰出人物,在关键时刻走错了一步,以前所有的成就都白费了。这些都一字一句地记录在案,让后人保持警惕。每年年底写一个总结,期待2022年做得更好,把自己的经历放在这个培训集里,让大家看看。也许你可以从中学习就在这里。——
这只是你自己的历史。
千里渡来年越少,万顷劫波付笑话。
共勉。
想和你一起学习进步!『目前已经建立了多个不同方向的交流群(等等),名额有限,加入下面的微信一起讨论交流吧!(注意一定要o才能通过)
本文的参考资料
[1]
AAAI: https://arxiv.org/abs/2112.09174
[2]SIGCOMM: https://dl.acm.org/doi/10.1145/3452296.3472902
[3]CGO tool paper: https://arxiv.org/abs/2109.08267
[4]ICML: https://arxiv.org/abs/2102.06810
[5]优秀论文奖提名: https://icml.cc/virtual/2021/awards_detail
[6]破晓之钟: https://yuandong-tian.com/novel_daybreak_bell.html
[7]幽夜星火: https://yuandong-tian.com/novel_dark_spark.html
[8]这里: https://github.com/yuandong-tian/scheduler2
[9]问题: https://openreview.net/forum%3Fid%3Dc5QbJ1zob73%26noteId%3DgHbY_xI60M7
[10]一些应对批评的经验: https://zhuanlan.zhihu.com/p/390765721
- -
美团 大规模商品知识图谱的构建与应用
2021-12-31
浅谈 多任务学习 在推荐系统中的应用
2021-12-30
手把手!基于领域预训练和对比学习SimCSE的语义检索(附源码)
2021-12-27
工业界和学术界最大区别是什么?
2021-12-25