普通程序员如何向人工智能方向转型?
随着人工智能时代呼声渐起,Python凭借其入门简单、应用广泛的优势成为很多想要入行互联网行业的人们的首选编程语言。如果你想学一门语言,可以从语言的适用性、学习的难易程度、企业主的要求几个方面考虑。从这几个角度看,学习Python都没有什么可挑剔的。
根据我的观察,去解决具体问题是不划算的,因为即便你对那个问题有深入的认识,仍然需要烧掉大量GPU,才能搞出一点效果来。看论文的话,有不少论文,连完整的公式都不列一遍的,就画个layer的示意图让你自己蒙去。
还是造深度学习框架才是最好的。现有框架都太烂了,跑分基本上全靠cuDNN,碰到cuDNN里没有的东西,就让你自己去写CUDA。而大部分人更需要的是能直接从数学公式到能运行的代码。毕竟写GPU代码也非常花时间的。。
当下,人工智能已经成为越来越火的一个方向。普通程序员,如何转向人工智能方向,是知乎上的一个问题。
一.目的
本文的目的是给出一个简单的,平滑的,易于实现的学习方法,帮助“普通”程序员踏入AI领域这个门。这里,我对普通程序员的定义是:拥有大学本科知识;平时工作较忙;自己能获取的数据有限。因此,本文更像是一篇“from the scratch”的AI入门教程。
二. AI领域简介
AI,也就是人工智能,并不仅仅包括机器学习。曾经,符号与逻辑被认为是人工智能实现的关键,而如今则是基于统计的机器学习占据了主导地位。最近火热的深度学习正是机器学习中的一个子项。目前可以说,学习AI主要的是学习机器学习。
但是,人工智能并不等同于机器学习,这点在进入这个领域时一定要认识清楚。关于AI领域的发展历史介绍推荐看周老师写的《机器学习简介》。下面一个问题是:AI的门好跨么?其实很不好跨。我们以机器学习为例。
在学习过程中,你会面对大量复杂的公式,在实际项目中会面对数据的缺乏,以及艰辛的调参等。如果仅仅是因为觉得这个方向未来会“火”的话,那么这些困难会容易让人放弃。考虑到普通程序员的特点,而要学习如此困难的学科,是否就是没有门路的?答案是否定的。只要制定合适的学习方法即可。
三.学习方法
学习方法的设定简单说就是回答以下几个问题:我要学的是什么?我怎样学习?我如何去学习?这三个问题概括说就是:学习目标,学习方针与学习计划。学习目标比较清楚,就是踏入AI领域这个门。这个目标不大,因此实现起来也较为容易。“过大的目标时就是为了你日后放弃它时找到了足够的理由”。
学习方针可以总结为“兴趣为先,践学结合”。简单说就是先培养兴趣,然后学习中把实践穿插进来,螺旋式提高。这种方式学习效果好,而且不容易让人放弃。有了学习方针以后,就可以制定学习计划,也称为学习路线。下面就是学习路线的介绍。
四.学习路线
我推荐的学习路线是这样的,如下图:
这个学习路线是这样设计的:首先了解这个领域,建立起全面的视野,培养起充足的兴趣,然后开始学习机器学习的基础,这里选择一门由浅入深的课程来学习,课程最好有足够的实验能够进行实战。基础打下后,对机器学习已经有了充足的了解,可以用机器学习来解决一个实际的问题。
这时还是可以把机器学习方法当作一个黑盒子来处理的。实战经验积累以后,可以考虑继续进行学习。这时候有两个选择,深度学习或者继续机器学习。深度学习是目前最火热的机器学习方向,其中一些方法已经跟传统的机器学习不太一样,因此可以单独学习。除了深度学习以外,机器学习还包括统计学习,集成学习等实用方法。
如果条件足够,可以同时学习两者,一些规律对两者是共通的。学习完后,你已经具备了较强的知识储备,可以进入较难的实战。这时候有两个选择,工业界的可以选择看开源项目,以改代码为目的来读代码;学术界的可以看特定领域的论文,为解决问题而想发论文。
无论哪者,都需要知识过硬,以及较强的编码能力,因此很能考察和锻炼水平。经过这个阶段以后,可以说是踏入AI领域的门了。“师傅领进门,修行在个人”。之后的路就要自己走了。
下面是关于每个阶段的具体介绍:
0.领域了解
在学习任何一门知识之前,首先第一步就是了解这个知识是什么?它能做什么事?它的价值在什么地方?如果不理解这些的话,那么学习本身就是一个没有方向的舟,不知道驶向何处,也极易有沉船的风险。了解这些问题后,你才能培养出兴趣,兴趣是最好的引路人,学习的动力与持久力才能让你应付接下来的若干个阶段。关于机器学习是什么,能做什么,它与深度学习以及人工智能的关系,可以看我写的博客从机器学习谈起。
1.知识准备
如果你离校过久,或者觉得基础不牢,最好事先做一下准备复习工作。“工欲善其事,必先利其器”。以下的准备工作不多,但足以应付后面阶段的学习。
数学:复习以下基本知识。线性代数:矩阵乘法;高数:求导;概率论:条件与后验概率。其他的一些知识可以在后面的学习的过程中按需再补;
英文:常备一个在线英文词典,例如爱词霸,能够不吃力的看一些英文的资料网页;
FQ:可以随时随地上Google,这是一个很重要的工具。不是说百度查的不能看,而是很多情况下Google搜出来的资料比百度搜的几十页的资料还管用,尤其是在查英文关键字时。节省时间可是很重要的学习效率提升;
2.机器学习
机器学习的第一门课程首推Andrew Ng的机器学习。这门课程有以下特点:难度适中,同时有足够的实战例子,非常适合第一次学习的人。cs229这门课程我这里不推荐,为什么,原因有以下:
时间:cs229的时间太早,一些知识已经跟不上当今的发展,目前最为火热的神经网络一笔带过。而Cousera上神经网络可是用了两个课时去讲的!而且非常详细;教学:Ng在cs229时候的教学稍显青涩,可能是面对网络教学的原因。有很多问题其实他都没有讲清楚,而且下面的人的提问其实也很烦躁,你往往不关心那些人的问题。这点在Coursera上就明显得到了改善,你会发现Ng的教学水平大幅度改善了,他会对你循循善诱,推心置腹,由浅入深的教学,在碰到你不明白的单词术语时也会叫你不要担心,更重要的,推导与图表不要太完善,非常细致清晰,这点真是强力推荐;字幕:cs229的字幕质量比Coursera上的差了一截。Coursera上中文字幕翻译经过了多人把关,质量很有保证;作业:cs229没有作业,虽然你可以做一些,但不会有人看。这点远不如Coursera上每周有deadline的那种作业,而且每期作业提交上去都有打分。更重要的是,每期作业都有实际的例子,让你手把手练习,而且能看到自己的成果,成就感满满!
3.实践做项目
学习完了基础课程,你对机器学习就有了初步了解。现在使用它们是没有问题的,你可以把机器学习算法当作黑盒子,放进去数据,就会有结果。在实战中你更需要去关心如何获取数据,以及怎么调参等。如果有时间,自己动手做一个简单的实践项目是最好的。
这里需要选择一个应用方向,是图像(计算机视觉),音频(语音识别),还是文本(自然语言处理)。这里推荐选择图像领域,这里面的开源项目较多,入门也较简单,可以使用OpenCV做开发,里面已经实现好了神经网络,SVM等机器学习算法。项目做好后,可以开源到到 Github 上面,然后不断完善它。实战项目做完后,你可以继续进一步深入学习,这时候有两个选择,深度学习和继续机器学习;
4.深度学习
深度学习:深度学习是目前最火热的研究方向。有以下特点:知识更新快,较为零碎,没有系统讲解的书。因此学习的资源也相对零散,下面是一些资源介绍。其中不推荐的部分并不代表不好,而是在这个初学阶段不合适:
推荐,UFLDL:非常好的DL基础教程,也是Andrew Ng写的。有很详尽的推导,有翻译,且翻译质量很高;推荐,Deep learning (paper):2015年Nature上的论文,由三位深度学习界的大牛所写,读完全篇论文,给人高屋建瓴,一览众山小的感觉,强烈推荐。如果只能读一篇论文了解深度学习,我推荐此篇。这篇论文有同名的中文翻译;推荐,Neural networks and deep learning:这本书的作者非常擅长以浅显的语言表达深刻的道理,虽然没有翻译,但是阅读并不困难;推荐,Recurrent Neural Networks:结合一个实际案例告诉你RNN是什么,整篇教程学完以后,会让你对RNN如何产生作用的有很清晰的认识,而这个效果,甚至是读几篇相关论文所没有的;不推荐,Neural Networks for Machine Learning University of Toronto Coursera:深度学习创始人教的课,最大的问题是太难,而且老先生的吐字有时不是很标准;不推荐,Deep Learning (book):同样也是由深度学习大牛所写的书,但感觉就像是第二作者,也就是他的学生所写的。很多内容都讲了,但是感觉也没讲出什么内容来,只是告诉你来自那篇论文,这样的话可能直接阅读论文更合适。不推荐,cs231n:李菲菲的课程,很有名,专门讲CNN。但是这门课程有一个最大的问题,就是没有字幕,虽然有youtube的自动翻译字幕,但有还不如没有。
5.继续机器学习
深度学习未必就是未来的一定主流,至少一些大牛是这么认为的。传统的机器学习有如下特点,知识系统化,有相对经典的书。其中统计学习(代表SVM)与集成学习(代表adaboost)是在实践中使用非常多的技术。下面是相关资源:
推荐,机器学习(周志华):如果是在以前,机器学习方面的经典教材首推PRML,但现在周老师的书出来以后,就不再是这样了。首先推荐读周老师的书。这本书有一个特点,那就是再难的道理也能用浅显精炼的语言表达出来。正如周老师的名言:“体现你水平的地方是把难的东西讲容易了,而不是把容易的东西讲难,想把一个东西讲难实在太简单”;
不推荐,Pattern Recognition And Machine Learning:当前阶段不推荐。PRML是以贝叶斯的观点看待很多机器学习方法,这也是它的一大特色。但对于初学者来说,这种观点其实并无必要。而且此书没有中文翻译,当前阶段硬啃很容易放弃;
6.开源项目
当知识储备较为充足时,学习可以再次转入实践阶段。这时候的实践仍然可以分两步走,学习经典的开源项目或者发表高质量的论文。开源项目的学习应该以尽量以优化为目的,单纯为读代码而学习效果往往不太好。好的开源项目都可以在Github 里搜索。这里以深度学习为例。深度学习的开源优秀库有很多,例如torch,theano等等,这里列举其中的两个:
推荐,DeepLearnToolbox:较早的一个深度学习库,用matlab语言撰写,较为适合从刚学习的课程转入学习。遗憾的是作者不再维护它了;
推荐,tensorflow:Google的开源库,时至今日,已经有40000多个star,非常惊人,支持移动设备;
7.会议论文
较好的课程都会推荐你一些论文。一些著名的技术与方法往往诞生于一些重要的会议。因此,看往年的会议论文是深入学习的方法。在这时,一些论文中的内容会驱使你学习数学中你不擅长的部分。有时候你会觉得数学知识储备不够,因此往往需要学习一些辅助课程。
当你看完足够的论文以后,在这个阶段,如果是在校学生,可以选择某个课题,以发论文为目的来学习研究。一般来说,论文是工作的产物。有时候一篇基于实验的论文往往需要你写代码或者基于开源项目。因此开源项目的学习与会议论文的工作两者之间是有相关的。
两者可以同时进行学习。关于在哪里看论文,可以看一下CCF推荐排名,了解一下这个领域里有哪些优秀的会议。
下面介绍两个图像与机器学习领域的著名顶级会议:
CVPR:与另两个会议ICCV和ECCV合称计算机视觉领域的三大会,注意会议每年的主页是变动的,因此搜索需要加上年份;Conference on Neural Information Processing Systems:简称NIPS,许多重要的工作发表在这上面,例如关于CNN的一篇重要论文就是发表在上面;
8.自由学习
到这里了,可以说是进入这个门了。下面可以依据兴趣来自由学习。前阶段不推荐的学习资源也可随意学习,下面是点评:
cs229:Ng写的讲义很不错,其中关于SVM的推导部分很清晰,想学习SVM推荐;Neural Networks for Machine Learning:大牛的视角跟人就是不一样,看看Hinton对神经网络是怎么看的,往往会让你有种原来如此的感悟。其实看这门课程也等同于读论文,因为几乎每节课的参考资料里都有论文要你读;CS231n: Convolutional Neural Networks for Visual Recognition:最新的知识,还有详细的作业。国内应该有团队对字幕进行了翻译,可以找找;PRML:作为一门经典的机器学习书籍,是很有阅读必要的,会让你对机器学习拥有一个其他的观察视角;
五.总结
本文的目的是帮助对AI领域了解不深,但又想进入的同学踏入这个门。这里只说踏入,是因为这个领域的专精实在非常困难,需要数年的积累与努力。在进行领域学习前,充分认识自己的特点,制定合适的学习方法是十分重要的。
首先得对这个领域进行充分了解,培养兴趣。在学习时,保持着循序渐进的学习方针,不要猛进的学习过难资源;结合着学习与实践相辅的策略,不要只读只看,实际动手才有成就感。学习某个资源时要有充分的目的,不是为了学开源项目而看代码,而是为了写开源项目而看;不是为了发论文而写论文,而是为了做事情而写论文。
本文来自公众号:“大技术技术汇”,guanzhu了解大数据行业学习大数据技术和学习路线,还有免费学习资料放送。
如果一个学习资源对你过难,并不代表一定是你的问题,可能是学习资源的演讲或撰写人的问题。能把难的问题讲简单的人才是真正有水平的人。所以,一定要学习优质资源,而不是不分青红皂白的学习。最后,牢记以兴趣来学习。学习的时间很长,过程也很艰难,而只有兴趣才是让你持之以恒,攻克难关的最佳助力。
人工智能会取代程序员吗
总的来说,AI 可以为程序员提供新的工作领域,提高工作效率和降低重复性任务的压力,而不是使程序员失业。因此 AI 可能是一个积极的变革力量。ChatGPT 的出现可能对一些具体的工作造成影响,但不会导致底层程序员全面失业。自动化技术,包括人工智能,一直以来都在改变劳动力市场,导致一些工作被自动化,...
人工智能会不会代替程序员?
人类程序员拥有独特的创造力,逻辑思维和解决问题的能力,这些都是机器学习模型所不能替代的。未来,人工智能和机器学习将继续与人类程序员合作,帮助他们提高工作效率,而不是取代他们。我觉得暂时还不会吧,毕竟没有人工智能,它是没有感情的,它只是模拟。近日,OpenAI 发布了一个全新的聊天机器人模型 ...
人工智能时代,程序员会被取代吗?
指定功能的代码实现,bug查找,甚至可以完成简单的网站搭建,虽然没有与人直接沟通来的准确,给出的反馈也不一定完全满足需求,但是,由此产生的效率提升,肯定会给底层程序员带来一定的影响。就像当初工业化进程解放了人类的双手,导致人力资源过剩,现今人工智能技术的发展,一些基础的编程工作也将更多地被...
人工智能时代,会取代程序员吗?
说明这一点的一个例子是,即使chatgpt技术能够使机器人更加智能,仍然需要底层程序编写以及抽象计算机程序关于如何处理对话框的指令,当前也没有任何技术可以取代底层程序员。总之,chatgpt技术只会对人工智能技术的发展带来积极的影响,但它不会对底层程序员的工作和就业有任何影响,底层程序员仍然是人工智能...
人工智能取代程序员的未来会怎样?
并不是说在一家公司就会长久待下去,可能因为你是身处最底层的程序员,因此领导老板为了排除异己把你开掉。这家公司不可以,难道不能去其他公司?东西是死的,人可是活的。别的公司没有人工智能,你照样可以混的风生水起。4:不会失业但一定会有竞争,常常是降薪等手段 人工智能再怎么普遍也不会让...
人工智能编程会代替程序员吗?
据 Insider 报道,一些亚马逊员工已经开始使用 ChatGPT 来帮助编码。尽管如此,关于“程序员要被取代了”的言论并不令人意外,因为每次技术浪潮的到来都会引发类似的讨论。无疑,随着科技的发展,软件开发正变得越来越智能化。今年一月份,ACM 通讯发表了《编程的终结》一文,预测了人工智能编程的未来。文章...
我想学人工智能,现在是个初级程序员,到什么程度可以学习人工智能机器学 ...
说实话,人工智能涉及到领域和课程太多,,学习门槛还是很高的。我现在在科大讯飞工作,我们这边最近上线了一个AI大学,里面的课程浅显易懂很符合零基础的人学习。AI 大学是讯飞开放平台发起搭建的国内首个AI在线学习平台,为所有AI群体提供学习分享和经验交流的机会,秉承“开放、学习、互动、共享”的平台...
人工智能是否会取代程序员?
我感觉人工智能技术的不断发展,已经使其具备了一定编写简单代码的能力,随着进一步的完善,那么很多底层的程序员很有可能因此而变,chatgpt所取代Chatgpt真的是高情商,可以写小说、写诗、写代码,写稿。第一,面对提问,ChatGPT做出了高情商回答。在回答“你是否会抢走我的工作”时,ChatGPT回复:我不会...
计算机老师说未来不需要程序员,都是机器自动生成代码,可能吗?
首先,人工智能也是由程序员创造的。人工智能本质上是一个程序,它不会自我进化。人工智能的进化也是大牛不断科研的结晶。如果人工智能能够实现自我进化和升级,有一天会失去控制,那么只有程序员才能拯救人类。任何一头大公牛都不是天生的大母牛。普通程序员总是日夜敲打代码,学习如何成长为一头大母牛。因...
人工智能对程序员的影响是什么?
ChatGPT 和其他 AI 技术不太可能导致底层程序员失业,但它们可能会影响他们的工作内容和职责。通过使用 AI 技术,公司可以自动化一些以前需要人力的任务,这可以提高效率并节省时间和成本。但这并不意味着会有大量的失业。相反,它可能会重新定义程序员的工作内容,并将他们的重心转移到更高层次的任务上。
邹狠乳宁: 根据我的观察,去解决具体问题是不划算的,因为即便你对那个问题有深入的认识,仍然需要烧掉大量GPU,才能搞出一点效果来.看论文的话,有不少论文,连完整的公式都不列一遍的,就画个layer的示意图让你自己蒙去.还是造深度学习框架才是最好的.现有框架都太烂了,跑分基本上全靠cuDNN,碰到cuDNN里没有的东西,就让你自己去写CUDA.而大部分人更需要的是能直接从数学公式到能运行的代码.毕竟写GPU代码也非常花时间的..
城关区17775282579: 做APP的程序员怎样转行大数据人工智能这些领域 - ?
邹狠乳宁: 不用转行,只要你开发的软件有人用,产生有效,有用的大量数据,并有资格保存到大数据中心的,也算是大数据行业了
城关区17775282579: 我想转行做it,以后往人工智能方向发展 - ?
邹狠乳宁: It入门比较简单,但要做到精就不容易,如果自己是一个喜欢挑战,喜欢不断创新不断学习的人,那么就是合适的,It技术更新换代很快,需要自己不停的跟进,所以看看自己的做事方式就知道自己适不适合.
城关区17775282579: 程序员应该如何转型? - ?
邹狠乳宁: 编程方面的职称有很多 程序员转职 总不能跨越很大 去干根本不相关的事情吧 有管理方向的 软件监护师 软件设计师 系统分析师 测试方向的 游戏测试员 编程物理方向的 网络工程师 可以参照软考等级查看
城关区17775282579: 普通Web 开发程序员想转行做 AI,有必要考研吗 - ?
邹狠乳宁: 考研应该是最快的入门AI的途径:1. Web程序开发,仅仅是一种技能,不涉及到数学、信息等学科的基础知识;人工智能涉及了大量的数学、信息学的知识,如果没有一个系统的学习,很难入门; 2. 现在最前沿的AI,肯定是在顶级期刊中发表出来的,如果没有系统的科研训练,很难掌握这些最新动态. 我觉得是有必要考研的
城关区17775282579: 为什么现在很多程序员都往智能机器人方向发展呢 - ?
邹狠乳宁: 程序员如果想要不被淘汰,一定要更新自己的技术,目前市场上还是以传统的开发为主,智能开发平台是未来的发展趋势,如果利用智能开发平台去从事软件开发业务,利润可想而知,而编程这个行业也将彻底被改变.最近黑马程序员开设了"智能机器人软件”开发的课程
城关区17775282579: 程序员转行有哪些方向 - ?
邹狠乳宁: 1. 程序员最多的两条进阶路线是一条是技术路线,即由程序员、高级程序员、系统分析师,到架构设计师.在这条路线上,立足于从业务模型到计算机软件模型的转换,成为高端的软件技术工作者.2. 另一条是管理路线,即由程序员,经开发...
城关区17775282579: 零基础成为人工智能工程师 ?
邹狠乳宁: 零基础转行人工智能领域是具有较大困难的,原因在于三方面:其一是人工智能是典型的交叉学科,涉及到数学、计算机、哲学、控制学、神经学和语言学等诸多学科,不...
城关区17775282579: 30岁左右的程序员应该往哪个方向转型,或者说工作方向应该怎么转变 - ?
邹狠乳宁: 大体的思路应该是这个样子的: 1、先有重点的掌握一门编程语言(如JAVA)并向相关辅助语言(如javascript,html,css,sql)涉及的三层结构扩展. 2、将重点掌握的语言及辅助语言提升到精通程度并扩展辅助语言. 3、将对精通掌握的语言的了解向理论及深化. 4、在以上基础上钻研流行的框架和模式. 5、在整个过程中不断积累对现实业务的了解及向抽像成编程语言的过程.
城关区17775282579: 如何从程序员成为一名数据科学家 巫银良 - ?
邹狠乳宁: 人工智能听起来好像很酷炫,说白了在金融上的应用主要就三件事:第一,是对于金融数据的高级统计学的应用和分析.比如说,对于传统的线性回归没有办法进行有效的分析归纳的,通过AI、机器学习的算法可以对同样的一组数据用不同纬度...