大数据好找工作吗?企业在招什么样的大数据工程师?

论坛 期权论坛     
选择匿名的用户   2021-5-26 12:32   662   0
<p>大数据的就业行情到底怎么样?这个坑值得入吗?企业在招什么样的大数据工程师?</p>
<p>今天我们来看一位已经入行的前辈写的深入分析文章。</p>
<p>1、我眼中的大数据现状</p>
<p>其实个人在大数据这个坑中,细细算来时间也有3&#43;年了,从一开始做大数据中心平台开发构建,到现在关注的数据上层应用挖掘。所以,基本上从数据收集-&gt;数据处理(离线实时,并且还勉强算是国内实时处理早期的实践者)-&gt;数据上层应用挖掘,这个链路都走了一遍。</p>
<p>并且加上手里一千多人的大数据圈子,发起组织线下技术沙龙等等经历,坑内里的做的并不算十分的多,但是通过一些交流,接触过的这方面的东西还是不少的。</p>
<p>所以,不至于有资格说对这个技术方向有啥定论,但是一些自己的看法见解还是有滴。</p>
<p>说起大数据,有个成语可以来形容一下它的现状:<strong>遍地开花</strong>!</p>
<p>如今,在国内,只要是个IT公司(说的是非传统行业),出去的时候,感觉要是说自己公司没有涉足大数据都不好意思。所以,现在的情况大部分是这样的:一个创业公司哪怕只有十多人的开发团队,也非得整一个大数据小组出来,我们不止要做大数据离线处理,还要做离线处理,不止有数据分析报表,我们还得进行深度的数据挖掘,做到精准的个性化推荐,流弊的数据预测!</p>
<p>偶滴娘亲啊,寥寥数人,不止要搭起一整套完整的数据收集、数据传输、数据离线实时处理,不止要维护hadoop集群、spark集群、storm集群的稳定性,抽空还要做深层数据挖掘,还要研究工业化流弊的算法。你们招的这些人不是攻城狮啊,是神啊!这么流弊!</p>
<p>其实我并没有说这种做法一定是错的,只是行业现状真心很多这种情况。如今,<strong>大数据确实是异常略微畸形的火爆</strong>!至于说大数据这个技术方向为何会如此的爆炸,个人的观点可能和大部分的观点一样:<strong>一方面是数据积累到一定程度了;</strong><strong>另一方面是大规模数据处理技术的日渐成熟,其中当然以hadoop生态为代表。</strong></p>
<p> </p>
<p><img alt="" class="blockcode" src="https://beijingoptbbs.oss-cn-beijing.aliyuncs.com/cs/5606289-0263278e4f88328a471c5c5d4b97a3bc"></p>
<p>但在不久前,我曾和一个创业公司的COE聊过这个话题,他的观点很新颖。他反驳了我的观点,他说<strong>中国现在之所以大数据遍地开花,是由于赚钱模式变了。</strong>他说,在以前,随便搞点啥都能拉到一大堆投资,但现在经济形势不一样了,必须想其他新的触发点,那就是数据,并且围绕数据而产生新的利益点,这样,投资人才愿意投钱进来,所以是个公司都愿意和大数据沾点边,不然都不好意思出去说。如果你对大数据开发感兴趣,想系统学习大数据的话,可以加入大数据技术学习交流扣扣群:458数字345数字782,欢迎添加,私信管理员,了解课程介绍,获取学习资源</p>
<p>就个人而言,其实感觉他说的也挺有道理的,不过我依然保持自己的看法,只是两人看待事情的角度有些不一样,我是从技术的角度去解析这个情况,而他则更多从创业者的角度试图去解释这个事情。无关对错! 就目前来说,业内大数据遍地开花这个情况确实是存在的,个人感觉大体上有如下的具体变化:</p>
<p><strong>1)涉足的数据处理方式上来说,大规模离线处理已经被玩坏了</strong>,稍微有点实力的公司都已经开始离线、实时并行了(近一两年Storm、Spark强势崛起);</p>
<p><strong>2)而在数据来源上,已经不再局限于自个的数据了</strong>,越来越多的公司开始爬取互联网上的公共数据(我曾在《DT时代变革的反思》一文中比较详细的分析过这个数据新来源); 而在数据的上层应用上,也已经不再局限于多维统计分析,渐渐得向用户画像、精准个性化推荐、业务的预测等方向靠拢(但实际上深层挖掘方面,国内还是很low的);</p>
<p>2、大数据年份这东西</p>
<p>之前和朋友吃饭时聊的时候,他说到大数据这个技术方向的积累问题。他曾感叹到,<strong>大数据这个方向还是缺少底蕴。</strong>我问他为何这么说,他说你见过十年以上的大数据专家么?其他行业方向,比比皆是!我顿时无语,<strong>大数据这个技术方向满打满算才发
分享到 :
0 人收藏
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

积分:3875789
帖子:775174
精华:0
期权论坛 期权论坛
发布
内容

下载期权论坛手机APP