[ 更换 ]
热门城市
北京上海广州深圳成都杭州南京武汉天津西安重庆青岛沈阳长沙大连厦门无锡福州济南宁波昆明苏州郑州长春合肥南昌哈尔滨常州烟台南宁温州石家庄太原珠海南通扬州贵阳东莞徐州大庆佛山威海洛阳淮安呼和浩特镇江潍坊桂林中山临沂咸阳包头嘉兴惠州泉州三亚赣州九江金华泰安榆林许昌新乡舟山慈溪南阳聊城海口东营淄博漳州保定沧州丹东宜兴绍兴唐山湖州揭阳江阴营口衡阳郴州鄂尔多斯泰州义乌汕头宜昌大同鞍山湘潭盐城马鞍山襄樊长治日照常熟安庆吉林乌鲁木齐兰州秦皇岛肇庆西宁介休滨州台州廊坊邢台株洲德阳绵阳双流平顶山龙岩银川芜湖晋江连云港张家港锦州岳阳长沙县济宁邯郸江门齐齐哈尔昆山柳州绍兴县运城齐河衢州太仓张家口湛江眉山常德盘锦枣庄资阳宜宾赤峰余姚清远蚌埠宁德德州宝鸡牡丹江阜阳莆田诸暨黄石吉安延安拉萨海宁通辽黄山长乐安阳增城桐乡上虞辽阳遵义韶关泸州南平滁州温岭南充景德镇抚顺乌海荆门阳江曲靖邵阳宿迁荆州焦作丹阳丽水延吉茂名梅州渭南葫芦岛娄底滕州上饶富阳内江三明淮南孝感溧阳乐山临汾攀枝花阳泉长葛汉中四平六盘水安顺新余晋城自贡三门峡本溪防城港铁岭随州广安广元天水遂宁萍乡西双版纳绥化鹤壁湘西松原阜新酒泉张家界黔西南保山昭通河池来宾玉溪梧州鹰潭钦州云浮佳木斯克拉玛依呼伦贝尔贺州通化朝阳百色毕节贵港丽江安康德宏朔州伊犁文山楚雄嘉峪关凉山雅安西藏四川广东河北山西辽宁黑龙江江苏浙江安徽福建江西山东河南湖北湖南海南贵州云南陕西甘肃青海台湾内蒙古广西宁夏香港澳门
培训资讯网 - 为兴趣爱好者提供专业的职业培训资讯知识

必看:大数据初级开发者和准备从事大数据的人

大数据 开发 数据 的人

一起交个朋友吧

必看:大数据初级开发者和准备从事大数据的人

中国的IT行业因为有人口福利,所以但凡有个细分领域可以互联网+的,搞个应用服务,能有个日活10w+都可以活得很好了,当然像抖音那种现象级的APP日活过亿的,早已赚的盆满钵满。中国的IT行业的蓬勃发展,蛋糕之大,让所有IT行业从业者的收入总体处于行业前列,可比拟的只有金融行业——一个不创造财富,只分配财富的行业。

1.为什么很多人进入IT/大数据行业?

工作这些年,参与和负责的面试人数在百人以上,也算见识过形形色色的面试者,有初出校园的大学生,有深入行业多年的佼佼者,有某个领域的专家人物;见识过计算机相关专业的人很不专业,也有跨行自学大数据的转型成功的优秀人员。因为IT行业的诱人薪水,面试过很多甚至名校毕业的人转行大数据,比如有中科院材料学硕士转行大数据,也有中科大本硕物理学自学IT的,更有浙大传播学,山大机械专业等优秀学子加入我们这个行业。

为什么那么多优秀的实体行业的人加入IT行业?兴趣之外,更多的是收入使然吧。一个简单例子,之前和我聊了一个多小时的一个大哥,中科院材料学硕士,毕业几年北京薪水20k,但是这个收入对于IT行业来说,这个背景,这个工龄,真心不高。有时候我们怀揣理想,但是也要脚踏实地,老婆孩子热炕头——这就是他转行自学IT,自学大数据的原因。有时候我在想,一个大国,非实体的行业的过渡发展,繁荣的背后也许并不一定是件好事。是否大哥在材料学的投入对国家的产出也许比IT行业更大,但是对个人来说,也许IT行业的工作更加衣食无忧。

IT行业收入很可观,大数据在行业的收入更加可观。在一线城市,北上广深,一般工作3年以上20k+,5年以上30k+,优秀的人才需要的时间更短。我有同事,88年,年薪100万+。虽然大数据行业的薪水很高,但是优秀的人才很少。每天Boss收到十几份简历,却招聘不到合适的人。我们能在这个行业拿到高薪,不是因为我们牛逼,而是因为我们站在了风口上,因为我们这个行业处在上升的空间,如是而已。

2.给大数据从业者一点个人建议

这是一个主观的,个人意见,也许你认为是狂犬吠日的,也可以说是夏虫不可语冰,都可。老子曰:上士闻道,勤而行之;中士闻道,若存若亡;下士闻道大笑之,不笑不足以为道。

2.1从面试官的角度

经常面试,也会经常收到猎头,人事,或者Boss上的简历筛选,有些简历上写的从linux,hadoop,hive,hbase,spark,scala,hbase,kafka,flume,hue,oozie,impala,flink各个组件使用,各个项目的穿插,这种一般面试多的人看一眼都知道是培训机构刚出来的 ,或者刚转行的小白。恨不得告诉别人自己熟悉各个组件的生产应用,熟练掌握各种调优。但实际是十个面下来至少九个半是小白吧,甚至都没有搞过大数据开发。

因为很简单,大数据培训机构的老师绝大部分都是一直做培训的,啥热学啥,很多自己都没有搞过大数据的开发,教你也是入门,demo,远达不到企业成熟开发的要求,而且培训没啥重点,也不清楚大厂是如何搞的开发。包括大数据性能优化,如果你没有经历过性能瓶颈,所谓的调优学习都是扯淡。但是如果你入门,培训机构的视频很适合你,效果比你自学好很多,最起码带你入门,某宝有,如何有大佬指点更好。

这里我并不是鄙视培训机构出来的人,反而我在招聘中更注重一个人的学习能力的考察,主动自我提高的驱动性。技术在不断地更新迭代,优秀的人才总是那些不断自我怀疑,自我学习的人。甚至有些培训机构几个月出来的人,比工作好几年的人都优秀。大学老师说:毕业只是开始,而不是结束。那些愿意自我学习,自我改变的人,才值得我们尊重,当然他们也会在转型时走很多弯路,坎坷之路。

为什么前面我说可以一眼识别出小白的简历,因为千篇一律。实际工作中,对于大厂而言,每个人负责的,专业的也就是那么几个模块,比如大数据开发,分为离线和实时,离线用的主要就是是SQL类,Spark这块,数仓建模;实时主要是flink,kafka,sparkt streaming,hbase等。如果是PAAS大数据平台,大厂每个人也就负责那一两个组件的维护,开发,更新等。如果是运维,每个人负责的面更加具体化,监控的,主机的,甚至各个组件都有专门的人负责开发。比如我之前所在的大厂,Hive组件,Spark组件,Kafaka组件等都是分别好几个人单独维护开发。对于小公司来说,也不至于一个人全栈,如果是全栈,那只能说那个公司数据的规模小到只需要会个demo即可满足。

我们招聘过Hbase开发的同学,有个大哥让我印象深刻,简历只写了Hbase相关的开发,优化,甚至社区提交的Committer。其实他背景很普通,大专,8年,但是却收割了很多大厂,360,百度,陌陌,京东。职位的薪水很高,很高。这就叫术业要有专攻。大数据开发不是要你对所有的组件的熟练使用,而是要精通,深入某一两个组件的生产应用就可以超出别人很多。招聘最怕的就是万精油。

2.2大数据初级人员的建议

后台总是不断有同学私信问我,想转行大数据行业,该如何学习,或者选择哪个方向?虽然我想一一解答,但是不是一两句话能说清楚,心有余而力不足,有时会加微信语音聊几句,有时候也会因为工作忙也会忘记回复。

2.2.1 选择自己的方向,二选一

前面我说了,每个人的精力有限,能力有限,术业有专攻。所以就整个大数据行业来说,你不需要懂所有,最起码前期不需要,也很难做到。所以首先选择一个方向

大数据行业你是想做大数据开发还是大数据运维?

大数据开发更偏向于业务层面,一般会做从数据接入,到数据加工,数据存储,到最后数据输出整个流程,基于业务层面加工。这个也分为实时和离线吧。实时会实时数据接入,kafka/flume、spark streaming/flink等,流式数据可能最后入数仓,给离线同学开发,也可能存放hbase等,做实时查询使用,这里不具体深入。离线一般数据存放在数仓后,数据建模,hive、spark,tez等做数据建模,数据加工,最后数据输出等。

大数据运维,一般看公司大小吧,一般就是组件层面,集群搭建(这个小概率,一遍公司集群都搭建好了),集群运维,组件优化,性能调优,监控,自动化运维等,当然小公司还牵扯到PAAS平台的搭建,比如调度,探查,数据资产建设等。大公司一般会更加细化不同部门处理。

从实际招聘来看,优秀的大数据运维比大数据开发更加难招聘,薪水也更高,工作更好找。当然大数据运维的人数远比开发少,一个偏后台纯技术,一个偏业务,技术应用。看个人喜好,我个人觉得开源apache hadoop集群的运维人员比开发有前途,cdh相对比较简单。

2.2.2 选择方向后,如何干?

所以学习转行之前,可以先选择方向,比如做选择大数据开发,搞离线开发,那就把离线开发这块玩透彻,底层原理,精通性能优化,数仓建模,可以不管不会flink,kafka,sparkstreaming,flume等。照样 可以拿高薪,因为技术人员需要的是专业性,而不是多样性。 选择其他方向依次类比。

必看:大数据初级开发者和准备从事大数据的人

选择大于努力

对于初级入门者,工作五年以内的,如果有机会进大厂,一定进大厂,要学习下见识下什么叫做牛逼的架构,什么叫做成熟的框架,规范,先进的技术,看一堆牛逼的人搞出来的牛逼的东西。先学会看别人如何玩,再学会如何提高自己。所以这也是为什么很多大厂出来的人去小公司都会觉得其技术搞的垃圾,其实相比确实很一般,我也曾深有体会。这也是小公司做到一定规模为啥喜欢招聘大公司出来的优秀人才去升级改造一个道理。

暂时写到这儿吧,有空在更新..........

必看:大数据初级开发者和准备从事大数据的人

相关内容

【联线智慧法院】内蒙古自治区高级人民法院举办第十四期政法大数据平台与规范量刑智能辅助系统培训

为全面贯彻落实2023年全区政法工作重点任务,进一步提升全区法院应用政法大数据智能化应用平台的能力和水平,10月20日,自治区高院针对全区政法大数据平台及规范量刑智能辅助系统的使用开展全面系统的实操培训。自治区高院党组副书记、副院长王旭军,···

贵州省生态环境厅电子政务中心举办2023年全省生态环境网络安全培训班

10月12日至13日,贵州省生态环境厅电子政务中心举办了2023年全省生态环境网络安全培训班,厅直属各单位和各市(州)生态环境局信息技术负责人现场参训,各区(县)生态环境分局通过视频会议参训。本次培训班强调,贵州省生态环境厅电子政务中心作为···

提升网络建设水平 海南举办2023年电子政务网络安全专题培训

新海南客户端、南海网、南国都市报5月19日消息(记者 姚皓)5月19日,海南2023年电子政务网络安全专题培训在澄迈举行,活动旨在加快推进海南省网络安全建设,加强全省党政机关单位网络安全防护水平,为海南自贸港、数字政府建设创造安全、有序、稳···

格尔木市气象局举办2023年网络安全培训班

10月27日,格尔木市气象局举办网络安全知识培训班,进一步加强网络安全宣传教育,营造安全、健康、文明、和谐的网络环境。格尔木市气象局全体干部职工通过线上或线下方式参加了此次培训。培训围绕网络安全、数据安全等方面展开,解读了当前国内外网络安全···

2023年黑龙江省网络安全宣贯培训会在哈尔滨召开

为贯彻落实中央网信办、公安部相关工作要求,推动党委(党组)网络安全工作责任制和关键信息基础设施安全保护制度深入落实,7月18日,由省委网信办、省公安厅联合举办的2023年黑龙江省网络安全专题培训暨《关键信息基础设施安全保护要求》国家标准宣贯···

京湾区数学建模与人工智能培训在澳门举办

8月25至26日,国家人工智能推广暨京湾区数学建模与人工智能培训在澳门培正中学及康桥教育中心举行。图为部分出席者25日在澳门培正中学合影。 钟欣 摄中新网澳门8月26日电 国家人工智能推广暨京湾区数学建模与人工智能培训25日至26日在澳门培···

淘宝大学参与香港KOL培训 赋能香港青年就业创业

中新社香港3月16日电 (记者 史冰筠)香港青年电商促进会16日宣布,将同阿里巴巴旗下培训平台淘宝大学联合举办淘宝主播培训班,聘请淘宝大学专业的直播导师进行授课,希望赋能学员通过电商拓宽就业、创业渠道,带动香港电商发展。香港青年电商促进会在···

调查:近半香港企业开展新科技培训 涵盖大数据等

中新网6月25日电 据香港《文汇报》报道,香港的一项调查发现,46%受访企业于过去2年间,已开展和新科技有关的雇员培训,内容涵盖大数据、云端技术、物联网及人工智能等。香港人力资源管理学会公布香港培训调查报告。图片来源:香港《文汇报》/赵梦萦···

港媒:近半香港企业开展新科技培训 涵盖大数据等

据香港《文汇报》报道,香港的一项调查发现,46%受访企业于过去2年间,已开展和新科技有关的雇员培训,内容涵盖大数据、云端技术、物联网及人工智能等。香港人力资源管理学会公布香港培训调查报告。图片来源:香港《文汇报》/赵梦萦 摄香港人力资源管理···

自治区司法厅举办全区司法行政系统网络安全和信息化建设工作能力提升培训班

为深入学习贯彻党的二十大精神和习近平新时代中国特色社会主义思想,贯彻落实习近平总书记对网络安全和信息化工作的重要指示和全国网络安全和信息化工作会议精神,推动全区司法行政系统网络安全和信息化建设工作高质量发展,9月19日—20日自治区司法厅组···

2021年甘肃省网络安全管理员培训班在兰开班

中国甘肃网12月27日讯(本网记者 李红军 任磊)今天上午,由甘肃省委网信办主办、兰州大学国家大学科技园承办的2021年甘肃省网络安全管理员培训班在兰州开班。省委网信办副主任刘宗礼出席开班仪式并作动员讲话,兰州大学网信办主任、信息科学与工程···

数据库使用方法系列培训活动之二|台湾月旦知识库线上讲座

会议主题:西北政法大学【月旦知识库】教育训练会议时间:2022/01/18 15:30-17:30 (GMT+08:00) 中国标准时间 - 北京点击链接入会,或添加至会议列表:https://meeting.tencent.com/dm/···

2023年1 X大数据平台运维证书省级师资培训在河南开放大学举办

7月13日上午,2023年1+X“大数据平台运维证书”省级师资培训在河南开放大学(郑州信息科技职业学院)开班,此次培训由河南省教育厅主办,郑州信息科技职业学院承办。河南开放大学(郑州信息科技职业学院)副校长李小明、培训学院院长张颖、信息工程···

【国家网络安全宣传周】福安市开展网络安全培训

为进一步提升网络安全管理工作水平,增强广大干部网络安全风险防范能力,9月12日下午,福安市开展网络安全培训,福安市各乡镇(街道)、市直单位网络安全业务人员90余人参加培训。本次培训邀请了奇安信福建分区网络安全技术人员郑泽辉进行授课。现场培训···

花溪区开展教育系统网络安全培训

7月4日,由花溪区委网信办指导,区教育局主办的花溪教育系统数据安全培训在溪南高中举行,全区公民办中小学、幼儿园、中职学校相关人员300余人参训。培训邀请网络工程师对数据安全文件进行解读,并通过真实案例介绍了数据安全的问题及处置方法以及数据安···

2023年广西招商引资大数据平台(二期)专题培训会在邕召开

8月24日,2023年广西招商引资大数据平台(二期)专题培训会在南宁召开。培训会邀请大数据招商专家对平台新增功能及使用操作进行讲解,并介绍近年招商工作趋势和产业发展特点,分享大数据招商工作经验和典型案例。全区各市、县区、园区招商业务骨干和自···

云南粉笔:依托大数据智能分析打造公考培训新标准

2023年9月2日,云南粉笔在昆明举行了盛大的省考产品发布会,吸引了来自全国各地的教育专家、媒体代表以及公考学子齐聚一堂。本次发布会上,粉笔推出最新研发的省考培训产品,将线上与线下课堂相结合,依托大数据智能分析,打造公考培训新标准。 云南粉···

2023年度室内设计1 X证书师资及考评员培训(黑龙江站)成功举办

2023年8月21日-25日,为提升试点院校“室内设计职业技能等级证书”教育培训质量,积极推动2023年度证书试点工作顺利开展,由中国室内装饰协会主办、哈尔滨职业技术学院承办、黑龙江省室内装饰协会协办的“2023年度全国室内设计职业技能等级···

昆明经开区开展2023年春漫社区老年人智能手机使用暨网络安全培训活动

来源:【昆明日报-掌上春城】掌上春城讯 “五社联动送服务,点亮民生微幸福”。8月17日,昆明经济技术开发区青年志愿者协会党支部在春漫社区组织开展“融入智能e时代 健康银龄新生活”老年人智能手机使用暨网络安全培训活动。本次培训活动围绕老年人日···

2023年全省“十四五”全民健康信息化与网络安全培训班举办

5月11日—12日,2023年全省“十四五”全民健康信息化与网络安全培训班在张家口市举办。省卫生健康委二级巡视员范素文出席会议并讲话。培训班总结了2022年网络安全和信息化工作,安排了2023年重点工作。培训班邀请国家和省内有关专家对卫生健···