如何精进大数据技术

前几天跟前58的技术委员会主席孙玄聊天，聊天过程当中得知他想搞大数据课程，因而咱们有了以下对话。

问：根据你的观察，如今企业里面不少想搞大数据的工程师广泛有什么特色？

孙老板：不少同窗的大数据知识是东拼西凑的，看B站上的视频学了一点，项目当中用过一点，没有系统化，并且不深刻，这些同窗实际上是作不了真正的大数据工程师的工做的。

问：那你以为如上的同窗若是想要突破，有什么方式吗？

孙老板：根据我我的经验，有两种方式，第一种：就是跟着企业成长，若是企业的业务发展起来了，那么就会倒逼着这些同窗把技术练出来，为何大厂里面的牛人多，不少状况下就是业务把普通人逼成了牛人。第二种：其实并非每一个人都有机会进到大厂遇到复杂的业务场景，因此还有另一种选择就是靠人带，其实公司里不少架构师都是师傅带徒弟的。随着在线教育的发展，有多年落地经验的靠谱大牛，多年在线培训经验，有可以实操落地，其实可以帮助这些同窗快速提高的。

问：这就是大家设计《企业级大数据资深研发工程师》课的缘由？

孙老板：是的，这个课是由我和沈剑联合打造，由大厂P8+的架构师主讲。

问：那大家这个课跟市场上的大数据的课有什么不一样吗？

孙老板：有很大的不一样，咱们这个课对标的是阿里P6级别的，那真的是对标P6，通常的大数据课程设计的思路是，首先讲各个组件的知识点，讲完之后，再用一两个项目把大数据的各个技术组合一下，那其实这样培养出来的大数据工程师是没有意义的，这样培养出来的工程师只会调各个组件的API，企业里面大数据工程师的工资开得高，可是要求也高。因此咱们这个课的设计思路是，首先讲各个知识点和源码，把各个知识点击破之后，再讲全局架构，面对不一样的场景，应该如何设计咱们的架构，企业里不少业务场景都是相似的，只要给学生演示足够多的业务场景，告诉学生面对不一样场景的解决方案，学生学会了之后就能游刃有余的面对企业里各类复杂的场景，咱们要赋予学生的是一种解决问题的能力。讲彻底局架构之后，最后一步就是讲落地，由于前面只是讲各类架构，各类解决方案，其实尚未落地，因此最后一步就是要把全部的架构方案都要落地，在落地的项目里咱们也是从不一样维度去培养大数据资深研发工程师的，咱们设计了企业级大数据平台的落地项目，由于一个资深的研发工程师应该是有能力去落地一个大数据平台的；咱们设计了数仓的实践项目，数仓能够说是每一个大数据工程师都须要了解的东西；咱们设计了大数据源码二次开发的项目，由于做为一个资深的研发工程师，未来是要往架构师方向走的，因此必须得储备源码二次开发的能力；咱们还设计了离线/实时项目，由于一个资深研发工程师，确定能搞得定大数据项目的开发。经过这套课程，咱们就会把学生的知识由点连成线，把这些知识变为学生真正的能力。

问：大数据里面有那个技能对于大数据工程师来讲比较重要？

孙老板：其实重要的点不少，可是若是非要说一个的话，我认为有阅读源码的能力对于一个大数据程序员来讲是比较重要的，由于大数据是一个开源的技术，并且在企业里面使用的时候很是容易出问题，须要大数据的程序员经过源码去解决一些深层次的问题，不少大数据的程序员一般都会遇到这个瓶颈--不会阅读源码。因此为了帮助这部分同窗突破瓶颈，咱们课程里面会去讲解《HDFS的源码深度剖析》《SparkCore的源码深度剖析》《Kafka的源码深度剖析》等。若是学生跟着能学完这些源码课，其实本身也就掌握了阅读大数据源码的方式方法，长此以往就会有阅读源码的能力。这也是咱们的课程设计的一个核心点。

问：那能归纳性的描述一下，我们课程的特点吗？

孙老板：能够。

特点1、企业级全链路大数据由点到线实战课程

基于企业真实需求，从数据采集到数据存储，数据处理全流程深度剖析，由点到线结构化、体系化教学，真正掌握企业级解决方案和方法。

特点2、企业级分布式大数据平台落地实践

构建大数据平台的 Iass 层、Pass 层，企业级大数据平台落地实操，体验企业级大数据平台从 0 到 1 的构建过程。

特点3、企业级真实案例驱动

基于一线大厂的真实需求，实际落地案例进行剖析。项目需求真实，项目背景真实，项目架构真实，让你具有一线大厂研发经验。

特点4、企业级大数据环境，模拟真实平台

提供企业级大数据开发环境，企业级完备的基础设施支持，供学员在真实环境下进行实操演练。

特点5、多方位企业级项目实践

从不一样角度培养合格的企业级大数据研发工程师，包含源码二次开发实践，企业级数据平台落地实践，数仓实践，离线项目实践，实时项目实践等。

问：那我们课程的大纲设计是什么样的呢？

孙老板：以下图

 

    更多详细课程资料能够扫码领取