开始接触的大数据的时候,还只是开源的hadoop,从一开始的开源版本的搭建大数据平台,到如今有CDH、TDH...商业版的大数据平台。从运维部署到上产上线,逐步趋近于简单化,小编愈来愈感受到若是再不学习,恐怕程序员这个行业还会大大缩水。前几年老是据说,大数据火啊火啊,工资高啊高,真正接触几年之后,才发现技术发展的太快了。从一开始的MR,一直到spark,到如今商业版的大数据几乎不须要写多少代码,几条SQL语句,底层不知道作了多少转化,虽然是之后的趋势吧,可是感受做为一个猿,仍是要秉承着终身学习优良传统,头发又算什么,知识才是粮食。
说了这么多,为何小编这么有感慨呢,之前搭建hadoop平台都知道,HA过程那是比较复杂的,搞很差不是namenode常常挂,就是常常进入safemode。如今好了docker来了,k8s来了,总体上云,基于容器,有自动容灾,实时建立。小编最近就在研究基于k8s的大数据平台,也是一个入门的小白,深深的感受到了运维哥们的不容易,公司新来的机器,上午上班就在生产上,一直到晚上才下来。
其实说了这么多废话,小编我也不知道为何写这篇博文,但总结的,本身最近懒惰,无所事事,借助写这篇文章勉励一下本身。咱也立一个flag,两周一篇技术博,毫不拖泥带水,全上干活货。最后,要有本身的态度,写本身的博客,让别人看去吧。.....额 这个文采还真是烂,看来要多读读书了。感受标题挺吸引人的,应该会有闯进来看,而后贡献流量以后,暗骂的博友们吧,emm.... 那我只能说很差意思,今天加这一篇博文,打算写两篇,算了算了,废话少说,我仍是构思下一篇博文吧。node