还在学校的时候,就知道Hadoop的存在了。
2012年在公司实习的时候,买了《Hadoop权威指南第2版》,大致看了下。
今年,抽空也大致喵了几眼。
最大的感悟就是:光看不做,还是不行。
Hadoop最坑最脑残的地方就是,默认不支持在Windows下运行。我的笔记本用的是Windows7系统。
这样,只好安装了VMware,然后安装Ubuntu系统,想通过这种方式来搭建环境。
Hadoop这个大数据处理框架包含了好多内容,MapReduce,HDFS等等。我现在只有个模糊的理解,想通过写代码,再反复看书和看文档的方式,来加深对Hadoop等云计算概念和技术的理解。
我觉得未来,云计算/大数据处理技术将会变得非常平常,就像今天使用Java开发一样。
IT技术实在是太多了,现在真心学得有点累了,不断思考和实践,IT技术之路要怎么搞。
本周,参加了Oracle Endeca的培训。培训老师说,用Oracle的一些技术,根本不用考虑什么大数据,把一切东西都加入到内存中,现在已经有32T的内存了,你敢信。
我觉得这些话也是有道理的,如果不考虑金钱和成本,确实不一定要什么云计算框架。
现实是,32T内存性价比太低,仍然有极限,普通企业不敢用,大型企业不能用(大型企业数据量太大了)。
小雷FansUnion-博学的互联网技术工作者
2014年7月1日
北京-昌平