Hadoop
Mapreduce
Spark
1) 地理信息、计算机等相关专业,本科学历及以上,1年以上大数据挖掘、云计算开发经验;
2) 熟悉主流Web开发框架、中间件以及数据库,熟悉消息队列、缓存等技术应用并有构建高可用软件架构经验;
3) 熟悉主流虚拟化以及云计算平台架构技术,熟悉Linux以及OpenStack相关技术,了解容器技术者优先;
4) 了解分布式并行计算的基础理论,了解主流的并行计算框架,如OpenMP,MPI,OpenCL等;
5) 了解主流的大数据处理框架原理,如MapReduce,Spark,Hadoop,对空间数据的分布式存储、空间分析算法的并行化有过研究经验。
Hadoop+Storm+大型综合项目实训