1.引言
阿里云从2009年开始在云计算服务方面进行研究到目前已经有五个年头了,这五年中阿里云突破了各种各样的技术难题,从去年的5K集群到今年的ODPS,阿里云已经成为云服务产业中的领军人物。在阿里云看来,云计算和大数据是不可分割的,就好比一个硬币的两面,精准的大数据分析依赖于强大的云计算平台。
阿里云总裁王文彬表示:大数据和云时代的到来颠覆了企业传统IT架构,企业IT进入了云服务+数据的时代。传统IT还存在于购买硬件与软件的基础上,而云服务将企业IT变为按需购买,从针对硬件与软件的购买模式上转变为对服务的统一购买。随着移动互联网加互联网的来临,整个模式现在是一个翻天覆地的改变。
2.什么是ODPS
简单来说,ODPS(Open Data Processing Service)是一项Web服务,大家不用花大钱建数据中心,就能分析海量数据。我们测过,100PB的数据任务可在6小时内跑完。这个数据量相当于1亿部高清电影。
如何让数据产生价值?先得拥有大规模处理能力,然后才是挖掘、算法和分析。传统的做法是这样的:租个机房,买一堆昂贵的设备搭建数据仓库,再请一帮技术人员来维护运转。一旦触发bug,或者当数据总量超过100TB时,你的工程师们可能会被这些麻烦搞崩溃。
Hadoop开源系统很伟大,大大降低了成本。阿里是中国玩Hadoop玩得最好的几家公司之一,Hadoop支撑了淘宝、支付宝早期业务的快速发展。不过,自建一个像样的Hadoop集群,得百万起步资金,专业的Hadoop人才更是稀缺。门槛还是太高。
3.御膳房
御膳房,通过它提供的淘宝数据,以及强大稳定的云计算能力,我们可以对其进行数据分析和数据挖掘,并部署数学模型。通过数学模型,我们不仅可以用非线性的算法,寻找到可能会购买店铺目标人群,同时还可以计算目标人群购买概率(购买的可能性大小)。这样,我们就可以根据运营投放计划的人群数量需求,设定合理的购买概率阈值,产出一定人数的精准定向营销人群。另外,根据人群投放的效果和市场/用户的变化,动态更新数学模型,实现营销闭环,从而达到大数据精准营销。
4.一些资料
御膳房官网:http://clouddata.taobao.com/
御膳房数据开发指导:http://setting.tenant.yushanfang.com/portal/help/doc.html?spm=0.0.0.0.OFFct9&file=ShuJuKaiFa
御膳房开发者论坛:https://bbs.aliyun.com/thread/257.html?search=all
odps学习:https://help.aliyun.com/product/8314999_odps.html?spm=5176.750001.2.23.Up8lMy