• 大数据概述


    1.试述大数据对思维方式的重要影响。

      大数据又称为巨量数据、海量数据,是由数量巨大、结构复杂、类型众多数据构成的数据集合,是基于云计算的数据处理与应用模式,通过数据的集成共享,交叉复用形成的智力资源和知识服务能力。与传统数据相比,大数据具有来源广、规模大,更容易发现事物之间的关联性,实现对未来的合理预测的新特点。早在1980年,美国着名的未来学家阿尔文·托夫勒在《第三次浪潮》一书中,就将大数据热情地赞颂为“第三次浪潮的华彩乐章”。
      大数据作为数据分析的前沿技术,它具有四个明显的特征。

           一是数据体量巨大。据统计,目前为止人类生产的所有印刷材料的数据是200PB,而历史上全人类说过的所有话的数据量是5EB。以前,GB级数据就是个天文数字,但现在个人计算机的容量大多是TB量级,一些大企业的数据量已接近EB甚至ZB级量级。

           二是数据模态繁多。既包括以文本为主的结构化数据和半结构化数据,更包含网络日志、音频、视频、图片、地理位置信息等多类型的非结构化数据。要处理如此海量的非结构化数据,非通过特定的大数据处理技术提取不可。

           三是价值密度较低。相关专家指出,就大数据的价值而言,就像沙里淘金,大数据的规模越大,真正有价值的数据相对越少。不言而喻,大数据的价值密度与总量的大小成反比。如何通过强大的机器算法更迅速地完成数据的价值“提纯”是当下亟待解决的难题。

           四是生成速度要快。在互联网高速发展的大背景下,人们对数据的实时性动态性的需求越来越清晰。如何以近乎实时动态的方式,将数据传递交换给用户,确保永远在线并能随时调用和计算,很大程度上考验着服务商处理数据的效率。
      由此观之,相较于传统的煤、石油等物质性资源不可再生、很难共享,大数据作为一种新兴的战略资源,既可以重复使用,还能在共享的前提下,产生新的价值,制造共赢,因而也被人们赋予更多的期待。
      毫无疑问,大数据正以极速方式嵌入经济社会生活的方方面面。数据驱动发展已成为时代主题,大数据正在开启一个崭新时代。它不仅为新一代信息技术产业提供了核心支撑,正成为经济增长和社会发展的高速引擎、科技创新的新动力和新源泉。
      ———大数据正重塑企业未来发展的方向。大数据作为未来的“石油”、隐形的“金矿”、经济的“燃料”,正和企业固定资产、人力资本等生产要素一起,被纳入企业最宝贵的生产要素进行管理;大数据正与企业品牌、人才、发展战略等形成企业巨大的无形资产,作为全球经济低迷环境下的产业亮点,成为是战略新兴产业最活跃的部分。谁能顺应数字驱动发展这一主题,谁就能顺势谋变、乘势而起,必将成为新时代的新领军人物;谁墨守成规而无动于衷,谁就会使企业丧失市场竞争的活力和动力。
      ———大数据正掀起国家和社会治理革命。利用大数据及其分析技术,可以使政府及其各社会治理主体快速获取有价值的信息,提高公共决策和社会治理能力,及时破解治理中存在的顽疾和痛点,深化阳光政府、责任政府和智慧政府建设,提升国家和社会治理效率、重构治理模式;它可使精准医疗、个性化教育、社会监管、舆情监测、安全预警等以往无法实现的环节变得更加简单、可操作;它可以更好地维护数据主权、开放数据资产、保持在数字空间领域的国家竞争力,进而更好地维护国家网络空间主权。
      ———大数据正成为地方和城市发展的新引擎。迄今为止,越来越多的地方和城市,已深刻认识到大数据的巨大价值及潜力,将大力发展大数据产业摆上重要日程,纷纷推出相关战略及行动计划,着力推动大数据与“工业化、信息化、城市化、农业现代化”的互动、协同、整合发展,以确保在大数据发展浪潮中抢占一席之地,进而提升地区和城市的竞争力和综合实力。
      大数据技术的快速发展,不仅是带来了一场企业及技术革命、国家和地方治理革命,更给人们特别是决策者的认知能力带来升华的新机遇。
      为此,全社会必须牢固树立大数据思维,积极适应大数据带来的整体观念变革。
      一是推动从样本思维向总体思维转变。以往,由于诸多客观条件限制,人类无法获得所研究对象的总体特征和数据信息。因而,在决策时只能通过采样手段来获取数据进行分析或推理,其结论往往是一叶障目,不见泰山;在大数据时代,人们可以更加方便、快捷、动态地获得所研究对象的所有数据,并具备全样本数据分析能力,更能从海量信息中寻求客观真理。这就要求我们对数据的思维方式,也应该从样本思维转向总体思维,从而能够更加全面地把握全局。
      二是推动从局部思维向全局思维转变。过去,人们在决策时,往往只有基于视野范围之内,在极为有限的局部信息中寻求次优决策,不异于是井底之蛙;而依据大数据则可将整个大千世界尽收眼底,更加系统地把握客观对象,从而实现最优决策。
      三是推动从精确思维向容错思维转变。在小数据时代,由于收集的样本信息量少,必须确保记录的数据尽量结构化、精确化。否则,分析得出的结论在推及总体上就会南辕北辙。然而,在拥有海量即时数据时,绝对的精准已不再是主要目标,适当忽略微观层面上的精确度,容许一定程度上的错误与混杂,反而更能在宏观层面拥有更好的洞察力。
      四是推动从因果思维向相关思维转变。过去,人们在对小样本数据进行分析时,往往执着于现象背后的因果分析,试图通过有限样本数据来剖析其中的内在机理。但小数据的一个极大缺陷就是有限的样本数据无法反映事物之间普遍性的相关关系。而在大数据时代,通过相关技术可以挖掘出事物之间隐蔽的相关关系,可以准确地获得更多的认知和洞见,从而帮助人们捕捉现在和更好地预测未来。
      五是推动从自然思维向智能思维转变。大数据时代的到来,为提升机器思维由自然思维向智能思维转变带来了大好契机,特别是随着物联网、云计算、社会计算、可视化技术的突破发展,使得大数据系统也能类似人脑一样,自动搜索所有相关的数据信息,进而主动、立体、逻辑地分析数据、做出判断、提供洞见,从而具有类似人类的智能思维能力和预测未来的能力。

    2.详细阐述大数据、云计算、物联网之间的区别与联系。

           大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。
           云计算是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。
           物联网是利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起,形成人与物、物与物相联,实现信息化、远程管理控制和智能化的网络。

           物联网对应了互联网的感觉和运动神经系统。
           云计算是互联网的核心硬件层和核心软件层的集合,也是互联网中枢神经系统萌芽。
           大数据代表了互联网的信息层,是互联网智慧和意识产生的基础。

           从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘,但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。
           物联网、移动互联网再加上传统互联网,每天都在产生海量数据,而大数据又通过云计算的形式,将这些数据筛选处理分析,提前出有用的信息,这就是大数据分析。所以说,大数据、云计算、物联网和互联网都是密切相关的,国家大力倡导发展大数据产业,主要归结于互联网、移动设备、物联网和云计算等快速崛起,全球数据量大大提升。

           大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。

     3.简述你对大数据应用与发展的看法,以及你在这次大数据浪潮中想扮演什么角色。

           大数据帮助政府实现市场经济调控、公共卫生安全防范、灾难预警、社会舆论监督;大数据帮助城市预防犯罪,实现智慧交通,提升紧急应急能力;大数据帮助医疗机构建立患者的疾病风险跟踪机制,帮助医药企业提升药品的临床使用效果帮助艾滋病研究机构为患者提供定制的药物;大数据帮助航空公司节省运营成本,帮助电信企业实现售后服务质量提升,帮助保险企业识别欺诈骗保行为,帮助快递公司监测分析运输车辆的故障险情以提前预警维修,帮助电力公司有效识别预警即将发生故障的设备;大数据帮助电商公司向用户推荐商品和服务,帮助旅游网站为旅游者提供心仪的旅游路线,帮助二手市场的买卖双方找到最合适的交易目标,帮助用户找到最合适的商品购买时期、商家和最优惠价格;大数据帮助企业提升营销的针对性,降低物流和库存的成本,减少投资的风险,以及帮助企业提升广告投放精准度;大数据帮助娱乐行业预测歌手,歌曲,电影,电视剧的受欢迎程度,并为投资者分析评估拍一部电影需要投入多少钱才最合适,否则就有可能收不回成本;大数据帮助社交网站提供更准确的好友推荐,为用户提供更精准的企业招聘信息,向用户推荐可能喜欢的游戏以及适合购买的商品。

           其实,这些还远远不够,未来大数据的身影应该无处不在,就算无法准确预测大数据终会将人类社会带往到哪种最终形态,但我相信只要发展脚步在继续,因大数据而产生的变革浪潮将很快淹没地球的每一个角落。未来的大数据除了将更好的解决社会问题,商业营销问题,科学技术问题,还有一个可预见的趋势是以人为本的大数据方针。人才是地球的主宰,大部分的数据都与人类有关,要通过大数据解决人的问题。比如,建立个人的数据中心,将每个人的日常生活习惯,身体体征,社会网络,知识能力,爱好性情,疾病嗜好,情绪波动……换言之就是记录人从出生那一刻起的每一分每一秒,将除了思维外的一切都储存下来,这些数据可以被充分的利用:医疗机构将实时的监测用户的身体健康状况;教育机构更有针对的制定用户喜欢的教育培训计划;服务行业为用户提供即时健康的符合用户生活习惯的食物和其它服务;社交网络能为你提供合适的交友对象,并为志同道合的人群组织各种聚会活动;政府能在用户的心理健康出现问题时有效的干预,防范自杀,刑事案件的发生;金融机构能帮助用户进行有效的理财管理,为用户的资金提供更有效的使用建议和规划;道路交通、汽车租赁及运输行业可以为用户提供更合适的出行线路和路途服务安排。

           当然,上面的一切看起来都很美好,但是否是以牺牲了用户的自由为前提呢?只能说当新鲜事物带来了革新的同时也同样带来了“病菌”。比如,在手机未普及前,大家喜欢聚在一起聊天,自从手机普及后特别是有了互联网,大家不用聚在一起也可以随时随地的聊天,只是“病菌”滋生了另外一种情形,大家慢慢习惯了和手机共渡时光,人与人之间情感交流仿佛永远隔着一张“网”。

  • 相关阅读:
    01数据结构——绪论
    07机器学习实战k-means
    OpenJudge 2756 二叉树
    Poj/OpenJudge 1094 Sorting It All Out
    OpenJudge 2811 熄灯问题 / Poj 1222 EXTENDED LIGHTS OUT
    OpenJudge/Poj 1083 Moving Tables
    OpenJudge 2810(1543) 完美立方 / Poj 1543 Perfect Cubes
    Poj/OpenJudge 1042 Gone Fishing
    Poj 1013 Counterfeit Dollar / OpenJudge 1013(2692) 假币问题
    Poj 1017 / OpenJudge 1017 Packets/装箱问题
  • 原文地址:https://www.cnblogs.com/cs007/p/8507812.html
Copyright © 2020-2023  润新知