5.1 认识大数据 学案

第二十二讲?认识大数据 学习目标 1.认识大数据及其特征； 2.理解数据对日常生活的影响。 学习内容 在日常工作、生活和学习等活动中，人们的一举一动基本上都可以数字化。例如，从家中出门到达工作地点选择的交通工具、路线和所用时间；每刷一次微博、拨打一次电话、发送一条短信、网上银行转账或者浏览相关网站，甚至所在的地理位置信息等都产生了大量数据。 在第一章，我们已经介绍了数据的基本概念与特征，下面我们将学习大数据的基本概念与特征。 大数据 大数据是指无法在可承受的时间范围内用常规软件工具进行高效捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。) 大数据的产生是与人类日益普及的网络行为所伴生的：物联网、云计算、移动互联网、车联网、手机、电脑以及遍布地球各个角落的各种各样的传感器，无一不是数据的来源或是承载的方式。互联网生成的数据量，不仅远超此前一切人类所生成的数据量的总和，而且在以大爆发性的速度不断增长。 在天气预报、大气监测、地球物理探矿和天体运动观测等科学实验和科学观察等活动中，各种各样的传感器每时每刻都在产生大量的数据。 大数据已成为人们提取信息、做出决策的重要依据，是推动信息社会发展的重要资源。 大数据的特征) 我们正处于一个大数据时代，大数据使人们的生活、工作与思维方式等都产生了巨大的变革。那么，大数据究竟具有哪些特征? 探究活动 分析 仔细阅读以下案例，分析大数据具有哪些特征。 案例1：某市交通智能化分析平台的数据来源于道路交通、电信、地理信息系统等各行各业。例如，交通卡刷卡每天产生1900万条记录，手机定位数据每天产生1800万条，出租车运营数据每天产生100万条，电子停车收费系统数据每天产生50万条，等等。这些数据在体量和速度上都达到了大数据的规模。 案例2：搜索引擎公司通过跟踪网民对“感冒症状”以及“治疗”等关键词的搜索，发现某个时段在某个区域内搜索数量急剧增长，从而成功预测了甲型H1N1流感的暴发时间、地域。 案例3：目前，某基于大数据的网约车平台已覆盖全国400多个城市，涵盖出租车、快车、顺风车、代驾、专车、试驾以及租车等多项业务，为人们的出行带来极大的便利。我们只需在网约车APP上输入或者说出目的地，强大的智能系统就立刻分配订单，即时通知附近司机；借助定时定位系统，我们可以看到司机的大致位置以及预计到达时间。 (1)从互联网产生大数据的角度来看，大数据具有“4V”特征：大量( Volume)、多样( Variety)、低价值密度( value)、高速( Velocity)。 第一，数据体量巨大。从TB级别跃升到PB级别。 第二，数据类型繁多。如网络日志、视频、图片、地理位置信息等。 第三，价值密度低。以视频为例，在连续不间断的监控过程中，有用的数据可能仅仅两秒。 第四，变化速度快。数据来自世界各地的网络终端，且以秒为单位快速变化。 (2)从互联网思维的角度来看，大数据具有三个特征：样本渐趋于总体，精确让位于模糊，相关性重于因果。 第一，在大数据时代强调数据要全量而不是抽样，即强调数据规模全量，而不是强调数量巨大。大数据时代有了更好的数据采集手段，让获取全量数据成为可能。 第二，大数据时代研究的数据如此之多，追求的不是精确性，而是模糊性。在大数据时代，只要掌握了大体的发展方向即可，适当忽略微观层面上的精确度，会让我们在宏观层面拥有更好的洞察力。 第三，大数据时代不是因果关系，而是相关关系。在大数据时代，无须再紧盯事物之间的因果关系，而应该寻找事物之间的相关关系；相关关系也许不能准确地告诉我们某件事情为何会发生，但是会提醒我们这件事情正在发生。 (3)从大数据存储与计算的 ... ...