(共19张PPT)
大数据的概念
数据采集处理和可视化表达
随着移动互联网和物联网的飞速发展,人类社会产生的数据以惊人的速度增长。如何高效地对这些数据进行采集、存储、处理,并从中发掘到有价值的信息,是大数据分析处理需要解决的问题。
引言
引言
认识大数据
大数据的概念
认识大数据
观看视频《大数据的工作原理》
从视频中了解到的大数据,请用自己的话说说什么是大数据?
大数据的概念
认识大数据
大数据的概念
观
察
交
流
讨
论
小组为单位,讨论下大数据具有那些特点?
认识大数据
大数据(big data),或称巨量资料,指的是所涉及的数据量规模巨大到普通软件不能处理或者不能及时处理,大数据成为人们提取信息、做出决策的重要依据,是推动信息社会发展的重要资源。
大数据的概念
大数据的定义
大数据的概念
认识大数据
大数据具有“4V”特征:大量(Volume)、多样(Variety)、低价值密度(Value)、高速(Velocity)。
第一,数据体量巨大。从TB级别跃升到PB级别甚至ZB级别。
第二,数据类型繁多。如表格数据、HTML网页文件、XML文件、RDF(Resource Description Framework,资源描述框架)数据、文本数据、图(社交网络)数据、多媒体数据(音频/视频/图像)、网络日志、视频、地理位置信息以及无数的数码传感器带来的海量数据等。
第三,价值密度低。以视频为例,在连续不间断地监控过程中,有用的数据可能仅仅一两秒。
第四,高速。数据变化速度快,且大数据必须得到高效、迅速的处理才具有价值。
大数据的概念
大数据的特征:从产生的角度看
大数据的概念
大数据的4V特征
认识大数据
大数据具有三个特征:样本趋于总体,精确让位模糊,相关性重于因果。
第一,在大数据时代强调数据要全量而不是抽样。大数据时代有了更好的数据采集手段,让获取全量数据成为可能。
第二,大数据时代研究的数据如此之多 ,追求的不是精确性,而是模糊性。只要掌握了大体的发展方向即可。
第三,大数据时代不是因果关系,而是相关关系。因为相关关系也许不能准确地告诉我们某件事情为何会发生,但是会提醒我们这件事情正在发生。
大数据的概念
大数据的特征:互联网思维的角度来看
大数据的概念
认识大数据
从大数据存储与计算的角度来看,大数据具有两个特征:分布式存储和分布式并行计算。
第一,大数据存储在互联网不同的服务器与各客户终端。
第二,应用分布式并行计算处理互联网的大数据。
大数据的概念
大数据的特征:大数据存储与计算的角度来看
大数据的概念
认识大数据
数据量不同:传统数据技术主要是利用现有存在关系性数据库中的数据,而大数据不可能利用数据库分析工具分析。
非结构化数据:传统数据库主要处理的是字符,而大数据可以处理图像、声音、文件等非结构化数据
处理方式不同:因为数据规模大、非结构化数据这两方面因素,导致大数据在分析时不能取全部数据做分析。这就需要根据一些标签来抽取数据。所以大数据处理过程中,比传统数据增加了一个过程Stream。
大数据的概念
大数据与传统数据的区别
大数据的概念
认识大数据
美国互联网数据中心指出,互联网上的数据每年将增长50%,每两年便将翻一番,而目前世界上90%以上的数据是最近几年才产生的。
大数据的概念
大数据的发展历史
大数据的概念
认识大数据
大数据的对日常生活的影响
认识大数据
随着大数据技术飞速发展,大数据应用已经融入各行各业,可以说大数据时这个信息智能时代的必备工具。因此,大数据几乎可以应用到目前任何领域。
大数据的对日常生活的影响
大数据的应用
大数据的对日常生活的影响
人工智能
民生服务
生物医学
气象科学
经济金融
无人驾驶
电子商务
商业管理
企业管理
生活娱乐
医疗服务
传媒产业
资料文献
市场营销
总统选举
认识大数据
观看视频《如何在大数据时代保护个人的隐私》
请举例说明大数据对你的生活的影响?
大数据的对日常生活的影响
大数据的对日常生活的影响
观
察
交
流
讨
论
小组为单位,讨论下大数据时代下你如何保护自己?
如何在大数据时代保护个人的隐私
认识大数据
方便支付
中国的移动支付速度特别快,通过大数据应用,我们的移动设备后端连接商家,为它们提供精准的会员营销服务;前端连接支付入口,顾客用支付宝埋单便自动成为会员,获得消费优惠。
大数据的对日常生活的影响
大数据是我们的日常生活更加便捷
大数据的对日常生活的影响
认识大数据
方便出行
应用交通系统的大数据,网络约车出行,智能导航行车避免堵车,无人驾驶,智能地图等等。
大数据的对日常生活的影响
大数据是我们的日常生活更加便捷
大数据的对日常生活的影响
认识大数据
方便购物与产品推介。
通过大数据应用,商家以此建立起商家与消费者的营销通道,增强商家与消费者黏性,通过对客户进行产品推介,方便人们选购产品,同时也大幅降低商家的营销成本,获取更多的营销收益。
大数据的对日常生活的影响
大数据是我们的日常生活更加便捷
大数据的对日常生活的影响
认识大数据
方便看病与诊病。
应用网络预约挂号,减轻与节省患者排队挂号的时间,双方便医生提前分析患者的病史数据,以便更科学诊病。
大数据的对日常生活的影响
大数据是我们的日常生活更加便捷
大数据的对日常生活的影响
认识大数据
个人信息泄露。
在大数据时代,我们使用的手机、计算机、网络、信用卡等信息科技,都会产生数据。这些数据时刻存在泄露的风险。
大数据的对日常生活的影响
大数据对人们日常生活产生的负面影响
大数据的对日常生活的影响
认识大数据
信息伤害与诈骗。
在大数据时代,我们的网络信息随时都可能被不法分子窃取,并对我们及身边的亲人造成伤害。
大数据的对日常生活的影响
大数据对人们日常生活产生的负面影响
大数据的对日常生活的影响