大数据-大数据技术.ppt
《大数据-大数据技术.ppt》由会员分享,可在线阅读,更多相关《大数据-大数据技术.ppt(177页珍藏版)》请在启牛文库网上搜索。
1、S,大数据技术,张博士2015年5月,7/18/2022,目 录,大数据技术概论 云数据库技术数据挖掘技术商业智能,7/18/2022,Big Data名词由来,20世纪90年代,数据仓库之父的Bill Inmon就经常提及Big Data,2011年5 月,在“云计算相遇大数据”为主题的EMC World 2011 会议中,EMC 抛出了Big Data概念,7/18/2022,大数据的产生,21世纪是数据信息大发展的时代,移动互联、社交网络、电子商务等极大拓展了互联网的边界和应用范围,各种数据正在迅速膨胀并变大。互联网(社交、搜索、电商)、移动互联网(微博)、物联网(传感器,智慧地球)、车
2、联网、GPS、医学影像、安全监控、金融(银行、股市、保险)、电信(通话、短信)都在疯狂产生着数据。,7/18/2022,数量级概念,1KB=2(10)B=1024B;1MB=2(10)KB=1024KB=2(20)B;1GB=2(10)MB=1024MB=2(30)B。1TB=2(10)GB=1024GB=2(40)B1PB=2(10)TB=1024TB=2(50)B1EB=2(10)PB=1024PB=2(60)B,7/18/2022,数量级概念,Kilobyte(KB)=1024B 相当于一则短篇故事的內容。Megabyte(MB)=l024KB 相当于一則短篇小說的文字內容。Gigaby
3、te(GB)=1024MB 相当于贝多芬第五交响乐的演奏视频內容。Terabyte(TB)=1024GB 相当于一家大型医院中所有的X光照片信息。Petabyte(PB)=l024TB 相当于50%的全美学术图书馆信息內容。Exabyte(EB)=1024PB;5EB相当于至今全世界人类所讲过的话语。,7/18/2022,信息通讯进入新时代,7/18/2022,摩尔定律,7/18/2022,后摩尔时代,7/18/2022,计算机演进,7/18/2022,信息计算体系演进,7/18/2022,软件技术网络化演进,7/18/2022,传输技术的发展,7/18/2022,从移动数据到移动流媒体,7/
4、18/2022,移动通信峰值速率的提升,7/18/2022,互联网发展:从电信到泛在服务,7/18/2022,联网主机数量,7/18/2022,电视网络化智能化与三网合一,7/18/2022,视频流量成为主流,7/18/2022,全球骨干网流量,7/18/2022,中国互联网干线带宽,7/18/2022,中国互联网用户,7/18/2022,移动终端功能的演进,7/18/2022,移动互联网加快普及,7/18/2022,智能终端引领后PC时代,7/18/2022,移动数据流量超过话音,7/18/2022,全球移动数据流量,7/18/2022,移动互联网流量,7/18/2022,互联网上1分钟,7
5、/18/2022,互联网上的1天,7/18/2022,照片,7/18/2022,大数据时代到来,7/18/2022,大数据定义,7/18/2022,大数据例子,7/18/2022,科学研究催生大数据,7/18/2022,物联网催生大数据,7/18/2022,安全监控的数据量,7/18/2022,环境监测催生大数据,7/18/2022,医疗病历隐藏大数据,7/18/2022,国际关注大数据,7/18/2022,大数据的4V特征,“大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低(Value)”就是“大数据”的显著特征,或者说,只有具备这些特点的数据,才是大
6、数据。,体量Volume,多样性Variety,价值密度Value,速度Velocity,非结构化数据的超大规模和增长总数据量的8090%比结构化数据增长快10倍到50倍是传统数据仓库的10倍到50倍,大数据的异构和多样性很多不同形式(文本、图像、视频、机器数据)无模式或者模式不明显不连贯的语法或句义,大量的不相关信息对未来趋势与模式的可预测分析深度复杂分析(机器学习、人工智能Vs传统商务智能(咨询、报告等),实时分析而非批量式分析数据输入、处理与丢弃立竿见影而非事后见效,7/18/2022,大数据的4V,7/18/2022,大数据的划分,7/18/2022,大数据技术挑战,7/18/2022
7、,大数据技术挑战,7/18/2022,大数据平台技术,7/18/2022,分布式存储与架构,7/18/2022,大数据的并行处理,7/18/2022,大数据并行处理分析,7/18/2022,大数据可视化分析,7/18/2022,虚拟化与可视化,7/18/2022,大数据可视化,7/18/2022,目 录,大数据技术概论 云数据库技术数据挖掘技术商业智能,7/18/2022,Google云数据库,7/18/2022,Google云数据库,7/18/2022,Google云数据库,7/18/2022,Google云数据库,GFS架构,7/18/2022,Google云数据库,7/18/2022,G
8、oogle云数据库,7/18/2022,Google云数据库,7/18/2022,Google云数据库,7/18/2022,Google云数据库,7/18/2022,Google云数据库,7/18/2022,Google Vs Hadoop,7/18/2022,Haddop是什么,7/18/2022,Hadoop发展编年,7/18/2022,7/18/2022,Hadoop子项目,7/18/2022,Hadoop特性,7/18/2022,7/18/2022,Hadoop物理部署,7/18/2022,Hadoop集群,7/18/2022,Hadoop用户,7/18/2022,HDFS,7/18/
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 技术