企业大数据之道ppt.ppt

《企业大数据之道ppt.ppt》由会员分享，可在线阅读，更多相关《企业大数据之道ppt.ppt（65页珍藏版）》请在三一办公上搜索。

1、1,实战大数据（一）解密大数据,徐培成,北方人计算机工程专业软件开发系统分析PM技术总监培训机构讲师创办十八掌教育,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,大数据的故事,故事（一）,1998,故事（二）,2009杂志文章谷歌分析以前流行病的病理特征，出来的结果和国家疾控中心的数据非常吻合，通过这一数据有效预测了流行病毒的暴发。,故事（三）,2012周刊分析不同地区、年龄段选民有效选民募集资金广告投放精准预测竞选结果有的放矢中国话-有钱花在刀刃上,故事（四）,20

2、15阿里11.11交易额912.17亿 同比增长59.7%,11.11,故事（四）中国大妈的实力,各地大妈消费了78%的品类，涉及粮油、厨电、食品、美妆小家电品类广场舞音响第一，超出第二名美颜相机50%。服装消费占据85%浙江大妈 山东大妈 福建大妈广场舞音响购买力 浙江大妈 山东大妈 江苏大妈瑜伽产品 福建大妈 广东大妈 重庆大妈北方大妈:钟爱玉器和琥珀，流行饰品的消费是南方大妈的4.5倍。南方大妈:青睐翡翠和珍珠，内衣购买量是北方大妈的2倍。中西部大妈:爱海鲜，四川大妈大闸蟹、海带、虾类。东西南北大妈:黄金首饰农村大妈的最爱美妆品牌:卡姿兰 美宝莲 珀莱雅厨房电器:美的 苏泊尔 九阳服装品

3、牌:坦博尔 亿利达 福玛玛,这意味着,不知道BIG DATA？你OUT了！,吃饭前一定要发个朋友圈！,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,50(州),x 1000(气象站),x 100年(1901-2000),=5000000(文件),淘宝目前每天的活跃数据量已经超过50TB，共有4亿条产品讯息和2亿多名注册用户在上面活动，每天超过4000万人次访问。,500G/台 x 100台 x 3(副本)=150000台,1bit=1位(0/1)Byte=字节(每个字

4、节含有8位)1KB=1024Bytes=210Bytes1MB=1024KB=220Bytes1GB=1024MB=230Bytes1TB=1024GB=240Bytes1PB=1024TB=250Bytes1EB=1024PB=260Bytes1ZB=1024EB=270Bytes1YB=1024ZB=280Bytes1NB=1024YB=290Bytes1DB=1204NB=2100Bytes,大众角度数据量大、海量技术人员的角度如何存储如何计算公司决策层需要哪些方面的数据什么时间能出结果,大数据的“4V”特征,大数据时代的背景,21世纪是数据信息大发展的时代，移动互联、社交网络、电子商务

5、等极大拓展了互联网的边界和应用范围，各种数据正在迅速膨胀并变大。,“大数据”的诞生：大约从2009年开始，“大数据”才成为互联网信息技术行业的流行词汇。美国互联网数据中心指出，互联网上的数据每年将增长50%，每两年便将翻一番，而目前世界上90%以上的数据是最近几年才产生的。此外，数据又并非单纯指人们在互联网上发布的信息，全世界的工业设备、汽车、电表上有着无数的数码传感器，随时测量和传递着有关位置、运动、震动、温度、湿度乃至空气中化学物质的变化，也产生了海量的数据信息。,2001全球数据总量,x 2,想驾驭这庞大的数据，我们必须了解大数据的特征。,地球上至今总共的数据量：2006 年，个人用户才

6、刚刚迈进TB时代，全球一共新产生了约180EB的数据；2012 年，这个数字达到了3.7ZB；2020 年，整个世界的数据总量将会增长10倍，达到35.2ZB（1ZB=10 亿TB）！,1PB（拍字节）=250字节1EB（艾字节）=260字节1ZB（泽字节）=270字节,“体量大(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（Value）,物理设备,人为因素,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,1,2011年-2016年中

7、国大数据市场规模,2011年是中国大数据市场元年，一些大数据产品已经推出，部分行业也有大数据应用案例的产生。2012年-2016年，将迎来大数据市场的飞速发展;2012年中国大数据市场规模达到4.7亿元，2013年大数据市场将迎来增速为138.3%的飞跃，到2016年，整个市场规模逼近百亿。,2,2012年各行业大数据市场规模,2012年政府、互联网、电信、金融的大数据市场规模较大，四个行业将占据一半市场份额；由于各个行业都存在大数据应用需求，潜在市场空间非常可观。,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七

8、）忠告和提醒,（三）大数据行业分析与经典案例,应用可能性,电信,政府（公共事业）,交通,金融,医疗,教育,能源（电力/石油）,纵轴契合度：表示该用户的IT应用特点与大数据特性的契合程度；横轴应用可能性：表示该用户出于主客观因素在短期内投资大数据的可能性；注：该位置为分析师访谈的综合印象，为定性分析，图中位置不代表具体数值,High,Mid,Low,Low,Mid,High,优先关注行业用户,应用特点与大数据技术有较高的契合度，在主客观条件上也有较高的应用可能性。,值得关注行业用户应有特点与大数据的契合度及应用可能性综合较高,适当关注行业用户两个维度暂时都不具备优势，可适当给予关注,互联网（电子

9、商务）,契合度,流通,零售,制造,2,1,互联网行业大数据主要应用在社交和网购方面,结合位置数据、消费数据进行实时营销信息推送是电信行业大数据应用主要场景,3,金融行业大数据应用场景主要集中在投资方面,4,制造行业具有多环节、多地域特色，各个环节的优化是制造行业最关注的大数据应用场景,Facebook广告精准投放2005-2011广告规模增长3倍广告是互联网公司主营收入针对喜好发布广告，千人千面追踪用户行为，整理分组，实时发现客户群根据群体，推送潜在的兴趣广告2009-2010，广告市场份额翻一番2011相较于2010增长95%广告增速是Google的3倍以上2006-2010期间，faceb

10、ook是唯一广告市场稳步增长的公司,英国电信公司数据量增加，同质化竞争需要预测客户购买方向和之后的可能价值对客户群进行数据挖掘，和商业活动进行关联定向营销，特质化营销，销售最大化与其他160个电信公司竞争中位于首位2011年直邮活动回应率提高100%。,某银行信用卡部门秒级营销竞争激烈，同质化严重构建数据仓库，多层面数据分析对客户群进行低中高价值分类，提供个性化服务营销近秒级，效率极大提升2011年，每次营销活动配置从2-3周减少到2-3天2011前三季度，交易量增加65%。比股份制银行搞出14%，比中国所有银行的均值搞出4%不良贷款率下降0.76%百分点成本支出节省上千万,德国ECC紧急救援

11、呼叫中心交通事故，救援效率，生命保障将事故现场可视化，结合道路、交通、天气决策最佳救援方案数据实时传送紧急救助中心或警局极大地提升了事处理效率，由最初人工管理转为自动管理,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,大数据对于企业作用,建立客户关系，便于精准营销 了解竞争对手，知己知彼 创新商业模式、产品与服务 实时调整经营决策 挖掘企业内部数据，提高企业决策力,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（

12、五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,ETL开发、hadoop开发、机器学习开发、实时计算开发、数据仓库等。(10k-15K)/月,基于大数据现有生态系统的各项技术API进行集成开发，为企业提供更高视角的具有自主知识产权的综合解决方案、期间或许会涉及到各大技术的底层代码，技术要求比较高、设计的技术领域更广。，待遇也越高。(15K-30K)/月,主要职责是对企业的业务模型进行抽象，运用数学思想

13、进行数据建模，推导出数学公式或者是相应的数学算法，交由开发人员进行实现。该职位对数学领域的知识要求较高，但更重要的是对企业的业务模型和市场洞察力以及独立分析、思考能力都有严格的要求，而且需要有非常丰富的行业经验、非短时间内可以达到的程度。(50w-100w)/年,大数据架构师涉及的工作范畴更多的是企业大数据的整体规划和布局，比如集群架构的设计、可伸缩性处理、高可用性对应策略、计算机硬件选型、大数据集群的构建指导方案、资源调度处理、硬件调优处理、操作系统与大数据软件栈的构建与调优等等。设计的技术知识面不论是宽度和深度都需要有相当的程度。(50w-100w)/年,分布式计算、三高、HA、JEE项目

14、中PM或架构师需要考量的东西、可以参与一下测试题,工作三年，50万股票工作5年，工资不到1万,过河卒子seatoskyqidai1141yuanzhenlin,（一）什么是大数据,（二）中国大数据市场及现状,（四）大数据在企业中的应用方向,（六）大数据就业方向,（五）大数据调查报告,（七）忠告和提醒,（三）大数据行业分析与经典案例,忠告 要学会对自己负责，做一个成熟的人。我喜欢一针见血、不要我也愿意看视频我花了60大洋，就给我读一篇文档40万行代码逐行解读?360*24*60=525600解读源代码，就是为了找个变量名称记住，大数据不是轻易就掌握的，不是其他技术所能比的，你掌握着未来20-30命运。一定要学大数据，这是大数据时代。,1,