大数据：技术与应用实践指南

《大数据：技术与应用实践指南》 读书会 赵刚 博士 北京赛智时代信息技术咨询有限公司（CIOManage ） 总经理 www.ciomanage.com 作者简介 赵刚，博士。北京赛智时代信息技术咨询有限公司创始人。历任国内著名信息化咨询公司赛迪顾问股份有限公司高级副总裁、首席信息化咨询顾问，国内计算机系统集成一级资质企业北京赛迪时代信息产业股份有限公司总经理、首席架构师，2012年获得中国电子信息产业发展研究院十大“赛迪学者”称号，兼任中国信息化推进联盟专家、中国电子学会高级会员。 近2年，主持和参与过的信息化咨询和集成项目有：国家新一代信息技术应用战略研究、亚太地区智慧城市指标体系研究、中国－欧盟信息社会研究、天津市智慧城市规划、国土资源部分布式国土资源信息共享服务平台、国家图书馆文津馆智能搜索集群平台、公安部虚拟化数据平台、中海油企业级数据中心和灾备中心规划、国药集团私有云计算平台规划、北京市物联网应用示范项目初步设计、鄂尔多斯市人口基础数据库建设等。 在信息化领域耕耘10余年，服务的政府、企业客户超过100家，发表文章若干篇，著有专著《IT管理体系－战略、管理和服务》，参与编写《智慧城市：规划、建设和评估》、《信息化基本知识》、《信息系统审计》等。 www.ciomanage.com 前言 • 这本书目标读者是大数据技术应用人员，希望让读者明白大数据是如何落地的，从数据分析的业务需求到大数据技术实现是如何完成的。 • 这本书是从系统架构的角度来阐述大数据，覆盖面广，但受篇幅所限，很像是一本大数据技术架构的综述和框架，更深入的技术细节就需要读者做延伸阅读。 • 这本书写作过程中参考了赛智时代公司的大数据研究和咨询成果，也参阅了大量网络和技术社区中的研究文章，是在边研究、边应用、边总结中写出的书。 • 这本书是大数据技术发展过程的阶段性总结，随着技术的发展，这本书也需要不断完善，读者可以关注我的博客。 www.ciomanage.com 书的目录结构 •第1章 大数据的概念和发展背景 •第2章 大数据应用的业务需求 •第3章 大数据应用的总体架构和关键技术 •第4章 大数据与企业级应用的整合策略 •第5章 大数据应用的实践方法与案例 •第6章 大数据应用的主流解决方案 •第7章 大数据应用的未来挑战和趋势 www.ciomanage.com 导读目录 什么是大数据？ 从大数据的发展历程说起 www.ciomanage.com 互联网与电子商务 大数据应用 经济和社会各个领域 大数据应用 • 气象地图分析 • 大物理分析 • 基因图谱分析 科技技术 大数据应用 第一阶段 （20世纪90年代后） 第二阶段 （2003－2010年） 第三阶段 （2010年以后） • Google、Yahoo、Facebook等互联网公司基于分布式计算解决海量数据处理问题 • 全球2010年进入ZB时代 • 美国政府、联合国、世界经济组织以及各个经济和社会领域的企业和组织机构关注数据开放与大数据应用 当前，大数据已成为全球经济热门话题 2011年，麦肯锡全球研究院（MGI）发布《大数据：创新、竞争和生产力的下一个新领域》报告，这份报告研究了数字数据和文档的状态，同时讲解了处理这些数据能够释放出的潜在价值，分析了大数据的活动和价值链。 http://www.mckinsey.com/insights/business_technology/big_data_the_next_frontier_for_innovation 2012年3月29日美国奥巴马政府以“Big Data is a Big Deal”为题发布新闻，宣布投资2亿美元启动“大数据研究和发展计划”涉及美国国家科学基金、卫生研究院、能源部、美国国防部等6个联邦政府部门，大力推动和改善与大数据相关的收集、组织和分析工具及技术，以推进从大量的、复杂的数据集合中获取知识和洞见的能力。美国政府认为大数据技术事关美国国家安全、科学和研究的步伐。 大数据已提升为发达国家的政府发展战略 http://www.whitehouse.gov/blog/2012/03/29/big-data-big-deal 2012年5月，联合国发布了一份非常重要的大数据白皮书，总结了各国政府如何利用大数据更好地服务和保护人民，列举了大数据在交通、经济、疫情预测、社交网络等多方面应用。指出大数据对于...