大数据及其可视化

第1 章大数据与大数据时代............11.1 大数据概述.............................31.1.1 数据与信息..................31.1.2 天文学——信息爆炸的起源.......................... 31.1.3 大数据的定义...............41.1.4 用3V 描述大数据特征............................. 51.1.5 大数据的结构类型....... 71.2 思维变革之一：样本=总体..... 81.2.1 小数据时代的随机采样............................. 81.2.2 大数据与乔布斯的癌症治疗.................... 111.2.3 全数据模式：样本=总体........................... 121.3 思维变革之二：接受数据的混杂性.............................. 121.3.1 允许不精确................121.3.2 大数据的简单算法与小数据的复杂算法..... 131.3.3 纷繁的数据越多越好........................... 141.3.4 5%的数字数据与95%的非结构化数据......... 151.4 思维变革之三：数据的相关关系.............................. 161.4.1 关联物，预测的关键........................... 161.4.2 “是什么”，而不是“为什么”.................. 171.4.3 通过相关关系了解世界........................... 18【实验与思考】深入理解大数据时代...................................... 19第2 章数据可视化之美.................212.1 数据与可视化.......................222.1.1 数据的可变性.............232.1.2 数据的不确定性......... 242.1.3 数据的背景信息......... 252.1.4 打造最好的可视化效果........................... 262.2 数据与图形...........................262.2.1 地图传递信息.............262.2.2 数据与走势.................272.2.3 视觉信息的科学解释........................... 282.2.4 图片和分享的力量...... 292.2.5 公共数据集.................292.3 实时可视化...........................312.4 可视化分析工具....................312.4.1 Microsoft Excel ........... 322.4.2 Google Spreadsheets...... 322.4.3 Tableau ....................... 332.4.4 可视化编程工具......... 33【实验与思考】熟悉大数据可视化.................................. 35第3 章 Excel 数据可视化方法........373.1 Excel 的函数与图表..............393.1.1 Excel 函数..................403.1.2 Excel 图表..................41大数据及其可视化23.1.3 选择图表类型.............433.2 整理数据源...........................443.2.1 数据提炼....................443.2.2 抽样产生随机数据..... 473.3 数理统计中的常见统计量..... 493.3.1 比平均值更稳定的中位数和众数............. 493.3.2 正态分布和偏态分布........................... 503.3.3 财务预算中的分析工具........................... 523.4 改变数据形式引起的图表变化.............................. 533.4.1 用负数突出数据的增长情况.................... 533.4.2 重排关键字顺序使图表更合适............. 54【实验与思考】体验Excel 数据可视化方法........................... 55第4 章 Excel 数据可视化应用........574.1 直方图：对比关系................604.1.1 以零基线为起点......... 604.1.2 垂直直条的宽度要大于条间距................ 624.1.3 慎用三维效果的柱形图........................ 634.1.4 用堆积图表示百分数........................ 644.2 折线图：按时间或类别显示趋势.............................. 654.2.1 减小Y 轴刻度单位增强数据波动情况..... 654.2.2 突出显示折线图中的数据点.................... 664.2.3 通过面积图显示数据总额.................... 674.3 圆饼图：部分占总体的比例.... 684.3.1 重视圆饼图扇区的位置排序.................... 684.3.2 分离圆饼图扇区强调特殊数据............. 694.3.3 用半个圆饼图刻画半期内的数据............. 704.3.4 让多个圆饼图对象重叠展示对比关系..... 714.4 散点图：表示分布状态.........724.4.1 用平滑线联系散点图增强图形效果............. 724.4.2 将直角坐标改为象限坐标凸显分布效果..... 734.5 侧重点不同的特殊图表.........744.5.1 用子弹图显示数据的优劣........................ 744.5.2 用温度计展示工作进度........................... 754.5.3 用漏斗图进行业务流程的差异分析......... 76【实验与思考】大数据如何激发创造力.................................. 78第5 章大数据的商业规则..............795.1 大数据的跨界年度................805.2 谷歌的大数据行动................815.3 亚马逊的大数据行动............835.4 将信息变成一种竞争优势..... 845.4.1 数据价格下降，数据需求上升............. 855.4.2 大数据应用程序的兴起........................... 865.4.3 实时响应，大数据用户的新要求............. 875.4.4 企业构建大数据战略........................... 87目录35.5 大数据营销...........................885.5.1 像媒体公司一样思考........................... 885.5.2 营销面对新的机遇与挑战........................ 895.5.3 自动化营销................905.5.4 为营销创建高容量和高价值的内容......... 915.5.5 内容营销....................915.5.6 内容创作与众包......... 925.5.7 用投资回报率评价营销效果.................... 93【实验与思考】大数据营销的优势与核心内涵................... 93第6 章大数据激发创造力..............956.1 大数据与循证医学................976.2 大数据带来的医疗新突破..... 986.2.1 量化自我，关注个人健康........................... 996.2.2 可穿戴的个人健康设备......................... 1006.2.3 大数据时代的医疗信息......................... 1016.3 医疗信息数字化.................1036.4 搜索：超级大数据的最佳伙伴............................ 1056.5 数据决策的成功崛起..........1066.5.1 数据辅助诊断........... 1076.5.2 你考虑过……了吗...... 1076.5.3 大数据分析使数据决策崛起.................. 1086.6 大数据帮助改善设计..........1096.6.1 少而精是设计的核心..........................1106.6.2 与玩家共同设计游戏..........................1116.6.3 以人为本的汽车设计理念...................1116.6.4 寻找最佳音响效果...... 1126.6.5 建筑数据取代直觉...... 113【实验与思考】大数据如何激发创造力................................ 114第7 章大数据预测分析...............1167.1 预测分析............................1197.2 数据情感和情感数据..........1227.2.1 从博客观察集体情感......................... 1227.2.2 预测分析博客中的情绪......................... 1227.2.3 影响情绪的重要因素——金钱........... 1247.3 数据具有内在预测性..........1257.4 情感的因果关系..................1267.4.1 焦虑指数与标普500 指数...................1267.4.2 验证情感和被验证的情感...................... 1287.4.3 情绪指标影响金融市场.................. 129【实验与思考】大数据准备度自我评分表......................... 130第8 章支撑大数据的技术............1348.1 大数据在云端.....................1358.1.1 云计算概述...............1368.1.2 云计算的服务形式...... 1378.1.3 云计算与大数据....... 1378.1.4 云基础设施...............1398.2 计算虚拟化.........................1408.3 网络虚拟化.........................1408.4 大数据存储.........................141大数据及其可视化48.4.1 传统存储系统........... 1418.4.2 大数据时代的新挑战...................... 1428.4.3 分布式存储..............1438.4.4 云存储......................1448.5 开源技术的商业支援..........1458.6 大数据的技术架构..............1468.7 Hadoop 基础.......................1478.7.1 分布式系统概述....... 1478.7.2 Hadoop 的由来......... 1488.7.3 Hadoop 的优势......... 1498.7.4 Hadoop 的发行版本......................... 1508.8 大数据数据处理基础..........1508.8.1 Hadoop 与NoSQL...... 1518.8.2 NoSQL 与RDBMS的主要区别.............. 1518.8.3 NewSQL ................... 153【实验与思考】了解大数据的基础设施............................ 154第9 章数据引导可视化...............1569.1 可视化对认知的帮助..........1579.1.1 七个基本任务........... 1579.1.2 新的数据研究方法...... 1589.1.3 信息图形和展示....... 1599.1.4 走进数据艺术的世界......................... 1609.2 可视化设计组件.................1619.2.1 视觉隐喻..................1629.2.2 坐标系......................1659.2.3 标尺..........................1679.2.4 背景信息..................1689.2.5 整合可视化组件....... 1689.3 分类数据的可视化..............1699.3.1 整体中的部分........... 1709.3.2 子分类......................1709.3.3 数据的结构和模式....... 1719.4 时序数据的可视化..............1719.4.1 周期..........................1729.4.2 循环..........................1739.5 空间数据的可视化..............1749.6 让可视化设计更清晰..........1759.6.1 建立视觉层次........... 1759.6.2 增强图表的可读性....... 1769.6.3 允许数据点之间进