新書推薦：
《
《全面与进步跨太平洋伙伴关系协定》国有企业条款研究
》
售價：NT$
449.0
《
银行业架构网络BIAN（全球数字化时代金融服务业框架）（数字化转型与创新管理丛书）
》
售價：NT$
449.0
《
金托邦：江湖中的沉重正义
》
售價：NT$
275.0
《
易经今解：释疑·解惑·见微
》
售價：NT$
403.0
《
东欧史（全二册）-“中间地带”的困境
》
售價：NT$
1010.0
《
虚拟资本：金融怎样挪用我们的未来
》
售價：NT$
352.0
《
刻意练习不生气
》
售價：NT$
179.0
《
大宋理财：青苗法与王安石的金融帝国（全彩插图本）
》
售價：NT$
500.0
|
| 編輯推薦： |
|
展现作者在国内外大数据*线的实战经验，面向不同行业的共性诉求来指导读者大数据该怎么做，并阐明大数据发展的误区。本书对大数据，从经济价值、商业模式、框架搭建、数据挖掘、网络布置、安全防护、人员能力和后续运维管理多个维度，以及基础设施、中间件、重点应用等多个层面进行系统阐述。
|
| 內容簡介： |
|
你是不是有这样的困惑：“读了不少关于大数据的书，发现这大数据既可以用于竞选美国总统，又能够预测禽流感，还能卖啤酒和尿不湿，又是围棋高手……大数据好像什么都能干耶！可是咋整呀？大数据多大为大呀？大数据能赚钱不？……唉，怎么还是一头雾水。”本书将为你答疑解惑。本书将展现作者在国内外大数据*线的实战经验，面向不同行业的共性诉求来指导读者大数据该怎么做，并阐明大数据发展的误区。本书对大数据，从经济价值、商业模式、框架搭建、数据挖掘、网络布置、安全防护、人员能力和后续运维管理多个维度，以及基础设施、中间件、重点应用等多个层面进行系统阐述。帮助决策者将大数据概念落地，建立起理性的预期、合理的规划，并最终收获满意的经济效益。企业正面临从传统IT转入大数据环境这一不可避免的范式变化，恰好为我国追赶发达国家信息化建设带来了契机。本书以企业共同关注的客户关系管理（CRM）为实例谈大数据落地，利用大数据采集、分析、决策以达到客户维系拓展、精准营销和创新产品的目的，提出一整套从规划到实施再到后续运维的技术路线和策略。并用一个已上线的实例将各部分内容串起来综合展示，以解决大数据热潮中的“老虎吃天，无处下爪”的窘境。这对于大数据的正确理解，企业信息系统的建立，以及相应的商业模式改变都具有实际指导意义。
|
| 關於作者： |
|
谢朝阳，美国弗吉尼亚理工学院暨州立大学博士，中组部“千人计划”特聘专家。于美国硅谷工作20余载，历任Sun、Intel、Sony等公司研发和技术管理高级职务，履历涵盖了信息技术领域内的产品研发、工程实践、市场推广等多个环节。曾任中国数据中心联盟云计算专家委员会主任委员，运营专家委员会主任委员，大数据专家委员会副主任委员，领导组建了中国电信云计算公司并担任首任总经理。现任中国电子科技集团大数据首席专家，上海华东电脑CTO及上海华讯网络系统有限公司董事、高级副总裁，兼任国家数字化学习工程实验室特聘教授。著有本书的姊妹篇《云计算：规划、实施、运维》。
|
| 目錄：
|
第1篇大数据导论1
第1章初识大数据5
1.1大数据概念谈7
1.1.1大数据的定义7
1.1.2大数据发展现状10
1.1.3大数据建设需求分析10
1.1.4大数据建设目标11
1.1.5机器学习与人工智能11
1.2大数据的科学性12
1.3客户关系管理18
1.4大数据的理解误区21
1.5小结29
第2章大数据产业链初探30
2.1现金流与产业模式31
2.2国外IT企业33
2.3国内IT企业35
2.4开源软件36
2.5小微企业39
2.6政策制定者41
2.7小结43
第2篇规划篇44
第3章大数据体系规划47
3.1大数据技术体系48
3.1.1大数据采集与预处理49
3.1.2大数据存储52
3.1.3大数据计算56
3.1.4大数据分析58
3.1.5大数据治理64
3.1.6大数据安全保障68
3.1.7大数据应用支撑73
3.2大数据共性技术重点课题76
3.2.1开放域数据采集与共享76
3.2.2多源异构数据分析技术78
3.2.3异构计算模式集成技术82
3.2.4数据安全与隐私保护86
3.3大数据风险管控90
3.3.1企业大数据建设风险分析90
3.3.2大数据安全标准体系框架90
3.3.3大数据安全标准规划91
3.4小结94
第4章大数据技术要求95
4.1大数据总体架构98
4.1.1背景概述98
4.1.2现状分析98
4.1.3总体目标99
4.1.4技术架构100
4.1.5实施指引102
4.2采集要求104
4.2.1功能架构104
4.2.2技术架构105
4.2.3处理技术106
4.2.4场景应用111
4.2.5接口协议113
4.2.6接口约定113
4.2.7性能指标116
4.3基础能力要求117
4.3.1总体概述117
4.3.2基础框架119
4.3.3能力开放135
4.3.4性能指标141
4.4核心处理能力要求142
4.4.1总体概述142
4.4.2数据模型149
4.4.3数据处理152
4.4.4数据质量155
4.4.5系统性能158
4.5需求与项目管理160
4.6小结161
第3篇实施篇163
第5章大数据并行计算框架166
5.1并行计算技术167
5.1.1基本命题167
5.1.2设计模式分类170
5.1.3关键技术点173
5.2MapReduce计算技术177
5.2.1处理模型设计原则177
5.2.2主要功能与技术设计178
5.3Hadoop MapReduce设计与工作模式181
5.3.1程序执行模式181
5.3.2作业调度模式183
5.3.3执行框架及流程设计186
5.4Hadoop MapReduce组件接口187
5.4.1InputFormat187
5.4.2InputSplit188
5.4.3RecordReader189
5.4.4Mapper190
5.4.5Combiner192
5.4.6Partitioner193
5.5小结193
第6章大数据分布式处理系统194
6.1Hadoop系统平台195
6.1.1分布式结构设计195
6.1.2Hadoop生态系统196
6.2HDFS分布式文件系统200
6.2.1系统架构200
6.2.2可靠性设计203
6.2.3文件存储组织205
6.2.4数据读写过程207
6.2.5文件系统操作209
6.3HBase分布式数据库211
6.3.1技术特点211
6.3.2系统结构设计212
6.3.3数据存储模型213
6.3.4查询模式215
6.3.5数据表设计217
6.3.6RegionServer配置218
6.4小结222
第7章大数据存储223
7.1磁盘阵列技术224
7.2数据存储接口225
7.2.1对象存储225
7.2.2裸设备存储226
7.2.3块存储227
7.3存储集群架构228
7.3.1共享与非共享型228
7.3.2对称与非对称式229
7.3.3自助式与服务式230
7.3.4SPI与SFI231
7.3.5串行方式与并行方式232
7.4数据存储技术本质233
7.4.1三网统一理论234
7.4.2并行概念理解236
7.4.3集群分层架构238
7.5数据分级存储探讨238
7.5.1超融合238
7.5.2冷数据239
7.5.3平台架构241
7.5.4应用场景248
7.6小结249
第8章机器学习与人工智能250
8.1数据挖掘251
8.1.1数据分类采集253
8.1.2模式类型设计258
8.1.3模式价值分析261
8.1.4系统关键技术262
8.2机器学习264
8.2.1算法分类265
8.2.2合适算法选择265
8.2.3程序开发设计266
8.3人工智能267
8.3.1模式定义268
8.3.2人工智能举例269
8.4小结276
第4篇运维篇277
第9章大数据集群网络架构280
9.1现有数据中心网络架构281
9.1.1架构分析281
9.1.2存在弊端281
9.2大数据网络设计要点283
9.2.1大数据业务分析283
9.2.2大数据网络流量模型284
9.2.3大数据网络新需求286
9.3新兴网络技术287
9.3.1SDN287
9.3.2NFV291
9.3.3VXLAN292
9.3.4InfiniBand295
9.4小结297
第10章大数据安全298
10.1大数据安全挑战299
10.2基础设施安全300
10.2.1存在威胁300
10.2.2虚拟化安全301
10.3数据安全302
10.3.1数据采集安全技术302
10.3.2数据存储安全技术303
10.3.3数据挖掘安全技术307
10.3.4数据发布安全技术309
10.4大数据平台Hadoop安全311
10.4.1Hadoop安全问题概述311
10.4.2Kerberos概述313
10.4.3Kerberos认证过程313
10.4.4Hadoop安全机制314
10.4.5Kerberos的优缺点316
10.5小结317
第11章大数据备份与恢复318
11.1数据备份与恢复319
11.1.1数据备份319
11.1.2数据恢复323
11.2分布式存储系统备份与恢复324
11.2.1概述324
11.2.2HDFS数据备份策略328
11.3小结330
第12章大数据环境的监管331
12.1概述332
12.2大数据集群配置管理333
12.3大数据集群监控337
12.3.1大数据监控特点337
12.3.2监控系统338
12.3.3监控系统建立途径341
12.3.4商业监控软件342
12.3.5开源监控软件343
12.3.6传统网络管理软件：NetEagle352
12.3.7统一管理平台：UMP354
12.4大数据日志分析356
12.5小结359
第13章大数据的运维方法361
13.1运维服务362
13.2运维流程模型363
13.2.1故障排查363
13.2.2紧急事故管理366
13.2.3处理连锁故障368
13.3运维人员371
13.3.1需要具备的能力371
13.3.2任务内容372
13.4自动化运维374
13.4.1自动化运维价值374
13.4.2自动化运维工具376
13.5小结379
第5篇实例篇380
第14章Oracle MoviePlex 大数据规划383
14.1案例概述384
14.1.1案例背景386
14.1.2架构规划387
14.2大数据组件介绍395
14.2.1Cloudera的CDH396
14.2.2Cloudera管理器397
14.2.3Oracle大数据连接器398
14.2.4Oracle大数据加载器398
14.2.5Oracle大数据整合器400
14.2.6Oracle R语言连接器400
14.2.7Oracle NoSQL数据库401
14.3小结402
第15章Oracle MoviePlex大数据实施404
15.1环境准备405
15.1.1MoviePlex环境部署405
15.1.2MoviePlex环境初始化409
15.2案例演示413
15.2.1配置Oracle Big Data SQL413
15.2.2建立存放在HDFS日志表414
15.2.3HIVE访问HDFS和NoSQL416
15.2.4Oracle Big Data SQL新功能418
15.2.5Oracle Big Data安全策略420
15.2.6Oracle分析SQL422
15.2.7Oracle SQL模式匹配423
15.2.8创建汇总数据集425
15.2.9Oracle 12c SQL解析特点426
15.3推荐系统428
15.3.1百万美元大奖赛428
15.3.2技术细节429
15.4小结433
第16章Oracle MoviePlex大数据运维434
16.1集群436
16.1.1Hadoop436
16.1.2ZooKeeper439
16.2文件系统和非关系数据库442
16.2.1HDFS443
16.2.2HBase444
16.2.3NoSQL446
16.2.4Kafka449
16.3中间件451
16.3.1WebLogic451
16.3.2HUE454
16.3.3Solr456
16.4数据转换458
16.4.1Hive458
16.4.2Impala460
16.4.3Sqoop2462
16.5资源整合调度463
16.5.1Oozie463
16.5.2YARN464
16.6小结467
第6篇明天的大数据468
第17章大数据面临的挑战470
17.1可靠性挑战472
17.2可扩展性挑战473
17.3系统安全挑战473
17.4节能降耗475
17.5算法挑战477
17.6测不准原理477
17.7小结478
第18章大数据应用479
18.1客户关系与供求管理480
18.2科学研究483
18.3教育大数据应用485
18.4区块链与加密货币490
18.5小结493
结束语494
附录A安装Cloudera Apache Hadoop502
A.1环境准备504
A.1.1Cloudera Manager架构504
A.1.2服务器环境准备504
A.1.3安装介质下载505
A.1.4本地yum源搭建505
A.2安装Cloudera Manager Server506
A.3部署Hadoop集群507
A.4安装结果508
附录B在Matlab中应用 MapReduce509
B.1datastore简介510
B.2搜寻需要的项511
B.3MapReduce简介512
B.4如何运用MapReduce进行运算512
B.5MapReduce中对于键的使用514
B.6使用mapreduce计算分组指标514
B.7输出结果可视化516
附录C从AlphaGo到 AlphaZero518
参考文献526
|
| 內容試閱：
|
你是不是有这样的困惑：读了不少关于大数据的书，发现这大数据既可以用于竞选美国总统，又能够预测禽流感，还能卖啤酒和尿不湿，又是围棋高手大数据好像什么都能干耶！可是咋整呀？大数据多大为大呀？大数据能赚钱不？唉，怎么还是一头雾水。
当你拿到这本书就对了。大数据，大数据，多大算大呢？当所要处理的数据量超过了现有的计算环境的数据处理能力时，就是大数据了。它可以是ZB、EB、PB、TB级的，也可以是GB级的。当然，如果你的资金足够充裕，可以买得起TB级的内存、上百个处理器插槽以及海量的存储设备，那对别人来说是大数据，对你而言可能就只是小数据了。
大数据本身就是人类求知的过程，从数字，到数据，到信息，到知识，再到知识的运用，而后，优劣有别的运用结果又反馈到数据中，周而复始。其实，大数据所面临的场景只有两种：已知和未知。在已知的场景下需要累积大量的样本，或者，在有公认规则的前提下如棋艺类，按照规则自己生成样本，AlphaZero就属于这一类。而未知的场景就只能是做预测了。预测究竟能有多准？或许Most likely是最保险的答案。大数据既没有预测到美国总统特朗普的当选，也没有准确预测到埃博拉，沃尔玛也从未把啤酒和尿不湿放在一起。预测不准是常态，预测准是概率事件。
国内的IT热潮一波接着一波，俨然就像一场场运动。先是云计算，接着又是大数据。各路玩家都想追一下这些时髦热词的风潮，生怕赶不上，纷纷试着寻找将大数据整合到自身IT系统中的可能性。而原本的IT公司和从业者更是绞尽脑汁地想要在大数据业务中开拓新的市场。媒体对大数据产业未来几年的发展更是持有过热的描述，甚至对2020年的大数据产业规模给出了5万亿元的惊人估值，充满了Big Data = IT的味道。
在此背景下，一大批冠以大数据标题的书籍上架。就当前每年出版的大数据书籍的性质与数量来看，多数都属于通俗类、科普类以及吸引眼球的读物范畴。有些大数据著作中充满着正确的废话，而在真正意义上具有实践价值的内容少而又少。然而，其中并不乏受到热捧的作品。
这也在一定程度上反映出读者的求知心理：希望只需遵循一定的阅读捷径，就能消化掌握相关的技术，成为高手。然而，在阅读完众多所谓的技术类书籍后，读者却并不能收获到预期的效果。要么只模模糊糊地见森林见不到树木，要么又好像摸到了树木见不到森林，越来越迷茫。
究其原因，这类书籍并未本着科学的理念来传播可用于实践的知识与技术，更多的是为了迎合热点话题，以一种美化的甚至扭曲的形式来对新技术做介绍，缺乏严谨性和实用性，缺乏将技术以科学知识的高度进行传授的态度，更少了如何将技术落地到实处的关键内容，甚至很多书是作者为了提升职称和赚取稿酬等目的而拼凑的。当然，写书也是一门营生，追逐热潮没有错，可是过热的泡沫来，泡沫往却并不可取。对新技术的学习应该落到实处，切不可以讹传讹，Be careful with what you read，就是这个意思。
事实上，大数据的应用实情或许并不像许多例子中所描述的那样可以用来当兴奋剂。现阶段对大数据，从概念到应用，连认识都不清晰，更谈不上数据挖掘的深度。此时如果不对大数据有一个严谨客观的传授，可能会使读者在理解上产生谬误、从路线上走偏，甚至当前已经出现了不少对大数据认识的误区。可以发现，众多谈大数据的书籍中反复引用着几个所谓经典的例子，其实只不过是作者们的想象，经不起推敲。甚至一些例子所谈论的情况与大数据这个词汇一点关系都没有，譬如廉价机票、啤酒和尿不湿等。
今天再谈大数据，应该先摒弃盲目乐观以及炒作的成分。如果还是停留在反复谈论具有吸引眼球效果的数字和示例（如谷歌预测流感、奥巴马竞选总统等）上，谈论便失去了意义。
大数据或大数据技术就是工具。要让工具用得好，首先得用对地方，其次要会正确地使用。
基于以上认识，身为一线的数据从业者，作者深感为大数据从业者提供系统的正确的知识与观念正当其时。本书即是在此背景下编写的，旨在根据作者个人多年的从业经验和心得，从科学知识的高度出发，一步步帮助读者将大数据变成看得见摸得着的东西，使之有效实施，真正落地成为有用的工具。
除技术层面的内容外，本书立足于大数据的实践和商业价值，从规划、实施到运维来进行阐述。本书在构想与撰写时，遵循了以下原则。
在对象方面，本书兼顾专业化与大众化，且遵循着可以将本书作为研究生课程教材的撰写原则，在知识的深度和广度上，一方面与高校专业教育水准相符合，另一方面也进阶到大数据专业从业者水准。此外，大数据作为当前的IT技术热点，也是大众非常想了解的领域。为适应大众读者的需要，也为了使大数据技术可以获得更广泛的推广，本书力求要使普通读者也能够理解吸收。因此在取材与撰写时，除在文字上深入浅出外，在用例方面也尽量运用合适的例子把事情说清说透。事实上，本书的大部分内容曾用在作者为华中师范大学和上海交通大学硕士、博士研究生开设的大数据科学应用课程中，收到了良好的反馈。
在内容方面，本书采用将学术性与实用性相结合且更突出实用性的原则。大数据技术可以算作一种理论性的学科技术，需要重视对其所包含理论的探讨。在大数据范畴内，涉及包括统计学、人工智能等在内的各类专业知识，就连大数据这个词本身也是一个含义纷呈、范围甚广、概念抽象的名词。而在大数据技术的另一个层面上，它又是与实践紧密联系的，多数读者希望通过学习大数据书籍来解决最实际的大数据软硬件平台及应用的建设问题，而且大数据这一概念本身也是从实际的数据行业需求中产生出来的。因此，本书在内容上，力求结合理论与实际，既探讨必要的理论知识，给予读者正确的概念，又重视实践的各个环节。
在架构方面，本书采用专门性与普遍性均衡原则。就知识范围而言，大数据技术是多种技术的组合，从单一的需求出发点可以分化到涉及大数据规划、实施、运维全生命周期的各个不同的细分技术环节。本书内容注重大数据技术中的普通知识与深入的专业技术之间的均衡，以指引有志从事大数据行业的读者，在普通知识之外，找到自己感兴趣的方向。为达到这一目标，本书的编排涉及大数据的各个环节，并对每个环节的各细分方向都做了由浅入深的专题介绍。
所谓God creates the numbers, men do the rest。自从有人类文明以来就有了数字，进而有了数据，甚至可以说就有了大数据。为什么今天把大数据提到如此的高度呢？这和数据的产生量以及相应的处理能力（软的、硬的）是分不开的。中国的智能手机用户数量居全球第一，企业的数量也居全球第一，随着IT业的推进和渗透，每时每刻都有海量的数据产生和被保存，这也正是大数据在中国发展的基础。利用好大数据技术，了解数据、管理数据、共享数据、使用数据，可方便人们的日常生活，有助于企业打破信息孤岛，有效地融合各方面的信息，从而为合作伙伴的选择、供应链的管理、目标市场的锁定等提供定量的决策依据。
除论述大数据是什么、能做什么外，更侧重的是怎么做。本书以用户关系管理（Customer Relationship Management，CRM）这一企业级应用场景为例，这也是目前大数据应用为数不多的成功案例，深入、细致、完整地展示大数据的各个环节。紧扣如何利用大数据来实现以用户行为来指导销售推送以及生产决策的过程，也就是推荐系统，力求使读者能真正将大数据落地于实践。
本书立足于作者所处企业的案例和产品，结合流行的开源软件（Hadoop、Spark等），实打实地谈大数据，并给出了一手的市场情况以及真实的数据。全书从规划到实施再到运维，系统、全面地帮助读者把握大数据落地的各个环节，了解大数据的全貌。大数据的实践是与业务密切关联的，本书以一个实际的大数据项目为专题，将书中讲述的规划、实施、运维穿针引线，Put it all together，向读者完整展示大数据实践过程，拉近读者与大数据的距离，让大数据理念切实与读者的工作相结合。
在市场环境下，任何技术都要围绕商战的三匹老马（价格、质量、服务）以及经济社会的三个主要环节（生产、流通、消费）来发展。对于各个企业的大数据活动而言，其目的是寻找一条利用大数据来提高自身业务运作效率、维系现有客户、扩大新客户群的路线，从而达到以大数据促进产业链并实现精准客户管理的效果，做到向数据要效益。直白地说，就是怎样通过多渠道、多维度获取有用的用户消费行为数据，对其进行建模分析，从而做出决策来服务现有的用户，通过给用户推荐其感兴趣的相关产品以达到精准营销，挖掘已有客户的价值。而大数据的高级阶段则是设计出新的产品。
本书在撰写中秉持以下观点。
1）大数据的定义应该是多层次的。狭义的大数据停留在技术处理的层面；而广义的大数据则包含了大数据产业链的各个环节所提供的产品和服务；泛义的大数据扩展到每个细分的行业大数据中，成为数据 ；伪义大数据则以营销为目的，虽不可避免地包含了一部分炒作的成分，但也确确实实起到了一定的推广效用，是一股不可低估的市场力量。
2）做好大数据和做成任何一件事情一样，只有三种方法：Work hard，Work smart，Getting help。Work hard体现在对处理单元性能的提升上，Work smart则是对算法的改进，Getting help是指借助多个处理单元以集群的思维来解决对超大规模数据集的处理。
3）大数据的处理过程可形成一个持续提升的迭代闭环。由原始的数据开始，大数据先将其处理为信息，进而利用算法抽取出其中所蕴含的知识，知识的正确运用可以帮助决策，最终知识的集成和梳理就可以晋升为智慧和文化。而在开展决策实践的过程中，还会产生新的数据，即，数字数据信息知识应用数据。因此，上述过程又会进入新的一轮，并不断提升，也就是所谓的波浪式前进、螺旋式上升。
4）大数据并非一次技术的跳跃式飞升。多数IT技术领域在相当长的一段时间内并未出现划时代的本质变化，其技术增强点大都集中在计算能力（
|
|
購物車/收銀台(
0
) | 在線留言板
| 付款方式
| 聯絡我們
| 運費計算
| 幫助中心 |
加入書簽
HOME
新書上架
