大数据智能：数据驱动的自然语言处理技术-图书

推荐0
收藏0
浏览617

大数据智能：数据驱动的自然语言处理技术

刘知远崔安颀等 (作者)　

丛　　书：大数据丛书
书　　号：978-7-121-37538-5
出版日期：2019-11-27
页　　数：368
开　　本：16(170*240)
出版状态：上市销售
维护人：郑柳洁

纸质版￥89.00

本书是介绍大数据智能、人工智能技术的科普书籍，旨在让更多人了解和学习互联网时代的人工智能技术——自然语言处理技术，让大数据智能技术更好地为我们服务。
全书包括大数据智能基础、技术和应用三部分，共14章。基础部分有3章：第1章以深度学习为例介绍大数据智能的计算框架；第2章以知识图谱为例介绍大数据智能的知识库；第3章介绍大数据的计算处理系统。技术部分有6章，分别介绍机器翻译、主题模型、情感分析与意见挖掘、智能问答与对话系统、个性化推荐、机器写作。应用部分有5章，分别介绍社交商业数据挖掘、智慧医疗、智慧司法、智慧金融、计算社会科学。本书后记部分为读者追踪大数据智能的最新学术资料提供了建议。

你能读懂的技术科普书，覆盖NLP诸多核心技术与应用场景

前言
大数据时代与人工智能
在进入 21 世纪前，很多人预测 21 世纪将会是怎样的世纪。有人说 21 世纪将是生命科学的时代，也有人说 21 世纪将是知识经济的时代，不一而足。随着互联网的高速发展，大量的事实强有力地告诉我们，21 世纪必将是大数据的时代，是智能信息处理的黄金时代。
美国奥巴马政府于 2012 年发布大数据研发倡议以来，关于大数据的研究与思考在全球蔚然成风，已经有很多专著面世，既有侧重趋势分析的，如舍恩伯格和库克耶的《大数据时代》（盛杨燕和周涛教授译）、涂子沛的《大数据》和《数据之巅》，也有偏重技术讲解的，如莱斯科夫等人的《大数据》（王斌教授译）、张俊林的《大数据日知录》、杨巨龙的《大数据技术全解》，等等。相信随着大数据革命的不断深入推进，会有更多的专著出版。
前人已对大数据的内涵进行过很多探讨与总结，其中比较著名的是所谓的“3V”定义：大容量（volume）、高速度（velocity）和多形态（variety）。3V 的概念于 2001 年由麦塔集团（Meta Group）分析师道格·莱尼（Doug Laney）提出，后来被高德纳咨询公司（Gartner Group）正式用来描述大数据。此外，还有很多研究者提出更多的“V”来描述大数据，如真实性（veracity），等等。既然有如此众多的“珠玉”在前，我们推出本书，当然希望讲一点不同的东西，这点不同的东西就是智能。
人工智能一直是研究者们非常感兴趣的话题，并且由于众多科幻电影和小说作品的影响而广为人知。1946 年，第一台电子计算机问世之后不久，英国数学家艾伦·麦席森·图灵就发表了一篇名为《计算机器与智能》（Computing Machinery and Intelligence）的重要论文，探讨了创造具有智能的机器的可能性，并提出了著名的“图灵测试”，即如果一台机器与人类进行对话，能够不被分辨出其机器的身份，就可以认为这台机器具有了智能。自 1956 年在美国达特茅斯举行的研讨会上正式提出“人工智能”的研究提案以来，人们开始了长达半个多世纪的曲折探索。且不去纠结“什么是智能”这样哲学层面的命题［有兴趣的读者可以参阅罗素和诺维格的《人工智能——一种现代方法》（Artificial Intelligence: A Modern Approach），以及
杰夫·霍金斯的《智能时代》（On Intelligence）］，我们先来谈谈人工智能与大数据的关系。要回答这个问题，我们先来看一个人是如何获得智能的。一个呱呱坠地、只会哭泣的婴儿，长成思维健全的成人，至少要经历十几年与周围世界交互和学习的过程。从降临到这个世界的那一刻起，婴儿无时无刻不在通过眼睛、耳朵、鼻子、皮肤接收着这个世界的数据信息：图像、声音、味道、触感，等等。你有没有发现，这些数据无论从规模、速度还是形态来看，无疑是典型的大数据。可以说，人类习得语言、思维等智能的
过程，就是利用大数据学习的过程。智能不是无源之水，它并不是凭空从人脑中生长出来的。同样，人工智能希望让机器拥有智能，也需要以大数据作为学习的素材。可以说，大数据将是实现人工智能的重要支撑，而人工智能是大数据研究的重要目标之一。但是，在人工智能研究早期，人们并不是这样认为的。早在 1957 年，由于人工智能系统在简单实例上的优越性能，研究者们曾信心满怀地认为，计算机将在 10 年内成为国际象棋冠军，而通过简单的句法规则变换和单词替换就可以实现机器翻译。事实证明：人们远远低估了人类智能的复杂性。即使在国际象棋这样规则和目标极为简单清晰的任务上，直到 40 年后的 1997 年，由 IBM 推出的深蓝超级计算机才宣告打败人类世界顶级国际象棋大师卡斯帕罗夫。而在机器翻译这样更加复杂的任务上（人们甚至在优质翻译的标准上都无法达成共识，更无法清晰地告诉机器），计算机至今还无法与人类翻译的水平相提并论。当时的问题在于，人们低估了智能的深度和复杂度。智能是分不同层次的。对于简单的智能任务（如对有限句式的翻译等），我们简单制定几条规则就能完成。但是对于语言理解、逻辑推理等高级智能，简单方法就显得力不从心。生物界中，从简单的单细胞生物进化到人类的过程，也是智能不断进化的过程。最简单的单细胞生物草履虫，虽然没有神经系统，却已经能够根据外界信号和刺激进行反应，实现趋利避害——我们可以将其视作最简单的智能。而俄国高级神经活动生理学奠
基人伊万·彼得罗维奇·巴甫洛夫的关于狗的条件反射实验，则向我们证明了相对更高级的智能水平：能根据铃声推断食物即将出现，也就是可以根据两种外界信号（铃声与食物）的关联关系实现简单的因果推理。人类智能则是智能的最高级形式，拥有语言理解、逻辑推理与想象等独特的能力。我们可以发现，低级智能只需小规模的简单数据或规则的支持，而高级智能则需要大规模的复杂数据的支持。
同样重要的，高级智能还需要独特计算架构的支持。很显然，人脑结构就与狗等动物有着本质的不同，因此，即使将一只狗像婴儿一样抚育，也不能指望它能完全学会和理解人类的语言，并像人一样思维。受到生物智能的启发，我们可以总结出如下图所示的基本结论：不同规模数据的处理，需要不同的计算框架，产生不同级别的智能。
关于人工智能是否要完全照搬人类智能的工作原理，目前仍然争论不休。有人举例：虽然人们受到飞鸟的启发发明了飞机，但其飞行原理（空气动力学）与飞鸟有本质不同；同样，生物界都在用双脚或四腿行走、奔跑，人们却发明了轮子和汽车实现快速移动。然而不可否认，大自然无疑是我们最好的老师。人工智能固然不必完全复制人类智能，但是知己知彼，方能百战不殆。生物智能带来的启示已经在信息处理技术发展中得到了印证。谷歌研究员、美国工程院院士 Jeff Dean 曾对大数据做出过类似结论：“对处理数
据规模 X 的合理设计可能在 10X 或 100X 规模下就会变得不合理。（Right design at X may be very wrong at 10X or 100X.）”也就是说，大数据处理也需要专门设计新颖的计算架构。
而与人工智能密切相关的机器学习、自然语言处理、图像处理、语音处理等领域，近年来都在大规模数据的支持下取得了惊人的进展。我们可以确信，大数据是人工智能发展的必由之路。

大数据智能如何成真
虽然大数据是实现人工智能的重要支持，但如何实现大数据智能，却并非显而易见。近年来，计算机硬件、大数据处理技术和深度学习等领域取得了突破性进展，涌现出了一批在技术上和商业上影响巨大的智能应用，让人工智能发展道路日益清晰。触手可及的人类社会大数据、高性能的计算能力，以及合理的智能计算框架，为大数据智能的实现提供了有力的支持。
人类社会大数据触手可及。如前所述，这是大数据的时代，互联网的兴起、手机等便携设备的普及，让人类社会的行为数据越来越多地汇聚到网上。这让机器从这些大数据中自动学习成为可能。但是，大数据（如大气数据、地震数据等）并非现在才出现，只是在过去，我们限于计算能力和计算框架，难以从中萃取精华。因此，大数据智能的实现还依赖以下两个方面的发展。
一方面，计算能力突飞猛进。受到摩尔定律的支配，近半个世纪以来，计算机的计算和存储能力一直在以令人目眩的速度提高。摩尔定律最早由英特尔（Intel）创始人之一戈登·摩尔提出，其基本思想是：保持价格不变的情况下，集成电路上可容纳的元器件的数目大约每隔 18 到 24 个月就会增加一倍，性能也将随之提升一倍。也就是说，每一块钱能买到的计算机性能将每隔 18 到 24 个月提升一倍以上。虽然人们一直担心，随着微处理器器件尺寸逐渐变小，摩尔定律会受量子效应影响而失效，但至少从已有发展历程来看，随着多核、多机并行等框架的提出，计算机已经能够较好地提供大规模数据处理所需的计算能力了。
另一方面，计算框架返璞归真。近年来，深度学习在图像、语音和自然语言处理领域掀起了一场革命，在图像分类、语音识别等重要任务上取得了惊人的性能突破，在实际上催生了苹果 Siri 等语音助手的出现，在国内则涌现了科大讯飞、Face++等高科技公司。然而我们可能很难想象，深度学习的基础——人工神经网络技术，此前曾长期处于无人问津的境地。在深度学习兴起以前，人工神经网络常因存在可解释性差、学习稳定性差、难以找到最优解等问题而被诟病。然而，正是由于大规模数据和高性能计算能力的支持，以人工神经网络为代表的机器学习技术才得以在大数据时代焕发出勃勃生机。

人工智能的下一个里程碑
当下，以深度学习为代表的计算框架在很多具体任务上取得了重大的成果，甚至有媒体和公众已经开始因人工智能取代人类的可能性而恐慌。然而，理性地看，深度学习的处理能力和效率与人类大脑相比仍有巨大差距。因此，大数据智能并非孕育人工智能的终极之道。随着技术的进步和研究的深入，现有解决方案必然触及天花板，进入瓶颈期。
人脑拥有现有计算框架不可比拟的优势。例如，虽然人脑中的信号传输速度要远低于计算机中的信息传递速度，但是人脑在很多智能任务上的处理效率远高于计算机，例如在众多声音中快速识别出叫自己名字的声音，通过线条漫画认出名人，复杂数学问题的推导求解，快速阅读理解一篇文章，等等。可见，在计算速度受限的情况下，人脑一定拥有某种独特的计算框架，才能完成这些令人叹为观止的智能任务。
那么人工智能的下一个里程碑是什么呢？我们猜想，可能是神经科学及其相关学科。一直以来，神经科学都在探索各种观测大脑活动的工具和方法，并做出了大量的实证和建模工作。随着光控基因技术（optogenetics）和药理基因技术（pharmacogenetics）等新技术的发展，人们拥有了在时间和空间上更加精确地监测和控制大脑活动的能力，从而有望彻底发现人脑的神经机制。一旦人脑的神经机制被发现，有理由相信，人们可以迅速通过仿真等方式，在计算机中实现类似甚至更高效的计算框架，从而推动实现人工智
能的最终目标。此外，量子计算、生物计算、新型芯片材料等领域的发展，都为我们展现出无限可能的未来。
当社会大数据、计算能力和计算框架三方面发展到一定阶段，融合产生了大数据智能。相信随着更大规模数据、更强计算能力和更合理计算框架的推出，人工智能也会不断向前发展。然而，正如前几年社会各界对物联网、云计算的追捧，最近社会上对大数据和人工智能概念的炒作愈演愈烈，产生了很多不切实际的幻想和泡沫。对于这个领域重新得到青睐，我们当然感到欣慰，但是，也不妨多一些谨慎和冷静。鉴古知今，回顾人工智能的曲折发展史（《人工智能——一种现代方法》一书中有详细介绍），我们看到，在过度的期望破灭之后，随之而来的就是严冬。在大数据智能万众瞩目的今天，我们不妨心中常存对于凛冬将至的警惕。
事物总是在不断自我否定中螺旋式前进的，人工智能的探求之路也是如此。我们相信大数据是获得智能的必由之路，但现在的做法不见得就一定正确。多年之后，我们也许会用截然不同的办法处理大数据。然而这些都不重要，重要的是一颗执着的心和坚持不懈的信念。就像深度学习领域的巨人 Geoffrey Hinton、Yann LeCun 等，曾坐了十几年的冷板凳，研究成果屡屡被拒，到了 2019 年才荣膺计算机领域最高奖“图灵奖”。对真正的学者而言，研究领域是冷门还是热门也许不重要，反而会成为对从业者的试金石——只有在寒冬中坚持下来的种子，才能等到春天绽放。

关于本书
本书前身《大数据智能——互联网时代的机器学习和自然语言处理技术》出版于2016 年，作为一本技术科普书，在社会上得到了一些正面的反响。于是，我们邀请更多作者加入，在原有的 8 章内容基础上新增了 6 章内容。此外，对原有章节内容进行了适当更新，使内容更加全面。
本书并不想在已经熊熊燃烧的大数据火堆上再添一把柴。本书希望从人工智能这个新的角度，总结大数据智能取得的成果、局限性及未来可能的发展前景。本书共分 14 章，从大数据智能基础、技术和应用三个方面展开介绍。本书基础部分有 3 章。第 1 章以深度学习为例介绍大数据智能的计算框架；第 2 章以知识图谱为例介绍大数据智能的知识库；第 3 章介绍大数据的计算处理系统。在大数据智能的技术和应用部分，我们选择文本大数据作为主要场景进行介绍，主要原因在于，语言是人类智能的集中体现，语言理解也是人工智能的终极目标，图灵测试的设置是以语言作为媒介的。技术部分有 6 章，分别介绍主题模型、机器翻译、情感分析与意见挖掘、智能问答与对话系统、个性化推荐系统、机器写作等数据智能关键技术。应用部分有 5 章，分别介绍社交商业数据挖掘、智慧医疗、智慧司法、智能金融、计算社会学等
典型应用场景。
大数据智能仍然是一个高速发展的领域。为了让读者能够了解这个领域的前沿进展，本书专门设置后记，为初学者追踪大数据智能的最新学术资料提供了建议。大数据智能方向众多，每位学者术业有专攻，很难独力完成所有章节内容。因此，我们邀请了多位作者撰写他们所擅长方向的章节。他们都在相关领域开展了多年研究工作，发表过高水平的论文。

致谢
本书能够出版，无疑得到了很多人的支持和帮助。首先，感谢本书的几位合作者：丁效、韩文弢、苏劲松、汤步洲、涂存超、严睿、张开旭、张永锋、赵鑫。他们的热情、无私与认真，让我们相信本书能够真的为读者提供及时、有用的知识。还要感谢各位同事、同学和好友，在本书撰写过程中提供了很多最新研究资料和热情的帮助。
我们特别感谢电子工业出版社副总编辑兼博文视点公司总经理郭立老师的热情邀请和大力支持，以及本书策划兼特约编辑、清华大学计算机系 1964 届学长顾慧芳老师的不断激励和鼎力相助，让我们鼓起勇气接下这个选题，也能在我们拖延症反复发作时耐心地等待。在书稿的准备过程中，特别感谢本书责任编辑郑柳洁老师对书稿的悉心修改，对封面设计和每章内容都提供了大量中肯的建议，让本书焕然一新。

欢迎交流
当今世界，大数据智能是一个涉及面非常广泛、发展非常迅猛的领域，而且这个领域的研究成果将加速人类认识世界、探索宇宙，也将极大地影响人们日常生活的方方面面。因此，笔者想在从事学习和自然语言处理等基础技术和最新进展研究工作的同时撰写一本介绍这一领域的科普书籍，抛砖引玉，旨在为需要了解与学习大数据智能技术的朋友提供帮助，使更多有志之士加入大数据智能分析这一充满惊奇和魅力的领域中。
笔者尽量以开放的态度梳理每个方向的相关成果和进展，然而大数据智能日新月异，而我们所知有限，难免有挂一漏万之憾。如有重要进展或成果没有涉及，绝非作者故意为之，敬请大家批评指正。我们欢迎读者对本书做出任何反馈，无论是指出错误还是改进建议，请直接发邮件至 liuzy@tsinghua.edu.cn。我们会在书中改正所有发现的错误。
刘知远崔安颀
2019 年 11 月于北京

目录
1 深度计算——机器大脑的结构 1
1.1 惊人的深度学习 ................................................................................... 1
1.1.1 可以做酸奶的面包机：通用机器的概念 ................................ 2
1.1.2 连接主义 .................................................................................... 4
1.1.3 用机器设计机器 ........................................................................ 5
1.1.4 深度网络 .................................................................................... 6
1.1.5 深度学习的用武之地 ................................................................ 6
1.2 从人脑神经元到人工神经元 ............................................................... 8
1.2.1 生物神经元中的计算灵感 ........................................................ 8
1.2.2 激活函数 .................................................................................... 9
1.3 参数学习 ............................................................................................. 10
1.3.1 模型的评价 .............................................................................. 11
1.3.2 有监督学习 .............................................................................. 11
1.3.3 梯度下降法 .............................................................................. 12
1.4 多层前馈网络 ..................................................................................... 14
1.4.1 多层前馈网络 .......................................................................... 14
1.4.2 后向传播算法计算梯度 .......................................................... 16
1.5 逐层预训练 ......................................................................................... 17
1.6 深度学习是终极神器吗 ..................................................................... 20
1.6.1 深度学习带来了什么 .............................................................. 20
1.6.2 深度学习尚未做到什么 .......................................................... 21
1.7 内容回顾与推荐阅读 ......................................................................... 22
1.8 参考文献 ............................................................................................. 23
2 知识图谱——机器大脑中的知识库 25
2.1 什么是知识图谱 ................................................................................. 25
2.2 知识图谱的构建 ................................................................................. 28
2.2.1 大规模知识库 .......................................................................... 28
2.2.2 互联网链接数据 ...................................................................... 29
2.2.3 互联网网页文本数据 .............................................................. 30
2.2.4 多数据源的知识融合 .............................................................. 31
2.3 知识图谱的典型应用 ......................................................................... 32
2.3.1 查询理解 .................................................................................. 32
2.3.2 自动问答 .................................................................................. 34
2.3.3 文档表示 .................................................................................. 35
2.4 知识图谱的主要技术 ......................................................................... 36
2.4.1 实体链指 .................................................................................. 36
2.4.2 关系抽取 .................................................................................. 37
2.4.3 知识推理 .................................................................................. 39
2.4.4 知识表示 .................................................................................. 40
2.5 前景与挑战 ......................................................................................... 42
2.6 内容回顾与推荐阅读 ......................................................................... 45
2.7 参考文献 ............................................................................................. 45
3 大数据系统——大数据背后的支撑技术 47
3.1 大数据有多大 ..................................................................................... 47
3.2 高性能计算技术 ................................................................................. 49
3.2.1 超级计算机的组成 .................................................................. 49
3.2.2 并行计算的系统支持 .............................................................. 51
3.3 虚拟化和云计算技术 ......................................................................... 55
3.3.1 虚拟化技术 .............................................................................. 56
3.3.2 云计算服务 .............................................................................. 58
3.4 基于分布式计算的大数据系统 ......................................................... 59
3.4.1 Hadoop 生态系统 .................................................................... 60
3.4.2 Spark ........................................................................................ 67
3.4.3 典型的大数据基础架构 .......................................................... 68
3.5 大规模图计算 ..................................................................................... 69
3.5.1 分布式图计算框架 .................................................................. 70
3.5.2 高效的单机图计算框架 .......................................................... 71
3.6 NoSQL ................................................................................................ 72
3.6.1 NoSQL 数据库的类别 ............................................................ 72
3.6.2 MongoDB 简介 ........................................................................ 74
3.7 内容回顾与推荐阅读 ......................................................................... 76
3.8 参考文献 ............................................................................................. 77
4 主题模型——机器的智能摘要利器 78
4.1 由文档到主题 ..................................................................................... 78
4.2 主题模型出现的背景 ......................................................................... 80
4.3 第一个主题模型：潜在语义分析 ..................................................... 81
4.4 第一个正式的概率主题模型 ............................................................. 84
4.5 第一个正式的贝叶斯主题模型 ......................................................... 85
4.6 LDA 的概要介绍 ................................................................................ 86
4.6.1 LDA 的延伸理解：主题模型广义理解 ................................. 90
4.6.2 模型求解 .................................................................................. 92
4.6.3 模型评估 .................................................................................. 93
4.6.4 模型选择：主题数目的确定 .................................................. 94
4.7 主题模型的变形与应用 ..................................................................... 95
4.7.1 基于 LDA 的变种模型 ............................................................ 95
4.7.2 基于 LDA 的典型应用 ............................................................ 97
4.7.3 基于主题模型的新浪名人话题排行榜应用 ........................ 100
4.8 内容回顾与推荐阅读 ....................................................................... 104
4.9 参考文献 ........................................................................................... 105
5 机器翻译——机器如何跨越语言障碍 110
5.1 机器翻译的意义 ............................................................................... 110
5.2 机器翻译的发展历史 ....................................................................... 111
5.2.1 基于规则的机器翻译 ............................................................ 112
5.2.2 基于语料库的机器翻译 ........................................................ 112
5.2.3 基于神经网络的机器翻译 .................................................... 114
5.3 经典的神经网络机器翻译模型 ....................................................... 114
5.3.1 基于循环神经网络的神经网络机器翻译 ............................ 114
5.3.2 从卷积序列到序列模型 ........................................................ 117
5.3.3 基于自注意力机制的 Transformer 模型 .............................. 118
5.4 机器翻译译文质量评价 ................................................................... 120
5.5 机器翻译面临的挑战 ....................................................................... 121
5.6 参考文献 ........................................................................................... 123
6 情感分析与意见挖掘——机器如何了解人类情感 125
6.1 情感可以计算吗 ............................................................................... 125
6.2 哪里需要文本情感分析 ................................................................... 126
6.2.1 情感分析的宏观反映 ............................................................ 127
6.2.2 情感分析的微观特征 ............................................................ 128
6.3 情感分析的主要研究问题 ............................................................... 129
6.4 情感分析的主要方法 ....................................................................... 132
6.4.1 构成情感和观点的基本元素 ................................................ 132
6.4.2 情感极性与情感词典 ............................................................ 134
6.4.3 属性－观点对 ........................................................................ 141
6.4.4 情感极性分析 ........................................................................ 143
6.5 主要的情感分析资源 ....................................................................... 148
6.6 前景与挑战 ....................................................................................... 149
6.7 内容回顾与推荐阅读 ....................................................................... 150
6.8 参考文献 ........................................................................................... 151
7 智能问答与对话系统——智能助手是如何炼成的 154
7.1 问答：图灵测试的基本形式 ........................................................... 154
7.2 从问答到对话 ................................................................................... 155
7.2.1 对话系统的基本过程 ............................................................ 156
7.2.2 文本对话系统的常见场景 .................................................... 157
7.3 问答系统的主要组成 ....................................................................... 159
7.4 文本问答系统 ................................................................................... 161
7.4.1 问题理解 ................................................................................ 161
7.4.2 知识检索 ................................................................................ 165
7.4.3 答案生成 ................................................................................ 169
7.5 端到端的阅读理解问答技术 ........................................................... 169
7.5.1 什么是阅读理解任务 ............................................................ 170
7.5.2 阅读理解任务的模型 ............................................................ 172
7.5.3 阅读理解任务的其他工程技巧 ............................................ 173
7.6 社区问答系统 ................................................................................... 174
7.6.1 社区问答系统的结构 ............................................................ 174
7.6.2 相似问题检索 ........................................................................ 175
7.6.3 答案过滤 ................................................................................ 177
7.6.4 社区问答的应用 .................................................................... 177
7.7 多媒体问答系统 ............................................................................... 179
7.8 大型问答系统案例：IBM 沃森问答系统 ...................................... 181
7.8.1 沃森的总体结构 .................................................................... 182
7.8.2 问题解析 ................................................................................ 182
7.8.3 知识储备 ................................................................................ 183
7.8.4 检索和候选答案生成 ............................................................ 184
7.8.5 可信答案确定 ........................................................................ 184
7.9 前景与挑战 ....................................................................................... 186
7.10 内容回顾与推荐阅读 ..................................................................... 186
7.11 参考文献 ......................................................................................... 187
8 个性化推荐系统——如何了解计算机背后的他 190
8.1 什么是推荐系统 ............................................................................... 190
8.2 推荐系统的发展历史 ....................................................................... 191
8.2.1 推荐无处不在 ........................................................................ 192
8.2.2 从千人一面到千人千面 ........................................................ 193
8.3 个性化推荐的基本问题 ................................................................... 194
8.3.1 推荐系统的输入 .................................................................... 194
8.3.2 推荐系统的输出 .................................................................... 196
8.3.3 个性化推荐的基本形式 ........................................................ 197
8.3.4 推荐系统的三大核心问题 .................................................... 198
8.4 典型推荐算法浅析 ........................................................................... 199
8.4.1 推荐算法的分类 .................................................................... 199
8.4.2 典型推荐算法介绍 ................................................................ 200
8.4.3 基于矩阵分解的打分预测 .................................................... 207
8.4.4 基于神经网络的推荐算法 .................................................... 213
8.5 推荐的可解释性 ............................................................................... 214
8.6 推荐算法的评价 ............................................................................... 217
8.6.1 评分预测的评价 .................................................................... 218
8.6.2 推荐列表的评价 .................................................................... 219
8.6.3 推荐理由的评价 .................................................................... 220
8.7 前景与挑战：我们走了多远 ........................................................... 221
8.7.1 推荐系统面临的问题 ............................................................ 221
8.7.2 推荐系统的新方向 ................................................................ 223
8.8 内容回顾与推荐阅读 ....................................................................... 225
8.9 参考文献 ........................................................................................... 226
9 机器写作——从分析到创造 228
9.1 什么是机器写作 ............................................................................... 228
9.2 艺术写作 ........................................................................................... 229
9.2.1 机器写诗 ................................................................................ 229
9.2.2 AI 对联 ................................................................................... 233
9.3 当代写作 ........................................................................................... 236
9.3.1 机器写稿 ................................................................................ 236
9.3.2 机器故事生成 ........................................................................ 239
9.4 内容回顾 ........................................................................................... 241
9.5 参考文献 ........................................................................................... 242
10 社交商业数据挖掘——从用户数据挖掘到商业智能应用 243
10.1 社交媒体平台中的数据宝藏 ......................................................... 243
10.2 打通网络社区的束缚：用户网络社区身份的链指与融合 ......... 245
10.3 揭开社交用户的面纱：用户画像的构建 ..................................... 247
10.3.1 基于显式社交属性的构建方法 .......................................... 247
10.3.2 基于网络表示学习的构建方法 .......................................... 249
10.3.3 产品受众画像的构建 .......................................................... 250
10.4 了解用户的需求：用户消费意图的识别 ..................................... 254
10.4.1 个体消费意图识别 .............................................................. 254
10.4.2 群体消费意图识别 .............................................................. 256
10.5 精准的供需匹配：面向社交平台的产品推荐算法 ..................... 258
10.5.1 候选产品列表生成 .............................................................. 258
10.5.2 基于学习排序算法的推荐框架 .......................................... 259
10.5.3 基于用户属性的排序特征构建 .......................................... 260
10.5.4 推荐系统的整体设计概览 .................................................. 261
10.6 前景与挑战 ..................................................................................... 262
10.7 内容回顾与推荐阅读 ..................................................................... 263
10.8 参考文献 ......................................................................................... 264
11 智慧医疗——信息技术在医疗领域应用的结晶 265
11.1 智慧医疗的起源 ............................................................................. 265
11.2 智慧医疗的庐山真面目 ................................................................. 267
11.3 智慧医疗中的人工智能应用 ......................................................... 268
11.3.1 医疗过程中的人工智能应用 .............................................. 268
11.3.2 医疗研究中的人工智能应用 .............................................. 272
11.4 前景与挑战 ..................................................................................... 273
11.5 内容回顾与推荐阅读 ..................................................................... 275
11.6 参考文献 ......................................................................................... 275
12 智慧司法——智能技术促进司法公正 276
12.1 智能技术与法律的碰撞 ................................................................. 276
12.2 智慧司法相关研究 ......................................................................... 277
12.2.1 法律智能的早期研究 .......................................................... 278
12.2.2 判决预测：虚拟法官的诞生与未来 .................................. 279
12.2.3 文书生成：司法过程简化 .................................................. 283
12.2.4 要素提取：司法结构化 ...................................................... 285
12.2.5 类案匹配：解决一案多判 .................................................. 289
12.2.6 司法问答：让机器理解法律 .............................................. 292
12.3 智慧司法的期望偏差与应用挑战 ................................................. 293
12.3.1 智慧司法的期望偏差 .......................................................... 293
12.3.2 智慧司法的应用挑战 .......................................................... 294
12.4 内容回顾与推荐阅读 ..................................................................... 295
12.5 参考文献 ......................................................................................... 295
13 智能金融——机器金融大脑 298
13.1 智能金融正当其时 ......................................................................... 298
13.1.1 什么是智能金融 .................................................................. 298
13.1.2 智能金融与金融科技、互联网金融的异同 ...................... 298
13.1.3 智能金融适时而生 .............................................................. 299
13.2 智能金融技术 ................................................................................. 301
13.2.1 大数据的机遇与挑战 .......................................................... 301
13.2.2 智能金融中的自然语言处理 .............................................. 303
13.2.3 金融事理图谱 ...................................................................... 307
13.2.4 智能金融中的深度学习 ...................................................... 310
13.3 智能金融应用 ................................................................................. 314
13.3.1 智能投顾 .............................................................................. 314
13.3.2 智能研报 .............................................................................. 315
13.3.3 智能客服 .............................................................................. 316
13.4 前景与挑战 ..................................................................................... 317
13.5 内容回顾与推荐阅读 ..................................................................... 319
13.6 参考文献 ......................................................................................... 319
14 计算社会学——透过大数据了解人类社会 320
14.1 透过数据了解人类社会 ................................................................. 320
14.2 面向社会媒体的自然语言使用分析 ............................................. 321
14.2.1 词汇的时空传播与演化 ...................................................... 322
14.2.2 语言使用与个体差异 .......................................................... 325
14.2.3 语言使用与社会地位 .......................................................... 326
14.2.4 语言使用与群体分析 .......................................................... 328
14.3 面向社会媒体的自然语言分析应用 ............................................. 330
14.3.1 社会预测 .............................................................................. 330
14.3.2 霸凌现象定量分析 .............................................................. 331
14.4 未来研究的挑战与展望 ................................................................. 332
14.5 参考文献 ......................................................................................... 333
后记 334

全部展开

读者评论

同系列书

企业数据化管理变革——数据治理与统筹方案

赵兴峰 (作者)

很多企业热衷于谈论大数据，却忽视企业内部的基础数据管理以及内部管理团队的数据思维训练。不重视数据，就不会有数据；没有数据、没有具备数据思维的管理团队，大数据跟你...

￥59.00
解析深度学习：语音识别实践

俞凯等俞栋邓力 (作者) 俞凯 (译者)

本书是首部介绍语音识别中深度学习技术细节的专著。全书首先概要介绍了传统语音识别理论和经典的深度神经网络核心算法。接着全面而深入地介绍了深度学习在语音识别中的应用...

￥109.00
金融大数据：战略规划与实践指南

陈利强 (作者)

从金融与大数据的天然联系展开，阐述了金融行业实施大数据战略的必要性以及优势。冷静、客观的从数据角度分析了金融行业如何基于自身的特点来搭建大数据的环境，打通业务环...

￥79.00
发现数据之美：数据分析原理与实践

彭鸿涛 (作者)

本书试图全面介绍IBM SPSS在构建基于数据深度分析的行业解决方案方面的预测分析功能，试图涵盖统计分析、数据挖掘和决策管理三个方面的内容。IBM SPSS...

￥75.00
数据可视化（全彩）

陈为 (作者)

可视化是数据分析处理的重要手段。国内迄今尚无一本原创的数据可视化教材。本书的内容将以归纳介绍核心的数据可视化原理为主，每章添加一个小章节总结最新研究进展（作...

￥128.00