[套装书]自己动手做推荐引擎+自己动手做智能产品：嵌入式JavaScript实现（2册）

1.5.2Apache Spark在可扩展实时推荐系统中的应用 9
1.6本章小结 12
第2章　构建第一个推荐引擎 13
2.1构建基础推荐引擎 14
2.1.1载入并格式化数据 15
2.1.2计算用户相似度 17
2.1.3为用户预测未知评级 18
2.2本章小结 24
第3章　推荐引擎详解 25
3.1推荐引擎的发展 26
3.2基于近邻算法的推荐引擎 27
3.2.1基于用户的协同过滤 29
3.2.2基于项目的协同过滤 30
3.2.3优点 32
3.2.4缺点 32
3.3基于内容的推荐系统 32
3.3.1用户画像生成 35
3.3.2优点 36
3.3.3缺点 36
3.4情境感知推荐系统 37
3.4.1情境定义 38
3.4.2前置过滤法 40
3.4.3后置过滤法 40
3.4.4优点 41
3.4.5缺点 41
3.5混合推荐系统 41
3.5.1加权法 42
3.5.2混合法 42
3.5.3层叠法 42
3.5.4特征组合法 42
3.5.5优点 43
3.6基于模型的推荐系统 43
3.6.1概率法 44
3.6.2机器学习法 44
3.6.3数学法 44
3.6.4优点 45
3.7本章小结 45
第4章　数据挖掘技术在推荐引擎中的应用 46
4.1基于近邻算法的技术 47
4.1.1欧氏距离 47
4.1.2余弦相似度 48
4.1.3Jaccard相似度 51
4.1.4皮尔逊相关系数 51
4.2数学建模技术 53
4.2.1矩阵分解 53
4.2.2交替最小二乘法 55
4.2.3奇异值分解 55
4.3机器学习技术 57
4.3.1线性回归 57
4.3.2分类模型 59
4.4聚类技术 69
4.5降维 71
4.6向量空间模型 75
4.6.1词频 75
4.6.2词频-逆文档频率 76
4.7评估技术 78
4.7.1交叉验证 79
4.7.2正则化 80
4.8本章小结 82
第5章　构建协同过滤推荐引擎 83
5.1在RStudio上安装recommenderlab 83
5.2recommenderlab包中可用的数据集 85
5.3探讨数据集 88
5.4使用recommenderlab构建基于用户的协同过滤 89
5.4.1准备训练数据和测试数据 90
5.4.2创建一个基于用户的协同模型 90
5.4.3在测试集上进行预测 92
5.4.4分析数据集 93
5.4.5使用k折交叉验证评估推荐模型 95
5.4.6评估基于用户的协同过滤 96
5.5构建基于项目的推荐模型 99
5.5.1构建IBCF推荐模型 100
5.5.2模型评估 103
5.5.3模型准确率度量 104
5.5.4模型准确率绘图 105
5.5.5IBCF参数调优 107
5.6使用Python构建协同过滤 110
5.6.1安装必要包 110
5.6.2数据源 110
5.7数据探讨 111
5.7.1表示评级矩阵 113
5.7.2创建训练集和测试集 114
5.7.3构建UBCF的步骤 115
5.7.4基于用户的相似度计算 115
5.7.5预测活跃用户的未知评级 116
5.8使用KNN 进行基于用户的协同过滤 117
5.9基于项目的推荐 118
5.9.1评估模型 119
5.9.2KNN训练模型 120
5.9.3评估模型 120
5.10本章小结 120
第6章　构建个性化推荐引擎 121
6.1个性化推荐系统 122
6.2基于内容的推荐系统 122
6.2.1构建一个基于内容的推荐系统 123
6.2.2使用 R语言构建基于内容的推荐 123
6.2.3使用Python语言构建基于内容的推荐 133
6.3情境感知推荐系统 144
6.3.1构建情境感知推荐系统 144
6.3.2使用R语言构建情境感知推荐 145
6.4本章小结 150
第7章　使用Spark构建实时推荐引擎 151
7.1Spark 2.0介绍 152
7.1.1Spark架构 152
7.1.2Spark组件 154
7.1.3Spark Core 154
7.1.4Spark的优点 156
7.1.5Spark设置 156
7.1.6SparkSession 157
7.1.7弹性分布式数据集 158
7.1.8关于ML流水线 158
7.2使用交替最小二乘法进行协同过滤 160
7.3使用PySpark构建基于模型的推荐系统 162
7.4MLlib推荐引擎模块 163
7.5推荐引擎方法 164
7.5.1实现 164
7.5.2基于用户的协同过滤 172
7.5.3模型评估 173
7.5.4模型选择和超参数调优 174
7.6本章小结 179
第8章　通过Neo4j构建实时推荐 180
8.1图数据库种类 181
8.2Neo4j 183
8.2.1Cypher查询语言 184
8.2.2节点语法 184
8.2.3关系语法 185
8.2.4构建第一个图 185
8.3Neo4j Windows安装 192
8.4Neo4j Linux安装 194
8.4.1下载Neo4j 194
8.4.2设置Neo4j 195
8.4.3命令行启动Neo4j 195
8.5构建推荐引擎 197
8.5.1将数据加载到Neo4j 197
8.5.2使用Neo4j生成推荐 200
8.5.3使用欧氏距离进行协同过滤 201
8.5.4使用余弦相似度进行协同过滤 206
8.6本章小结 209
第9章　使用Mahout构建可扩展的推荐引擎 210
9.1Mahout简介 211
9.2配置Mahout 211
9.2.1Mahout单机模式 211
9.2.2Mahout分布式模式 218
9.3Mahout的核心构建模块 220
9.3.1基于用户的协同过滤推荐引擎组件 220
9.3.2使用Mahout构建推荐引擎 223
9.3.3数据描述 223
9.3.4基于用户的协同过滤 225
9.4基于项目的协同过滤 228
9.5协同过滤评估 231
9.6基于用户的推荐评估 231
9.7基于项目的推荐评估 232
9.8SVD推荐系统 235
9.9使用Mahout进行分布式推荐 236
9.10可扩展系统的架构 240
9.11本章小结 241
第10章　推荐引擎的未来 242
10.1推荐引擎的未来 242
10.2推荐系统的发展阶段 243
10.2.1一般的推荐系统 243
10.2.2个性化推荐系统 244
10.2.3未来的推荐系统 245
10.2.4下一个最佳举措 249
10.2.5使用案例 249
10.3流行方法 251
10.4推荐引擎的时效性 252
10.4.1A/B测试 253
10.4.2反馈机制 254
10.5本章小结 255



---------------------------自己动手做智能产品：嵌入式JavaScript实现---------------------------


前言 1
第1章　简介 5
为何要将物品智能化 5
在实践中学习 5
利用JavaScript进行创造 6
工具和材料 7
第一部分　微控制器
第2章　微控制器为何物 13
ARM历史 14
利用微控制器编程 15
第3章　Espruino入门 19
准备工作 20
插入接口 21
软件安装 22
连接开发板 24
固件升级 25
命令行初体验 26
编辑器 27
第4章　开启JavaScript之旅 31
准备工作 31
注释 32
数据类型 32
数学计算 33
变量 35
自增与自减 37
对象 38
函数 38
数组 42
面向对象 44
按位运算 45
if语句 51
&&和｜｜ 52
三元操作符 53
for循环 53
异常 55
第二部分　电动机
第5章　什么是电动机 59
实验1：法拉第的电动机 60
实验2：电动机换向器 64
无刷直流电动机 68
实验3：步进电动机 69
实验4：步进电动机控制 72
实验5：多个步进电动机控制 76
第6章　频闪仪 79
找到一个风扇 79
实验6：速度检测 81
实验7：频闪仪 84
实验8：照得更远的频闪仪 86
第7章　约翰·罗杰·贝尔德的电视机 89
实验9：视觉的持续性 89
实验10：约翰·罗杰·贝尔德的电视机 92
第三部分　机电部分
第8章　制作一个简单的机器人 101
实验11：试用伺服电机 102
实验12：制作一个简单的机器人 105
实验13：循光 113
第9章　铅笔绘图仪 117
实验14：铅笔绘图仪 117
第10章　数码针孔相机 131
实验15：制作一个数码相机 131
第11章　打印机 145
实验16：制作一个打印机 145
第四部分　通信
第12章　有线通信 161
时序 161
实验17：制作示波器 163
第13章　切断连线：红外线 169
实验18：制作红外接收器 169
实验19：解码红外线信号 171
实验20：使用解码信号 175
实验21：用dweet.io在网络上使用遥控器 176
实验22：通过IFTTT在网络上使用遥控器 178
第14章　切断连线：无线电信号 181
实验23：连接接收器 182
实验24：连接发射器 183
实验25：从Espruino发射 185
实验26：解码接收的数据 186
第15章　连接无线网络 193
实验27：将WiFi添加到你的Pico 194
实验28：测试你的布线 198
实验29：连接到WiFi 199
实验30：将数据发送到Internet 200
实验31：从Internet接收数据 202
实验32：建立一个服务器 206
控制物品 209
第16章　低功耗蓝牙 213
低功耗蓝牙如何工作 214
如何使用低功耗蓝牙 216
Web Bluetooth 216
实验33：使用Puck.js 217
实验34：制作一个开门计数器 219
实验35：广播开门次数 222
实验36：用Eddystone接收开门次数 223
第五部分　合而为一
第17章　XY绘图仪 229
实验37:制作XY表 229
实验38：控制XY表 235
第18章　联网绘图仪 243
实验39：联网绘图仪 245
第六部分　总结
第19章　未来如何 257
附录A　零件和材料 259
附录B　常见的Espruino命令和变量 271
附录C　Espruino汇编 277

.　　读者对象
　　本书适合想要使用R、Python、Spark、Neo4j和Hadoop构建复杂预测决策系统及推荐引擎的初学者与有经验的数据科学家阅读。
　　格式约定
　　新术语和重要词汇用黑体显示。
　　表示警告或重点提示。
　　表示技巧。
　　下载示例代码及彩色图像
　　本书的示例代码及所有截图和样图，可以从http://www.packtpub.com通过个人账号下载，也可以访问华章图书官网http://www.hzbook.com，通过注册并登录个人账号下载。
　　
　　
　　---------------------------自己动手做智能产品：嵌入式JavaScript实现---------------------------
　　
　　
　　人类的想象力可以说是永无止境的，“创造”（making）这个词可以说是最适合描述人类经历的词汇之一了，它包括作画、设计、建造或者编程。回望自己所创之物，心中浮起 “这是我创造的”念头——这可以说是我所知的最美妙感觉之一了。
　　时至今日，我们已不单单能创建那些无生命物体，还可以让那些原本无生命的物体变得栩栩如生，让物体变得更加“聪明”。本书会告诉你如何利用微控制器让物体变得可编程化。
　　通过日常生活中的物品和技能学习，你将可以学习到如何创造数码相机、打印机、机器人，或者早期的电视机等。只要往下看，你会了解你日常所用的物品是如何组成的以及它们背后那些关于创造的故事，也将学会如何使用目前世界上数百万Web工程师正在使用的计算机语言——JavaScript。因为有了计算机语言解释器的帮助，你将见到你所添加的一行行代码实际产生的影响。
　　我喜欢在生活中创造并完成一件事情。希望本书可以激励你去创造和学习，并在其中找到乐趣。
　　本书排版约定
　　本书使用以下排版约定：
　　斜体（Italic）
　　用于菜单项、URL链接、邮件地址、文件名和文件扩展名。
　　等宽字体（?Constant width?）
　　用于程序清单，或者是所引用的程序元素，如变量或函数名、数据类型、语句和关键字。
　　等宽粗体（?Constant width bold?）
　　用于表示命令或是读者应输入的其他内容。
　　等宽斜体（?Constant width italic?）
　　用于表示需要由用户提供的值或者根据上下文确定的值所替换的内容。
　　该符号表示提示或一般注释。
　　该符号表示需要注意的信息或警告。
　　使用本书代码示例
　　本书补充资料（如代码示例、练习等）可从以下网址下载：https://github.com/espruino/making-things-smart。
　　本书是为了帮助你完成那些想要完成的事情。正常情况下，本书所提供的代码用例都可以在你的程序或者文档中使用。除非需引用大段的示例代码，否则你不需要得到我们的许可。例如，将本书中的某部分代码用于程序中并不需要得到许可，但是若想将本书的代码用于销售或者打包在CD-ROM中发布则需要得到我们的许可。引用本书中的内容或者示例代码来回答问题不需要许可，但是如果需要将本书的重要示例代码加入你的产品文档中则需要得到我们的许可。
　　我们希望读者在引用本书内容时指出出处（但非强制要求），通常包括书名、作者、出版社和国际标准书号。比如：“Making Things Smart by Gordon F. Williams (O’Reilly). Copyright 2017 Gordon F. Williams, 978-1-680-45189-4”。
　　在使用本书代码示例的过程中，如果你发现错误或者需要获得以上所提许可，欢迎通过以下邮箱联系我们：
　　bookpermissions@makermedia.com。
　　O’Reilly Safari
　　Safari（之前称为Safari Books Online）是一个以会员制为基础，为企业、政府、教育机构和个人提供图书服务及培训内容的平台。
　　会员可以访问众多的书籍、培训视频、学习资源、互动教程和专题课程等资源，这些资源来自全球的250多家出版社，包括O’Reilly Media、Harvard Business Review、Prentice Hall Professional、Addison-Wesley Professional、Microsoft Press、Sams、Que、Peachpit Press、Adobe、Focal Press、Cisco Press、John Wiley & Sons、Syngress、Morgan Kaufmann、IBM Redbooks、Packt、Adobe Press、FT Press、Apress、Manning、New Riders、McGraw-Hill、Jones & Bartlett、Course Technology等。
　　若需了解更多相关信息，请访问 http://oreilly.com/safari。
　　本书网址为http://shop.oreilly.com/product/0636920031246，https://www.oreilly.com/catalog/errata.csp?isbn=0636920031246列出了本书的勘误。
　　致谢
　　首先要感谢Maker Media团队给我机会完成本书——尽管这是我的第一本书——感谢他们有足够的耐心指导我如何去写一本书！我也十分感谢Brian Jepson和Anna Kaziunas France，尽管他们现在已经不在Maker Media了，但我会开始写作本书是因为他们在其中起了至关重要的作用。
　　我要感谢我那了不起的太太Marianne——不仅仅是因为她在我写作本书的过程和我平时工作中给予的帮助，还因为她在过去10年中给予了我自信，并支持我那些疯狂的想法，让我可以专心工作。
　　如果没有最初这些了不起的支持者，本书和Espruino可能都不会存在。在最开始时正是在他们的帮助下我才完成了第一块Espruino开发板，并且从那之后，在他们的持续帮助下，Espruino才会一步步走向今天的成熟。Espruino论坛中的成员们做出了巨大的贡献，在他们的赞助下，我才有更多时间去完成更多的基于Espruino的有趣项目。同样要十分感谢那些在GitHub中向我提交漏洞报告的人们，正是在他们的帮助下，我才能完善该项目。
　　我现在采用的绝大部分都是开源软件，像Linux（Mint）、GCC、Chromium、Eclipse、Atom、Gimp、Inkscape和LibreOffice等工具。GCC常常被忽视，在我刚开始Espruino相关工作时，许多嵌入式设备还没有一个可用的、免费的C编译器。
　　ST微电子公司的Laurent Desseignes和Sebastien Marsanne在STM32的Espruino开发板方面给予了巨大的支持，还有Michael Dietz 等其他在Nordic Semiconductor译注工作的开发者们，在我们开发Puck.js期间也给予了我们巨大的帮助。
　　谷歌的Fran?ois Beaufort 很出色地帮我们完成了Web Bluetooth和Chrome浏览器物理层的支持，绿色软件园（Green Park Software）的David Park则完成了一个WebBLE 应用程序，该程序在iOS操作系统中实现了Web Bluetooth的支持。还需感谢ARM mbed的Rob Moran、Jonathan Austin、Hugo Vincent 和Simon Ford，他们给了我宝贵的建议，并帮助宣传了Espruino，促使micro:bit 这样的设计方式在Espruino中得以实现。
　　剑桥大学计算机实验室也提供了巨大的帮助——不仅仅因为它所给予我的教育，还因为它在我毕业之后仍给予了我持续支持。Stuart Newstead可以说是一位梦幻级导师，是他让我知道不能将所有时间都花在写代码上，而需要关注更多其他的事情！
　　我还要感谢Tim Hunkin和Rex Garrod，他们在20世纪80年代主持的电视节目《机器的秘密生活》（The Secret Life of Machines）对我有巨大的影响。本书中的打印机项目正是为了对标和模仿他们节目中所提到的传真机。
　　最后，我想说如果没有我的父母Fred和Pat Williams，我可能永远都不会做这件事情。如果在成长道路中没有他们的帮助和支持（如那些无止境供应的电脑器件和电子组件），我也许永远不会走向软件和电子这条路。我的整个童年都在制作和实验，那些电视节目中所提到的项目我都可以直接在我父亲做的设备中进行实验。希望本书可以帮助孩子们更多地像我童年一样，拥有充满兴奋和奇迹的经历。
　　

.　　
　　在这个一体化产品的时代，本书从基础的内容开始，展示了如何利用Espruino微控制器和日常用品制造出属于自己的扫描仪、绘图仪和照相机等智能产品。
　　本书教读者利用目前互联网上颇受欢迎的编程语言之一JavaScript在Espruino上编程，制造出激动人心的智能产品。在丰富的线上支持和资源的帮助下，Esrpuino将JavaScript带入了智能设备的世界！
　　在完成本书的项目的过程中，读者会提升自己的技能和知识水平，拥有将生活中的创意变成现实智能产品的能力。
　　利用Espruino和生活中的一些日常用品，你将学到：
　　? 什么是微控制器以及如何用它编程
　　? 如何用JavaScript写代码
　　? 如何用软木酒塞制作马达
　　? 如何自制酷炫闪光测速仪
　　? 如何制作简单机器人
　　? 如何制作专属的低分辨率扫描仪
　　? 如何从基础开始制作一个可工作的打印机
　　? 如何构建一个数码相机
　　? 等等
　　制作这些有趣的设备，并不需要惊人的技能、工具或者昂贵的组件。作为初学者和中级创客的首选教程，本书会让你了解日常智能产品的原理以及如何获取所需要的工具。利用JavaScript和Espruino 亲手制作属于你自己的智能物品吧！