探索云边协同关键技术,赋能新型大数据应用场景。
读者群入群通道:关注【华章计算机】公众号,回复【大数据】
本书以云边协同技术的发展历程为线索,介绍云边协同技术体系,具体内容组织如下。
第1章以云边协同技术为线索,首先介绍云计算与边缘计算的发展历程,然后梳理云边协同技术的发展,并详细介绍云边协同数据处理系统发展过程中的驱动因素,以及数据处理在云边协同架构下的模式演化和未来的复杂应用的潜在计算模式。
第2章详细介绍云边协同环境下的数据预处理技术,对云边协同环境下需要处理的数据具有的多样性、异构性、限制性、稳定性和高吞吐等特点做了介绍,然后对数据清理、集成、归约等预处理技术以及典型批流融合处理架构和系统进行详细介绍,最后展示了典型技术案例SlimML。
第3章具体介绍边缘智能技术,包括边缘训练前沿技术(如通信开销优化、梯度计算优化等)和边缘推断前沿技术(如模型压缩、模型分割、多模型并行、多模型流水线等)。
第4章着重介绍物联网与边缘智能数据安全隐私,从数据安全与隐私技术的起源和发展讲起,对云边协同环境下的数据安全挑战进行总结,最后详细介绍实现数据安全与隐私保护的差分隐私技术、安全多方计算技术、同态加密技术和区块链技术,并展望了未来的数据安全与隐私保护技术。
第5章从实际的云边协同应用出发,详细介绍视频、工业互联网和智慧城市场景中的典型云边协同技术及其面临的挑战。
本书的读者对象主要包括大数据应用开发人员、大数据运维工程师、高校和研究院大数据方向师生以及开源软件爱好者。
前言
作者简介
第1章 云边协同大数据系统概述 1
1.1 云边协同发展历程 1
1.1.1 探索阶段 1
1.1.2 云阶段 3
1.1.3 云边协同阶段 7
1.2 云边协同数据处理 12
1.2.1 数据来源 12
1.2.2 处理模式 13
1.3 云边协同系统管理 18
1.3.1 云边协同负载 18
1.3.2 任务管理 25
1.3.3 资源管理 29
1.3.4 应用管理 33
1.4 云边协同典型场景 35
1.4.1 物联网大数据 35
1.4.2 视频大数据 41
1.4.3 智能驾驶大数据 47
1.5 本章小结 52
参考文献 54
第2章 云边融合的数据处理系统 60
2.1 云边协同环境下的数据处理简介 60
2.1.1 背景 60
2.1.2 环境 61
2.1.3 数据 63
2.1.4 处理模式 63
2.1.5 问题与挑战 64
2.2 云边协同环境下的数据预处理 66
2.2.1 简介 66
2.2.2 数据质量 67
2.2.3 数据清理 68
2.2.4 数据集成 77
2.2.5 数据归约 80
2.2.6 数据预处理小结 84
2.3 批流融合处理架构与系统 84
2.3.1 批流融合处理架构 85
2.3.2 批流处理系统的发展 86
2.3.3 批流融合处理前沿技术 91
2.4 典型技术案例SlimML 95
2.4.1 背景 95
2.4.2 非关键点验证 97
2.4.3 总体思想 100
2.4.4 架构 101
2.4.5 评测 105
2.5 本章小结 112
参考文献 112
第3章 边缘智能 119
3.1 背景 119
3.1.1 边缘计算 119
3.1.2 边缘智能 119
3.2 挑战 121
3.3 边缘训练前沿技术 122
3.3.1 边缘训练简介 122
3.3.2 中心化/去中心化训练简介 123
3.3.3 隐私保护 126
3.3.4 通信开销优化 131
3.3.5 梯度计算优化 135
3.3.6 边缘训练小结 139
3.4 边缘推断前沿技术 140
3.4.1 边缘推断简介 140
3.4.2 模型角度优化 141
3.4.3 系统角度优化 151
3.4.4 模型最优选择 155
3.4.5 模型自动生成 156
3.4.6 边缘推断小结 157
3.5 本章小结 158
参考文献 160
第4章 物联网与边缘智能数据安全隐私 165
4.1 数据安全与隐私技术的起源与发展 165
4.1.1 隐私技术的起源与发展 166
4.1.2 隐私保护技术现状 168
4.2 云边协同下的数据安全挑战 169
4.2.1 云边协同下的数据安全场景 169
4.2.2 云边协同下的恶意威胁模型 172
4.2.3 数据安全关键挑战 174
4.2.4 数据泄露案例 176
4.3 差分隐私技术 177
4.3.1 相关应用场景与挑战 177
4.3.2 差分隐私技术简介 177
4.3.3 差分隐私技术应用 182
4.3.4 相关前沿研究简介 183
4.4 安全多方计算技术 183
4.4.1 相关应用场景与挑战 183
4.4.2 安全多方计算简介 184
4.4.3 安全多方计算应用 189
4.4.4 相关前沿研究简介 192
4.5 同态加密技术 192
4.5.1 相关应用场景与挑战 192
4.5.2 同态加密技术简介 193
4.5.3 同态加密技术应用 195
4.5.4 相关前沿研究简介 197
4.6 区块链技术 197
4.6.1 相关应用场景与挑战 197
4.6.2 区块链技术简介 198
4.6.3 区块链技术应用 201
4.6.4 相关前沿研究简介 202
4.7 未来技术展望 202
4.8 本章小结 203
参考文献 203
第5章 云边协同典型应用 206
5.1 视频大数据 206
5.1.1 简介 206
5.1.2 数据特征 207
5.1.3 相关技术 209
5.1.4 典型案例 217
5.2 工业互联网大数据 219
5.2.1 简介 219
5.2.2 数据特征 220
5.2.3 相关技术 223
5.2.4 典型案例 227
5.3 智慧城市大数据 230
5.3.1 简介 230
5.3.2 数据特征 232
5.3.3 关键问题和前沿技术 233
5.3.4 典型案例 238
5.4 本章小结 243
参考文献 243
温馨提示:请使用泸西县图书馆的读者帐号和密码进行登录