遨游海域的座头鲸、成群结队的角马、群聚飞翔的火烈鸟……构成了一幅幅壮美的生存画面,迁徙是自然界令人叹为观止的景观。
数智时代的“上云”与自然界的“迁徙”何其相似啊!
2022年伊始,我们博文视点的编辑团队联合阿里云技术团队,为广大IT技术人员奉上“阿里云数字新基建系列”。这个系列包括5本书,题材涉及Kubernetes、混合云架构、云数据库、CDN原理与流媒体技术、云服务器运维(Windows),囊括了领先的云技术知识与阿里云技术团队独到的实践经验,是国内IT技术图书中又一套重磅作品!
关于本书《CDN技术架构》:
(1)由阿里云郝冲等技术大牛领衔撰写,作者郝冲为阿里云资深技术专家,沉浸于CDN行业近20年,见证了中国CDN从初级硬件搭建到全面云化的多次技术变革。本书多位技术作者都拥有非常资深的技术背景,这是本书内容的保障。
(2)详解CDN技术架构,分享流量调度、节点软件、网络传输及运营支撑系统关键技术;详解4大场景化实践,详解CDN命中率提升、应用市场下载加速、超低延时互动课堂及点播加速、动态加速实践。干货多,读得懂!
阿里云数字新基建系列包括5 本书,内容涉及Kubernetes、混合云架构、云数据库、CDN 技术架构、云服务器运维(Windows),囊括了领先的云技术知识与阿里云技术团队独到的实践经验,是国内IT 技术图书又一套重磅作品。
内容分发网络(Content Delivery Network,CDN)已经发展成为互联网的基础设施,为App 及Web 站点等提供各类静态/ 动态内容、实时流媒体加速及网络安全防护等功能。本书共有14 章,可划分为4 大部分:第1 部分(第1 章)介绍CDN 核心产品的技术原理、应用场景及CDN 的发展历史;第2 部分(第2~6 章)重点介绍CDN 核心子系统的技术原理及工程实现,内容涵盖调度系统、节点系统、网络传输及运营支撑系统;第3 部分(第7~12 章)介绍CDN 的4 大核心产品的架构设计、功能详解及产品优化最佳实践,具体产品包括视频点播、实时流媒体、动态加速及安全防护;第4 部分(第13~14 章)介绍阿里云CDN 的技术演进策略,包括CDN 自身核心技术的升级换代及CDN 向边缘计算平台的演进策略等。
本书可作为高等院校研究生、本科生学习CDN 整体架构及核心技术的学习材料,也可供对CDN 产品和技术感兴趣的工程技术人员、研究人员阅读与参考,亦可作为CDN 产品的现有及潜在用户了解产品技术实现细节的参考手册。
第1章 引言
1.1 CDN概述
1.2 CDN的基本原理
1.2.1 动态内容的加速原理
1.2.2 静态内容的加速原理
1.2.3 安全防护的原理
1.3 CDN的应用场景
1.3.1 动态内容加速
1.3.2 静态内容加速
1.3.3 安全防护
1.4 CDN的技术定位
1.5 CDN的发展历史
第2章 CDN系统架构概述
2.1 CDN整体框架
2.2 CDN核心子系统
2.2.1 调度系统
2.2.2 节点软件
2.2.3 网络传输
2.2.4 运营支撑
第3章 调度系统
3.1 资源规划
3.2 全局负载均衡
3.3 调度服务器
3.4 全局感知系统
第4章 CDN节点系统
4.1 概述
4.2 多级缓存架构
4.2.1 阿里云CDN节点系统的发展背景
4.2.2 阿里云CDN的经典二层架构
4.2.3 阿里云CDN的多级缓存架构
4.2.4 节点系统的未来展望
4.3 接入域网关组件
4.3.1 HTTP/2优化
4.3.2 HTTPS优化
4.4 回源域组件
4.5 CDN缓存系统
第5章 CDN网络优化
5.1 网络传输优化的挑战
5.2 网络拥塞控制原理
5.3 网络丢包恢复原理
5.3.1 概述
5.3.2 丢包恢复算法介绍
5.3.3 阿里云CDN业务场景下的优化方向
5.4 网络旁路干扰技术
第6章 CDN运营支撑
6.1 管控系统
6.1.1 用户管理
6.1.2 域名管理
6.1.3 CDN控制台
6.2 配置管理系统
6.2.1 用户配置
6.2.2 软件配置
6.3 内容管理系统
6.3.1 基础能力
6.3.2 内容刷新
6.3.3 内容预热
6.3.4 内容封禁
6.4 监控系统
6.4.1 CDN边缘监控的特点
6.4.2 智能化监控
6.5 日志系统
6.5.1 日志使用场景和挑战
6.5.2 报表
6.5.3 常见数据场景和交付
6.5.4 边缘分析
第7章 CDN产品概述
7.1 视频点播简述
7.2 视频直播简述
7.3 全站加速简述
7.4 安全防护简述
7.4.1 线上服务的安全风险
7.4.2 CDN 多层次纵深防护
第8章 CDN视频点播
8.1 视频点播应用场景
8.1.1 视频拖曳
8.1.2 动态转封装
8.1.3 试看试听
8.1.4 听视频
8.1.5 视频分析
8.1.6 图片处理
8.2 视频点播关键技术
8.2.1 自适应限速
8.2.2 全网限流
8.2.3 点播防盗链技术
8.2.4 点播封禁技术
第9章 CDN实时流媒体
9.1 实时流媒体基础原理
9.1.1 RTMP
9.1.2 HTTP-FLV
9.1.3 HLS
9.2 实时流媒体应用场景
9.2.1 实时音视频
9.2.2 视频直播
9.3 实时流媒体系统架构
9.3.1 流媒体节点
9.3.2 流媒体大脑
9.4 实时流媒体创新技术
9.4.1 QUIC
9.4.2 GRTN
第10章 CDN动态加速
10.1 动态加速原理
10.2 动态加速应用场景
10.3 动态加速系统架构
10.4 动态加速选路核心技术
10.4.1 网络探测
10.4.2 智能选路
10.4.3 流量规划
10.5 四层动态加速核心技术
10.5.1 目标场景和形态
10.5.2 四层加速架构
10.5.3 高可用、负载均衡
10.5.4 TCP相关优化
10.5.5 QUIC和路由隧道
10.5.6 端口映射、VIP复用技术
10.6 七层动态加速核心技术
10.6.1 负载均衡
10.6.2 长链接管道
10.6.3 回源策略
10.6.4 WebSocket
第11章 CDN安全防护
11.1 安全防护概述
11.2 安全架构
11.3 四层负载均衡及DDoS防护
11.3.1 简介
11.3.2 ELB 四层请求分发模型
11.3.3 DDoS 攻击检测与处理
11.4 应用层安全
11.4.1 应用层安全概述
11.4.2 精准访问控制
11.4.3 区域封禁
11.4.4 IP频次控制
11.4.5 机器流量管理
第12章 CDN场景化最佳实践
12.1 CDN命中率优化实践
12.1.1 缓存命中率的基本概念
12.1.2 缓存机制
12.1.3 优化CDN缓存命中率的措施
12.1.4 总结
12.2 移动App——应用市场下载加速最佳实践
12.3 在线教育——超低延时互动课堂及点播加速最佳实践
12.3.1 点播方案
12.3.2 通用直播方案
12.3.3 小班课直播方案
12.4 新闻社交——动态加速最佳实践
第13章 CDN未来技术演进
13.1 演进背景
13.2 未来技术架构
13.3 调度未来架构
13.4 中台技术
13.5 边缘可编程
第14章 CDN与边缘计算 P335
14.1 边缘计算技术架构
14.1.1 边缘计算概述
14.1.2 边缘计算应用场景
14.2 vCDN方案与实践
14.2.1 CDN传统建设方案 P352
14.2.2 ENS如何帮助客户解决问题 P353
14.2.3 小结 P355
随着互联网浪潮的不断发展,信息载体和通信技术演变日新月异,其中CDN作为受众广泛的互联网第一代产品,到今天已经演进了很多代,技术体系也不断更新,特别是在应对大规模网络流量和高并发访问场景中,CDN仍是核心服务。随着5G、元宇宙等新兴网络技术和应用的到来,阿里云CDN团队在云边端,通过通信和边缘计算技术,构建了超大规模的承载量和全球分布的通信、计算加速能力,助力企业加速构建更好的数字世界。此书提炼了团队多年技术实践经验,可以为企业和技术爱好者了解CDN技术云化演进提供借鉴。
阿里巴巴集团副总裁 阿里云全球技术服务部总经理 李津
阿里云CDN技术团队一直以来都是阿里巴巴的关键技术力量,伴随着集团业务的快速发展而成长,其在低延迟、调度能力、灵活性上取得了非常好的平衡,具备了技术竞争力。阿里云在对外提供CDN服务的过程中,沉淀了不同领域的技术能力,特别是在直播、长/短视频方面的技术积累很深。
阿里巴巴集团副总裁 阿里云基础产品事业部总经理 蒋江伟
阿里云CDN自诞生之初,就一直在解决超大规模的服务问题,淘宝网日常的海量访问,以及“双11”的超高峰值,给平台带来了很大的挑战。通过十多个年头的打磨,阿里云CDN在静态分发、动态加速、超清直播等场景下都能提供高品质的服务,并已成为中国云计算发展的重要一环。放眼未来,在5G、VR/AR、元宇宙等全新数字生活的建设中,CDN和边缘计算的融合越来越明显,希望本书可为企业在未来技术布局中提供参考。
阿里巴巴集团副总裁 阿里云流量产品&采拓事业部总经理 蒋雁翔
CDN技术问世已经超过20多个年头,我个人在CDN行业工作也将满20个年头,企业在网络上构建服务的过程中,已经到处可见CDN的身影,用好CDN技术也成为各企业技术从业人员的重要能力之一。了解CDN的技术架构,可对决策者如何更好地选择和使用CDN技术服务提供参考。希望此书能成为一座交流的桥梁,使阿里云CDN跟大家一道,共同推动行业前进。
阿里云资深技术专家 郝冲
阿里云CDN在支撑历届“双11”流量洪峰以及服务广大外部客户的过程中,持续对技术和产品进行升级迭代,现已发展成为节点遍布全球的CDN平台之一。本书可作为广大CDN用户及从业者深入了解CDN技术原理、产品功能以及未来技术发展趋势的参考手册。
阿里云资深技术专家 杨敬宇
CDN 是一个超大规模的分布式系统,其峰值请求数超过1 亿次每秒,为互联网上的各类App 和Web 站点提供动/ 静态内容、实时流媒体加速以及网络安全防护等功能。在过去5 年多的CDN 服务质量优化工作以及相关人才招聘过程中,我发现不管是CDN 的客户、合作伙伴,还是希望进入CDN 行业工作的应届毕业生或社招技术人员,对CDN 的体系架构、核心模块、产品功能、应用场景等往往存在着或多或少的疑问或者理解不透彻的地方。为此,阿里云CDN 团队组织了几十名一线技术专家,系统总结了阿里云CDN 在过去10 余年中积累的技术研发与产品设计两方面的实践经验,从CDN 的技术架构、产品设计、应用场景、最佳实践及未来技术演进等各个维度展开详细阐述,期望为广大CDN 行业同人深入理解CDN 技术、正确使用CDN 产品提供一本基于工程化最佳实践的参考手册,共同推动CDN 技术的发展与普及。
阿里云高级技术专家 邓光青
CDN 技术问世已经超过20 个年头,我个人在CDN 行业工作也将满20 个年头,企业在网络上构建服务的过程中,已经到处可见CDN 的身影,用好CDN 技术也成为各企业技术从业人员的必备能力之一。从2014 年开始,阿里云正式提供CDN 商用服务,标志着基于云计算的CDN 服务开启了新的篇章。到今天,阿里云已经是亚洲卓越的CDN 服务商之一。背靠阿里云计算的强大技术能力,伴随业务的发展,阿里云CDN 底层的技术架构也进行了多次演变,在不断推出更优质服务的同时,CDN 技术团队也将整个大型商用CDN 系统的技术架构选型和演进过程整理成册,跟行业前行者分享和交流。该书不仅对构建大规模商用系统进行了高度概括的介绍,以便技术人员了解CDN 的技术架构,也对决策者如何更好地选择和使用CDN 技术服务提供了参考。希望此书能成为一座交流的桥梁,使阿里云CDN 跟大家一道,共同推动行业前进。
阿里云资深技术专家 郝冲