《中国移动内容节点分区调度指导建议》v2-标注

中国移动内容节点分区调度
指导建议
版本号2.0
目录
前言 (3)
1.内容调度原则 (4)
1.1.内容节点组成 (4)
1.1.1.IDC、CDN及Cache业务简介 (4)
1.1.2.中国移动内容节点分布及构成 (5)
1.2.网络节点组成 (5)
1.3.网内调度 (6)
1.4.网间调度 (9)
1.4.1.网络类别定义 (9)
1.4.2.调度原则 (9)
1.5.调度协同及要求 (9)
2.内容节点部署原则 (11)
2.1.网络层部署原则 (11)
2.2.节点部署原则 (11)
2.2.1.流量均衡原则 (11)
2.2.2.节点部署建议 (11)
前言
随着中国移动互联网业务的快速发展，各省大力开展并推进内容资源引入工作，但目前对内容资源的调度尚缺乏统一指导，导致出现部分网内引入资源调度至网外，网内跨区域资源调度现象，不仅影响资源访问质量，降低用户访问体验，同时增加流量疏通成本。

为确保已引入资源的访问质量及用户感知，并达到降低综合疏通成本，服务合作伙伴等宗旨，制定本指导建议以对全网内容调度原则进行统一指导。

此指导建议制定的目的在于：对外：支撑内容应用（ICP）在网络的合理部署及调度；对内：指导省公司正确配置，合理调度互联网资源路由策略，正确疏导流量。

在建议编写制定过程中，得到重庆公司、陕西公司、江西公司的大力支持！以及全国专家的评审意见和建议，感谢他们为本建议书所做的努力。

本建议起草单位：中国移动通信集团网络部
本建议主要起草人：蒋彪陈明卢煜樊川秦越杨健常诚林伟孔令山
1.内容调度原则
互联网资源调度问题是提高链路利用率的一个重要课题。

如何在保证各省用户使用网内内容的同时，减少骨干网之间的流量互访，降低骨干网流量承载压力，避免长距离、跨区域调度，提升网内用户体验，这些可以通过协调ICP的流量调度来解决。

主要典型应用场景如下：
场景1：支撑已引入ICP 资源，制定和实施符合网络现状的合理调度规则。

当内容资源在不同网络之间分布时，按照建议制定的调度顺序调度；当内容在网内不同省分布时，按照建议制定的分区调度或者分省调度实施具体调度。

场景2：支撑新ICP引入或者ICP新增节点合理部署、新建节点和新架构的合理调度。

当ICP引入要在网内部署若干个内容节点时，为之提供合理的节点部署指导建议，使得网络资源消耗最少，质量最好。

场景3：为中国移动自建内容节点的网络部署及调度顺序提供指导。

同时，在制定具体内容调度策略时还应满足以下两个基本原则：
质量和成本原则：各项调度规则应当遵照调度结果满足成本最优原则。

例如：内容节点要实施就近的调度，使得占用网络的跳数，网络管道的长度最短，质量最优，成本最少。

均衡原则：支撑省际空闲网络带宽更均衡的流量分布，制定均衡的内容节点调度原则。

在内容节点资源和网络传送资源不均衡的情况下，促进内容的分布趋向网络和内容的空闲点和面。

1.1.内容节点组成
1.1.1.IDC、CDN及Cache业务简介
IDC业务，指自建CDN的ICP，在移动IDC机房里部属CDN边缘节点，由ICP 负责将来自移动用户的请求按照一定策略调度到这些边缘节点上，实现用户的就近访问，该业务为运营商核心业务之一。

CDN业务，指CDN服务商在中国移动部署的CDN边缘节点，它是N个ICP
的集合，由CDN服务商负责将来自移动用户的请求按照一定策略调度到这些边缘节点上，实现用户的就近访问。

Cache业务，指Cache厂商在中国移动部署的能力系统，通过缓存系统，能够实现热点内容一次外网访问，多次内网服务，Cache作为外网与移动内网间的缓冲带，能够有效的聚合互联网热点资源，引导用户在内网的缓存池进行数据获取，提高用户的网络使用体验，并缓解网间的流量压力，降低对电信、联通网间互联链路的依赖。

1.2.网络节点组成
中国移动共31个省/自治区/直辖市公司，按照骨干互联网现状，跨网流量基本通过省公司的主要出口（与北上广互联接口）进行疏通，而网内流量通过流量疏通距离/成本最优方式（与非北上广接口）进行疏导。

当前北京、上海和广州汇聚中国移动骨干跨网流量，承载流量大、链路负荷高，而其它核心节点承载流量相对较小。

为合理调度网内资源，根据当前流量访问模型，以传统5汇聚层优先、3核心层次之的原则，将CMNet网内资源调度划分为八个大区，
图一：区域划分及连接情况
其中：
1、绿色部分为A 类流量，流量在本大区范围进行疏导；
2、蓝色部分为B 类流量，流量在相邻的大区间疏导。

如果相邻区域中不含北京区、上海区和广东区，则为B1流量，否则为B2流量；
3、红色部分为C 类流量，流量需跨越两个大区间进行疏导；
总体原则为：
1、 优先推荐A 类流量；
2、 可以发展B 类流量，B1流量优先，B2流量次之；
3、 在资源满足情况下，避免C 类流量；
1.3. 网内调度
1. 本区原则：本区域内有的内容资源，优先本区内调度，访问不跨区域；
2. 就近访问：各相邻大区之间有直连连路的可优先调度；
3. 非北上广优先：由于北上广链路需要疏导跨网流量，导致链路利用率较
高，负荷较大，因此优选非北上广方向链路进行疏导。

总体调度策略为：
按照图一中所示，绿色流量为A 类流量，为区域内流量，鼓励发展；蓝色流量为B 类流量，由于资源无法在本区域内调度，可进行相邻区域间的调度，可以
非直连
发展；红色流量为C类流量，流量需跨越两个区域进行疏导，占用区域间的资源较多，应予以避免。

例如：某ICP在广东区和华中区均部署内容节点，对于西南区的用户如何调度呢？西南区域用户应优先从西南区内取资源，当西南区没有内容节点时查找第二优先级，即B类流量，第二优先级为华中区、华东区、西北区。

其中，华中区是有内容节点，则应调度华中区的信息源为西南区用户服务。

具体调度优先级可参照下表：
上海区上海区华中区、东北区、华东区、西南区、西北区广东区、北京区
广东区广东区华中区、华东区、西南区、西北区上海区、北京区东北区
华中区华中区华东区、西北区、西南区北京区、上海区、广东区东北区
东北区东北区华东区北京区、上海区华中区、西南区、西北区、广东区华东区华东区华中区、东北区、西南区北京区、上海区、广东区西北区
西南区西南区华中区、华东区、西北区北京区、上海区、广东区东北区
西北区西北区华中区、西南区北京区、上海区、广东区华东区、东北区
配置资源调度时遵守A类流量> B1流量> B2流量> C类流量原则，处于同一优先级区域的内容调度可参照内容节点在网络中的实际拓扑位置优选调度。

1.4.网间调度
1.4.1.网络类别定义
本网：指包含中国移动CMNET骨干网、省网及城域网的网络
客户网：指自行提供IP地址并且有偿接入本网的网络
对等网：指与中国移动对等互联的网络，目前包括中国铁通网、中国教育网、中国科技网等
付费网：指中国移动需要向其结算流量费用的网络，目前包括中国电信网、中国联通网、国际网等
1.4.
2.调度原则
1.网间调度遵守：本网→客户网→对等网→付费网的优先次序原则
2.在付费网中应优先选择资费较低的网络
1.5.调度协同及要求
目前互联网内容调度主要由ICP调度服务器负责完成，ICP调度服务器根据用户调度请求报文的源IP地址或DNS解析请求报文的源IP地址，将用户的内容访问调度到最佳的目标服务器群。

因此，准确的调度是保证内容访问质量的最重要环节。

调度过程中需遵守的协同原则及要求如下：
一、对ICP的要求：
1.根据资源引入省提交的《资源引入调度配置参照表》，参照本指导建议中
提出的调度原则完成内容资源的调度；
2.在需要变更资源服务器地址时及时通知资源引入省，同步完成内容调度
策略的调整与更新；
3.当出现某个内容节点访问障碍时应及时通知资源引入省，参照本指导建
议中提出的调度原则完成调度策略的调整与更新；
4.配合资源引入省、资源使用省进行调度问题的分析与排查解决。

二、对省公司的要求：
1.确保SP调度服务器地址不得从第三方出口或采用NAT转换技术的出口
疏导；
2.确保DNS解析请求报文不得通过第三方出口或采用NAT转换技术的出口
进行疏导；
3.对于部分ICP提出的用来进行调度的域名，确保不被缓存；
4.资源引入省在与ICP协商调度策略时，应收集全网及各省IP地址、DNS
地址（接口地址和服务地址），并按照本指导建议中的调度原则进行整理
与归类，并制作《资源引入调度配置参照表》，交由ICP方完成调度策略
制定；
资源引入调度配置
参照表.xlsx
5.调度策略配置完成后，资源引入省应从ICP方获取资源部署点的服务地
址信息，并通知（可以集团工单形式派发）集团公司、其他省公司完成
内容调度的正确性验证；
6.当使用省验证调度策略不正确时，资源引入省应帮助资源使用省协调ICP
方进行资源调度问题的原因分析、故障定位及排查解决；
7.当集团公司重新分配、规划IP地址时，资源引入省应协调ICP同步完成
调度策略的调整与更新；
8.资源引入省应将本省引入的资源及时提交集团公司进行引入资源的登记、
备案；
三、对集团公司的要求：
1.集团公司重新分配、规划IP地址时应及时通知资源引入省；
2.集团公司应将各省上报的引入资源进行登记、备案；
3.集团公司应定期对全网所有引入资源进行调度质量拨测，并对出现的调
度问题进行通报，协调整改；
2.内容节点部署原则
2.1.网络层部署原则
内容节点网络层的部署应遵守质量原则、均衡原则，并能适应网络拓扑结构的变化。

质量原则主要考虑部署点的网络层质量，内容引入质量。

网络层质量应考虑访问时延、抖动及丢包率等关键指标。

网内访问时延不应大于50ms，抖动不大于10ms，网内访问不应出现丢包现象；内容引入质量应符合中国移动集团公司下发的《ICP 引入质量要求技术建议》和《IDC 内容引入质量技术要求建议》。

均衡原则是指在部署内容节点时应参考部署节点在网络拓扑中的位置，原则上选择基础承载网络中的汇聚节点（如：大区节点）或靠近汇聚节点且业务访问量较大的节点进行部署，以更好的疏通各方向的访问流量。

同时，网络节点的部署还应适应网络拓扑结构及流量访问模型的变化，在以上两因素出现较大变化时及时进行部署调整，以更好的对业务访问流量进行疏通。

2.2.节点部署原则
2.2.1.流量均衡原则
当ICP需要在网内新增节点或者初次部署时,需遵循流量均衡原则.要考虑网民数量分布、地理位置等因素，部署时建议合理分配网民数量、距离内容所在位置，应尽量按照南北地址位置进行划分，北方省份节点数量与南方省份节点数量比例参照1：2进行配置。

2.2.2.节点部署建议
内容节点的部署应遵从成本优、质量好的原则进行，具体如下：
1、本节点到其余30个省节点的平均跳数及距离为最低；
2、简化模式下，也可参照到其它大区的跳数最低方法近似计算；
3、为了兼顾网络忙闲、流量均衡分布，符合中国移动网络实际流量模型、
实际承载现状，需要根据节点的规模实施不同的部署方案；
一、小规模部署
一般为5个节点以下，按照用户数量优先、地理位置优先的原则，选择性部署，优先从沈阳、西安、成都、武汉、南京五个城市进行选择，最后选择广州、上海、北京。

二、一般规模部署
一般为6-10个节点，优先从沈阳、西安、成都、武汉、南京五个大区进行选择，优先选择西安、武汉、沈阳、成都、南京五个城市，其次选择本大区内其他城市节点部署，但要遵循用户数量优先原则，最后选择北京、上海、广州。

三、大规模部署
一般为10个节点以上，优先从沈阳、西安、成都、武汉、南京五个大区进行选择，可优先选择各大区骨干节点城市节点部署，其次选择西安、武汉、沈阳、成都、南京五个城市，最后选择北京、上海、广州。