《互联网内容资源调度介绍V3剖析》由会员分享，可在线阅读，更多相关《互联网内容资源调度介绍V3剖析（24页珍藏版）》请在金锄头文库上搜索。
1、互联网内容资源调度浅析 2014年5月 2 用户访问互联网内容的流程 请告诉我 的 IP地址 缓存里没有 的 IP地址，去根 服务器查 这个域名由COM 域管，给你一个 COM域服务器的 地址 主区域 服务器知道 的IP地 址，给你 主 区域服务器 的地址 的地址我这儿有 ，给你 163服务器， 地址a.a.a.a 163.Com的地址： a.a.a.a 163.Com的地址： a.a.a.a 1 2 3 4 5 6 7 8 获得地址a.a.a.a，访问服务器 移动用户 本地DNS 根服务器 COM域主服务器 域主服务器 9 流程一、DNS解析流程（1-8步） ；流程二、网页访问过程（第9步）
2、 哪些环节涉及调度？ 3 影响互联网资源调度的因素 用户网络 网站（内容） 互联网资源调度受用户、网络、网站三个方面的影响，要保障用户感知需要执行 三方面的协商、优化。 PAD PHONE笔记本 运营商DNS 路由器 防火墙 交换机 IDC（电信、移动、联通、国际、世 纪互联、鹏博士、教育网。） Cache（移动） CDN（电信、移动、联通、国际、世 纪互联、鹏博士、教育网。） 网络方面影响调度结果 1、运营商DNS的出网路由配置 2、访问游戏、视频等调度服务器的出 网路由配置 网站方面影响调度结果 1、判断用户IP地址归属 2、判断网站节点的负荷及质量 3、调度规则、网络质量、ICP授 权D
3、NS、Cache白名单 用户方面影响调度结果 1、用户IP地址、DNS配置不 同，分配的服务器不同 2、用户使用的客户端软件不 同，分配的服务器不同 举例：一个四川移动的用户，访问 ，三方配置不同，访问结果不同 调度（极个别选择性） 调度的作用： 调度（补位性质）决定性调度 4 调度对互联网业务质量的影响 p直接原因：互联网业务感知和距离成反比， 用户与内容节点距离越远，用户感知越差。 p互联互通影响。 p网站负荷影响。 TCP窗口理论： Throughput = TCP maximum receive windowsize / RTT 互联网的感知和调度对用户感知影响日益加大，同样的位置，使
4、用Speedtest软件进行下载速 率测试，由于最终调度的内容源服务器不同，下载速率相差3倍。 p调度到网内（60M） 正确调度的中国移动LTE用 户访问路径，测试平均下载速率 60Mbps p调度到网外（20M）： 被错误调度至他网的中国移 动LTE用户访问路径，测试平均 下载速率仅为正确调度情况下速 率的1/3 Speedtest DNS 网外Speedtest 服务器 网内Speedtest 服务器 本地DNS 省网出口 骨干核心 省网出口 北京 CMNET骨干网 中国电信骨干网 互联出口 5 内容侧决定调度结果：网站域名服务器决定结果 - 1、用户访问 ，客户端向运营商DNS发出域名解
5、析请求。 - 2-3、本地DNS收到请求后如发现没有该项记录，则向根服务器发送DNS请求，根服务器返回 COM服务器地址。 - 4-5、本地DNS向COM服务器请求 服务器地址，COM服务器接到请求后返回 ICP授权DNS服务器地址。 - 6、本地DNS向 授权服务器发起针对 的域名解析请求。 - 7、 授权服务器查询发现全网共存在三处服务器，同时发现客户来自于移动，返回移动网 内服务器地址。 - 8、本地DNS将位于移动网内的163页面地址返回给用户。 - 9、用户访问 。 访问 163服务器， 地址a.a.a.a 1 6 8 移动用户 本地DNS 根服务器 163.Com授权主服务器 9
6、2 3 COM域主服务器 4 5 7 电信 联通 移动 DNS解 析过程 ICP对客户 进行调度 访问服务器 正常流程是内容侧服务器决定调度结果！ 决定调度结果 6 内容侧决定调度结果：视频调度服务器决定结果-P2P架构 - 1、用户打开暴风影音软件，软件发起针对暴风影音调度服务器的域名解析请求。 - 2-8、本地DNS通过根服务器、COM服务器、暴风影音授权服务器，逐级递归，获得暴风 影音调度服务器的IP地址a.a.a.a。 - 9、用户向调度服务器发起Peer请求。 - 10、调度服务器根据用户源IP，发现其位于移动网内。将归属于移动网内的用户地址返给 用户 - 11、用户利用获得的其他用
7、户IP地址列表，进行视频资源共享访问。 播放暴 风影音 调度服务器， 地址a.a.a.a 1 6 8 移动用户 本地DNS 根服务器 暴风影音授权DNS 9 2 3 COM域主服务器 4 5 7 用户对调 度服务器 的DNS解 析过程 ICP对客户 进行调度 访问服务器 IP地址归属 b.b.b.b移动动 c.c.c.c联通 d.d.d.d移动动 e.e.e.e电信 f.f.f.f移动动 g.g.g.g电信 CMNET 10 11 决定调度结果 视频调度过程？LVS调度原理？ 7 场景一： 网内没有内容源 场景一： 网内没有内容源 网络侧补位调度工作： 用户请求访问网站，由于网内没有引入资源，
8、CP调度指向网外的内容源，第一次访问 到网外； 在域名可以缓存的情况下，网络侧通过内容管理平台指挥cache截获，第二次访问调 度到cache。目前cache大约可以缓存24%的网站域名比例。Cache不能缓存的内容， 只能访问网外。 用户请求 本地 DNS CMNET 电信联通 CP内 容源 Cache CP调度 服务器 第一次访问 后续访问 目标：网络侧要通过补位调度，将访问请求调度到Cache缓存，实现后续 访问在网内 8 说明：WebCache系统重定向机制 - 1、用于基于客户端浏览网页，向Local DNS发 出域名解析请求 - 2、Local DNS服务器向外网发送DNS解析请求
9、 - 3、解析请求到达外网DNS服务器前，通过DPI 设备复制一份到GSLB设备，原请求到达外网 DNS服务器 - 4、GSLB进行域名请求判断，如果为预先设定的 域名解析请求，则解析域名请求的IP地址为Web cache的IP地址，回应给Local DNS服务器 - 5、Local DNS服务器将Cache的IP回应给用户 。（外网DNS回应Local DNS晚于GSLB到达 Local DNS，被Local DNS丢弃） - 6、客户端收到Local DNS回复的域名解析结果 ，向Cache发起web访问请求 - 7、Cache命中则直接回应客户，不命中则从 Internet取回数据，保存
10、在本地并回应客户 Client DPI Local DNS Internet 5 WebCache系统 GSLB Client 1 2 4 6 7 SLB+CacheServer 旁路DPI+DNS重定向机制 9 说明：P2PCache技术原理 P2P 缓存子系统 Internet 多种终端用户 BT、eMule、迅雷等 分光设备 国内、国际出 口路由器 1. 用户从互联网下载种子文件，通过其向互联 网中tracker服务发送P2P请求 2. 通过分光方式旁路链路信息，DPI设备截获 用户发起的P2P请求 3. DPI设备分析后，将用户P2P请求转发到重 定向设备 4. 重定向设备对用户请求进
11、行分析判断该资源 是否已经被缓存 5. 如果用户请求资源没有缓存，重定向设备将 不处理该请求 6. 如果用户请求资源已经被缓存，重定向设备 将中断该用户同外网的连接并将其重定向到 缓存服务器，Cache系统向用户发送 Peerlist（均为网内用户/服务器地址）， Cache服务器自身地址也包括在peerlist中 7. 用户根据peerlist文件中IP地址连接至相关 服务器/用户（含Cache服务器）后开始 P2P下载 DPI 10 场景二：网内只有一个内容源 场景二：网内只有一个内容源 正确分网调度工作需要有前提： 1、CP具有正确的分网信息：必须将中国移动的地址告诉CP，CP才可能调度
12、正确，即只返回中国 移动网内的内容源地址。中国移动需要告知CP，双方建立渠道，所以要内容管理和运营。 2、运营商可以补位部分调度，智能DNS的筛选功能：CP 调度服务器可能反馈给用户多个地址（ 把地址都反馈给本地DNS），运营商DNS需要具备挑选最优节点反馈给用户的能力。（目前 规范、入网测试、现网功能改造已经完成）。 3、 运营商通过资源管理平台的调度评估功能补位发现错误：对CP调度错误的（DNS只反馈一个 网外地址的），通过资源管理平台发现，督促CP正确调度。针对内容管理平台发现的域名列表， 对各省的DNS做本地拨测，发现调度错误信息。 目标：借助内容管理，实现正确分网调度，确定都调度到网
13、内 用户请求 移动 DNS CMNET 电信 内容源 CP调度 服务器 返回用户 移动 内容源 联通 内容源 11 说明：普通DNS与“智能”DNS的区别 1、运营商DNS挑选网内地址给用户，用户只访问网内 2、如网站DNS只反馈单一电信地址，则此时用户也会 访问电信。 移动节点 域名= IP地址=1.1.1.1 用户终端移动DNS 网站DNS 1、发起解析请求 3、随机顺序返回 2.2.2.2 1.1.1.1 3.3.3.3 2、转发解析请求 4、运营商DNS智能化 后，反馈移动网内资源 1.1.1.1； 联通节点 域名= IP地址=2.2.2.2 电信节点 域名= IP地址=3.3.3.3
14、 智能DNS 5、反馈移动网内资源 地址1.1.1.1； 6、访问移动网内资源 移动节点 域名= IP地址=1.1.1.1 用户终端 移动DNS 网站DNS 1、发起解析请求 3、随机顺序返回 2.2.2.2 1.1.1.1 3.3.3.3 2、转发解析请求 联通节点 域名= IP地址=2.2.2.2 电信节点 域名= IP地址=3.3.3.3 4、返回 2.2.2.2 1.1.1.1 3.3.3.3 5、挑选第一个解析结果进行 访问 此时用户可能“网内有，仍访问网外 ”：将会随机的被引导至电信/联通/ 移动网内的资源。 标准DNS流程“智能”DNS流程 12 场景三：网内有多个内容源 场景三
15、：网内有多个内容源 运营商的网络补位调度工作： 1、 制定分区调度原则：按照网络的结构和负荷情况，明确最优调度的规则，告知CP分区IP地址的范围，评 估分区调度的效果。建议、督促CP按照分区调度的规则实施调度。 2、评估并 督促调度，不得力时补位调度：通过实时拨测评估各省访问网内资源的质量，依托互联网资源管 理平台，评估网站，不当调度协调CP更改。对于有投诉的网站，协调不力的，不能及时调整的，获取用户 DNS请求信息，将质量最优的内容源通过内容管理平台指挥DNS改变指向（实际此时是黑客操作），选择 最优内容或者缓存内容，实施补位调度。 用户请求 移动 DNS CMNET 电信联通 内容源 内容
16、源 CP调度 服务器 返回用户 内容源 返回用户 互联网资源管理平台 内容管理平台通过各省 拨测 网内内容源的质量 通过与DNS的接口，下 发控制命令，只返回网 内质量好的内容源 目标：运营商先督促CP正确分网、分区调度。特殊情况补位调度。 13 ICP在调度过程中需遵循中国移动分网分区调度规则： n跨网调度：需按本网铁通对等网付费网的优先次序进行。 n网内调度： n优先：本大区内调度（绿色部分流量）； n其次：在相邻的大区间疏导（蓝色流量）； n避免：在资源满足的情况下，尽量避免跨两个 大区的流量（红色流量）； 上海区 北京区 东北区 华中区 西南区西北区 北京 辽宁 吉林 黑龙江 上海 四川 广西 贵州 云南 西藏 陕西 山西 内蒙 甘肃 青海 宁夏 西藏 广东区 华东区 广东 海南 湖北 河北 江西 河南 湖南 重庆 非直连 江苏 天津 浙江 福建 安徽 山东 中国移动分区调度原则 14 运营商在网络层面的必须做到的补位调度 各省网
