王:中国移动数据中心新技术测试研究

本篇文章3507字，读完约9分钟

王:中国移动数据中心新技术测试研究 2017年8月22日，开放数据中心委员会在北京主办了由百度、腾讯、阿里巴巴、中国电信、中国移动、中国信息与通信研究院和英特尔主办的2017年ODCC开放数据中心峰会。在下午的纺织测试分论坛上，中国移动SDN项目经理王就中国移动数据中心新技术的测试与研究发表了演讲。 2017年8月22日，开放委员会在北京举办了由百度、腾讯、阿里巴巴、中国电信、中国移动、中国信息与通信研究院和英特尔主办的“2017 ODCC开放数据中心峰会”。在下午的纺织测试分论坛上，中国移动SDN项目经理王就中国移动数据中心新技术的测试与研究发表了演讲。

王:谢谢，其实没有什么误会。今天我将分享一些存在于我们面前的小误会。刚才腾讯的学生介绍了他和实验室的关系。首先，他介绍了中国移动数据中心的互联方案。这是测试EVPN的背景。最后，他介绍了我们行业的开放和中国移动正在做的事情。

数据中心的网络发展趋势。目前，随着大规模数据中心的部署，我们当前数据中心的出口流程有三个变化。首先是流向的改变。数据中心的输出流已从南北流向现有的东西向和南北向。随着数据中心的部署，东西向的流量也将逐年增加。第二是流量的变化。目前，数据中心的规模将越来越大。我们已经在一个资源池中实现了20，000个数据中心的规模，因此导出流量将变得非常大。第三是技术的变化。由于SDN数据的变化，我们将SDN技术引入数据中心，使数据中心的网络更加简化，业务部署更加灵活和快速。它给数据中心之间的网络带来了一些新的变化。它是多云的，相互关联的。当前的数据中心互连不再像原来的一对一互连。所有数据中心之间将存在互连流量。随着数据中心的部署，我们的互联范围将越来越大。最初，我们曾在同一个城市互连，但现在我们可以跨广域网甚至国际网络互连。

低延迟和高可靠性，我们在数据中心部署了越来越多的业务，越来越多的公司愿意把他们的核心业务放在我们的数据中心，所以我们对数据中心的网络提出了更高的要求。低成本、高效率，需要对原有的互联网络做大量的配置工作。拉光纤要花很多钱。如果我们想做多对多互联，现有的方法不能满足我们的需要。网络随云移动，这是运营商最关心的问题。最初，我们不知道服务，所以我们的管道只是一个简单的渠道。在未来，我们希望实现服务和网络的连接，这将使我们的网络更加智能化。

传统的数据中心互连技术，首先是专线互连，专线互连是在两个数据中心之间拉一条专线，实现两层和三层传输。这种方法具有相对安全、保证带宽的优点，并且可以在数据中心之间树第二层。但缺点是成本很高，更贵，开业时间会很慢。另一种方法是多协议标签交换技术。多协议标签交换技术是一种广泛应用的技术。这是一个标准协议，方便制造商之间的通信，并可以提供一些基于隧道的QS保证。其缺点是传统的陆地旅行协议对底层网络有一些要求。例如，它需要支持多协议标签交换(MPLS)技术，开放时需要大量的手动配置，开放时间也很长。

底层网络技术依赖于底层网络，其配置复杂，服务开通周期长，运行维护成本高。它只提供底层网络支持，转发设备无法感知服务，无法实现服务与网络的联动，管道价值相对较低。

在现有方案的基础上，我们在DCI之间引入了SDN技术。SDN技术具有集中网络控制、网络虚拟化和开放性的特点。我们希望引入SDN技术来实现我们数据中心之间的这种网络，实现集中的资源管理和灵活的调度，并使我们的管道更加智能化。基于SDN技术，中国移动提出了两个步骤。第一阶段对应于覆盖方案，第二阶段是底层方案。覆盖的第一阶段侧重于端到端的开放能力。我们现在已经定制了一套标准接口来连接不同制造商的DC控制器。第二阶段，提出底层方案，即连接骨干网络资源，实现真正的云网络协调。对于主干网络，将引入广域网控制器。

EVPN协议采用传统的多协议封装技术来实现虚拟局域网的控制平面。它可以通过传统的路由协议为VXLAN网络的第二层和第三层提供统一的控制平面，实现主机路由信息的学习。EVPN比较标准并允许不同制造商之间的互操作性。为了验证该方案的可行性和制造商设备的互操作性，今年年初进行了一次大规模的EVPN测试。当时，华为、中兴、思科、华三、上海贝尔和瑞杰都受到了邀请。

第一个测试是单跳方案，第二个测试是多跳方案。一种叫做DCI GW的新装置被引入DC之间。EVPN协议在两个设备之间运行。这两个设备通过VLAN去耦。提出该方案的原因是，一些制造商无法意识到一个VXLAN可以连接到此，而另一个VXLAN可以连接到此。对于异构数据中心，VNI在两个DC是不同的。如果有任何不一致的地方，这条路线就行不通了。当时，我们提出了一个方案，以确保VNI能力之间的DC的单跳方案是我们的目标方案。目标方案是LEAF节点本身支持分布式网关，并要求DC GW之间的EVPN协议真正互连。在这种情况下，我将分为同构数据中心和异构数据中心。同质数据中心是以统一方式规划的VNI和两个DC的网络。如果同一网段的左边是10，右边是20，这就是异构数据中心。同构数据中心，该方案可以在LUEF下实现LEAF到L1L2的互通。

测试结论如下:对于单个厂商的测试，基本可以满足我DCI的交互需求，但是现在存在两个问题:VXLAN拼接，不支持VXLAN消息拼接，不支持覆盖，VXLAN隧道层是双主动的。目前，制造商不太支持类型1路由。目前，我们通过下层隧道实现不同隧道的荷载分担。根据不同厂商的对接测试，各厂商的L2互通场景全部通过测试，实施标准不统一。一些制造商在L3互通方面存在问题。由于VRF互通模式在原稿中有3个选项，在标准明确规定所需的实现方法之前，各制造商的实现模式不可用，这导致各制造商公布的RT5路由存在差异。每个制造商的设备轮流充当EVPN协议的RR反射器，并且都通过了测试。

这次考试有一些小想法。这个测试非常简单。工厂A配置一个网段，工厂B配置三个网段。工厂A将绑定到自己的VRF1，工厂B将生成一个VRF。这两个网段将被绑定在下面。测试是10比10和10比11。测试中发现了三种情况。工厂A在发送tip5路由时没有发送32位主机路由。当路由到达B设备时，它将直接丢弃它的路由。当11网络与其通信时，流量将不会流动。VNI值是错误的，因为我将在发送2类路由时带来网段A的ART表。我可以把两层VNI标签放在桌子上。一些制造商只带来一层，这将导致其他制造商无法将其2级路由提取到5级的ART表中。VNI值将是错误的，VNI值将会跳到表格中。

这是两个VTIP。左侧配置了10个网段，将与右侧的VRF进行通信。还有另一种情况。在这种情况下，当总部被分配一个VNI值时，公司A也将分配一个相应的值，公司B也将被分配相同的VNI和RT与之通信，并且当省内的一个城市与其通信时，我将分配VNI等于1低于其相应的一个，这将对后续施加很大的限制，并且当一个被分配VNI等于1时，这将在许多整个网络通信时导致这样的限制。不同的VNI可以通过不同的RT来识别。有些人做得不对称。它的公共1和公共2不符合我的要求。

行业合作。首先是DCI标准。目前，架构已经统一。如果我们不首先考虑这一方，接口1已经标准化了。这两个接口用于较低DAP的配置信息。接口3是DC控制器到本地DC的配置，这是通过Negtop和以下流量优化策略完成的。我们的框架已经相对标准，并得到业界的认可。然而，接口一直说，我们可以为北方设定标准，实现所有党派的统一。然而，南界面的私有化相对严重，目前很难结合。

最后，我会做一个小广告。我们的网络工作组引入了基于硬件交换开放流的TPP模型。这是中国移动开发的控制器架构。目前，我们可以接口的产品包括硬件的TOR、软件的TOR、防火墙、LB、网络管理和网络设备。至于硬件开关，控制器和转发设备之间的接口目前由一个制造商绑定，这很难解开。我们分析了EVPN和Openflow的南行接口。目前，我们正在实验室与一些制造商对接。目前，L2和L3的功能基本上是相连的。我们希望更多的交换机制造商能来和我们对接，包括负载平衡和防火墙，如果有联系我们。这份白皮书将在ODCC网络工作组发布。如果你感兴趣，你可以关注它。如果明天有机会与您分享的测试规范，我希望郭和我能共同努力，让更多的制造商参与到这次测试中来。谢谢你。

2020-02-29 21:22:12 国际信息公司谷歌今年将在其美国办公室和数据中心投资100亿美元。 谷歌宣布了2020年的扩张计划，计划在11个州投资100多亿美元建设办公室和数据中心，包括加州、科罗拉多州和乔治亚州。