XDC+江苏恒运太曹小华:共享高可靠性数据中心建设实践

本篇文章4122字，读完约10分钟

XDC+江苏恒运太曹小华:共享高可靠性数据中心建设实践 会上，XDC+江苏恒运泰信息技术有限公司副总经理曹晓华出席了国际数据中心服务大会，并于当日在数据中心设施及运营子论坛上发表了题为“高可靠性数据中心建设共享实践”的主旨演讲。 中国国际数据中心圈12月28日报道，第11届中国国际数据中心行业年会(IDCC2016)于12月20日至22日在北京国家会议中心隆重举行。在中国信息与通信研究院、发展与政策论坛和联盟的指导下，本次会议由中国国际数据中心行业年会组委会主办，中国国际数据中心圈主办，得到了众多媒体的大力支持。

作为中国云计算和数据中心领域最大、最具影响力的标志性事件，IDC中国行业年会已经成功举办了10次。本次会议的规格和规模都是“上一层楼”，吸引了全部现场人员，其影响力涵盖了数据中心、互联网、云计算等所有领域。

会上，XDC+江苏恒运泰信息技术有限公司副总经理曹晓华出席了国际数据中心服务大会，并于当日在数据中心设施及运营子论坛上发表了题为“高可靠性数据中心建设共享实践”的主旨演讲。

XDC+曹晓华，江苏恒运泰信息技术有限公司副总经理

以下是这次演讲的文字记录:

刚才听了张和对格式和整个生命周期管理的分析后，我们目前的数据中心还处于建设的最后阶段。也许我会更具体地说明如何从构建阶段就构建一个高度可靠的数据中心。

首先，让我们简单介绍一下自己。目前，我们已经在江苏省无锡和盐城建立了三个数据中心。一期交换机建设规模已达到3万多架，盐城已建成2100架，无锡已建成1300架和5125架。未来，我们还计划在全球建立40多个数据中心。

根据我们的理解，数据中心的可靠性分为几个部分。首先是物理可靠性。第二，电源可靠性；三是暖通空调的可靠性；第四，控制可靠性。我们的建筑决定了建筑的用途。从模型中，我们可以看到数据中心的模块位于大楼的四个角落。从结构设计的角度来看，考虑到数据中心的情况，从机房模块开始，经过结构处理，机房模块被加工成一个无柱结构，形成一个12.5米空无柱房间。这样，在抗震设防方面就会有风险和挑战。在这个地方，我们已经完全设计了一个简单的机制，通过剪力墙的布局来承载建筑的抗剪结构。

因为我们是一个商业数据中心，我们将更仔细地规划整个人员流动和物流组织。我们已经完全分离了我们自己的物流和人员流动。人们通往数据中心的路径不会与事物通往数据中心的路径重复，从而确保整体运行安全。

其次，我们保证了物理结构中的所有传输路径。从引入电缆到管道，在任何一点都找不到整个路径的物理隔离，隔离由现浇混凝土墙构成。

第三，在物理可靠性方面，实现了全方位的入侵防御，从流量的组织上实现了全方位的入侵防御。整栋建筑的外墙结构全部配有防爆墙。

第四，当全体员工进入我们的校园时，我们对整个路线上的事件进行了全面监控，这些监控数据进入了我们的分析系统。该分析系统是我们自己开发的，将分析是否每个人都应该进入这条道路。此外，该系统将与我们的报警系统相连接，并将提前预测进入数据中心的人员是否会危及整个数据中心的安全。因此，在物理可靠性方面，数据中心物理可靠性的构建是通过这四点来保证的。

我想和你分享一个特别的小设计。计算机房外面的所有墙壁都是600-600根柱子。在两根柱子之间，墙通常是用砖砌的。然而，我们改变了设计。外墙有200厚，中间200厚空厚，机房一侧有200面墙。首先，提高了数据中心的安全性，并且外壁不会泄漏。其次，它具有良好的保温性。

第二，电源可靠性。与王海峰通用定制数据中心不同，我们更商业化。我们数据中心的电源设计看起来有点奇怪。在10KV总线上，我们在不同的房间里设置了两个总线开关，全是红色和全是蓝色的。为了确保整体的可维护性，我们每次都设置总线开关，以确保任何维护都不会影响任何其他部分，从而确保整体的安全性和可靠性。

一般来说，数据中心只使用N+1或N+2方法来产生柴火。我们已经生产了2N柴火，并且可以提供两段总线以确保更高的可靠性。我们不使用高压直流技术，我们使用更传统的2N不间断电源，就整个系统架构而言，我们的架构设计相对简单，我们每组冷通道都由两个独立的2N不间断电源承载。

从数据中心到后期的最大压力是操作和维护。至于产品本身，它们在一线城市无法获得很好的售后支持。我们已经使整个不间断电源架构非常简单。整个数据中心只有一台不间断电源。此时，如果任何不间断电源出现故障，我们都有备件来支持我们的业务连续性，并解决售后服务滞后的问题。此外，我们为每组机房模块设置了一个独立的2N不间断电源。这种设计也是为了保证电力设施的可靠性。

第三，暖通空调的可靠性。首先，从非柱房间空开始，我们以前都在数据中心项目的中间遇到过局部热点，尤其是在一些柱和墙结构的情况下。为了保证暖通空调的可靠性，我们将所有房间空设计为无列，所有房间降低一米，以保证每个物流和人流的组织通道是平坦的，气流组织也是最稳定的气流组织。从最后开始，我们还确保从设计角度来看，采用2N结构空音，包括其可靠性。从管道设计的角度来看，它也保证了一面是环形网络结构设计。根据冷冻站和数据中心的设计，设计了四个冷冻站的结构。我们的整个建筑被分成四个ABCD模块。模块A中有四个冷却器，它们是2N配置和物理隔离的2N配置。但是，通过冷库观察旁路，可以实现模块A数据中心和冷冻站旁路与模块C数据中心的共享。此外，当C或A在早期具有低负载时，整个系统将具有更高的运行效率。

冷冻站出来后，四个ABCD冷冻站在二级环网上环形连接。任何一个冷冻站都可以向建筑物的任何一端供水，以确保业务的连续性。在这种情况下，整栋大楼可以有一半的冷冻站。ABCD的任何一个冷冻站都完全失灵，水可以通过另一个冷冻站供应。这带来了一个问题，它的控制变得极其复杂。因此，在这个系统的中间，我们还引入了一个全新的控制系统，它很少用于数据中心。一般来说，数据中心的控制系统将由分布式数据中心和可编程控制器控制。我们引进了集散控制系统。我们采用了独立的控制系统来控制冷机和冷泵，并有足够的时间来维护我的系统。

在数据中心，我们将忽略另外两个问题。第一个是补充水。我们对此并不十分关心。数据中心补水的灾难性后果通常与停电的后果相同。在系统之间，水从河水中补充，并通过其自身的过滤系统形成水补充系统。然而，这种补水系统平时只能承受50%的负荷。将有另一个水补充系统，以确保其水侧的连续性。此外，我的补水系统的水质可以达到饮用水标准，包括我的业务连续性。第二个方面是给排水系统。当您查看数据中心时，您很少看到排水管在哪里。就整个数据中心而言，当冷冻水管道出现故障时，冷冻水系统是否能够及时排水，或者我是否能够及时停止水的流出，并防止水影响信息技术方面的事情，这都是非常关键的一点。首先，我们对整个管道的整个路径进行了漏水检测。这种漏水检测也已被纳入XDC控制系统。当出现漏水点时，集散控制系统将发出警报。第二，排水系统，任何一个机房模块，都配有一个多回路冗余排水系统，以确保水出来后能迅速排出，以免影响信息技术资产。

第四，控制可靠性。第一个控制系统是采集系统，原来的采集系统会简单一点，如果是485，通过485网络管理进入系统。我们的方法也有点傻。我们将配电柜上的所有数据和所有供暖和通风数据放入可编程逻辑控制器，有时一个配电柜对应另一个可编程逻辑控制器。对于上层的OPC协议数据，我们做了一些特殊的处理。我们采用整个系统的高频采集。我们收集温度和湿度、电流和电压的关键数据，甚至每秒钟。所有收集的数据都被划分成块，组织成系统，并分别记录。通过互联网的思考，数据不再存储在原来的工业数据库中，而是存储在MYsql数据中实现。我们在配电端有一个完全冗余的控制器，并改变了网络端自动控制的网络结构。我们用更多的专用网络设备取代了原有的工业交换机，以承载这些自动控制设备的网络能力。

我们还在配电端使用所有的IC61850标准。就成本而言，它可能会贵一点。我们在辅助泵上使用独立的冗余装置。二次泵是整个系统中最关键的一点。我们不会放弃它的可靠性。我们为整个数据中心建立了一个独立的分析系统。整个配电系统的仪表，加热和通风设备上的传感器，我们已经捕获了整个配电系统的波形。所有仪器支持每周期63次采集的频率，永久存储这些数据，并将这些系统放入HadOOP。我们的数据中心还没有正式投入运行。我们稍后将与您分享这些数据。

第四，决策系统。它基于整个系统。正在建设的系统被纳入决策系统。决策系统将根据多个数据中心的数据分析做出决策。数据中心的所有控制都位于无锡控制中心，从而实现全远程控制。当地的运营团队经常有问题。我们把所有的控制权交给无锡的运行维护中心来控制整个系统，以保证人员的可靠性。

当您作为数据中心工作时，总是这样。一个数据中心由自控软件组成。将来我可能永远不会升级它。我们可能永远不会升级它的软件，除非在漏洞处理方面有所改变。我们做的有点特别。我们将所有系统标准化，每个数据中心的软件保持不变。每当总控制系统升级和控制逻辑升级时，我会同步升级到每个数据中心的控制系统，以确保整个系统的软件版本始终一致。这样，我就能充分发挥最佳的控制效果。

第五，网络可靠性。首先，在第一天，李先生向公众宣布，他的数据中心是互联的，我们将始终提供免费互联。如何实现这个自由的互联网？每个数据中心都安装了波分设备，实现了80，100 g波分技术。此外，通过一些高性能的路由设备，我们实现了整个网络带宽超过1.5TB的能力。通过国内运营商和国际运营商，我们将建立超过20 TB的带宽，以确保整体电路的可靠性。

通过这些措施，这些方法可能会与当前的行业有所不同，但我们也希望引入这些概念，包括我们向外界的宣传，我们将向外界承诺，我们将开放我们所有的控制逻辑的源代码，以促进我们的数据中心可靠性概念。

市场情报共谋发展大数据产业 在当今世界，如果你错过了大数据和数据中心，你不仅会错过机会，还会错过大部分时间。6月9日上午，江苏恒运泰信息技术有限公司在无锡举办了“恒”。有所作为——2017年XDC峰会与+合作