阿里、万国和XDC+数据中心建设经验分享

本篇文章4440字，读完约11分钟

阿里、万国和XDC+数据中心建设经验分享 2016年12月20日至22日，第十一届中国国际数据中心行业年会仪式隆重举行。阿里巴巴、环球数据和XDC+(江苏恒运泰)分别分享了他们在数据中心建设方面的实践经验。让我们看看他们是如何创建高弼舍数据中心的。 2016年12月20日至22日，第十一届中国国际数据中心行业年会仪式隆重举行。阿里巴巴、环球数据和XDC+(江苏恒运泰)分别分享了他们的建设经验。让我们看看他们是如何创建高弼舍数据中心的。

阿里巴巴

阿里巴巴集团技术保障高级IDC专家刘

如今，互联网数据中心的主要特征包括大规模、快速变化、高带宽、高功率、高成本和高可靠性。如何根据这些特点构建数据中心？

首先，数据中心规模庞大:

近年来，随着互联网的快速发展，特别是移动互联网的兴起，互联网数据中心的规模和数量都在不断增加。除了互联网的高度集中，“28”效应非常明显，这进一步提升了大型数据中心的功能。如何选择、设计和运营大型数据中心？

。数据中心位置:

越来越多的资源被一个点所占据，选址变得越来越困难，很少有符合条件的。我该怎么办？目前，在中国，北京已经开始关注能源消耗，而PUE的数据中心只需要不到1.5个批准。在国内其他城市，自律更重要。我们认为数据中心位置应该占用尽可能少的资源，这一点非常重要。如果我们不减少对资源的占用，将对未来的可持续发展非常不利。

数据中心设计:

数据中心架构的合理设计非常重要，方案设计的精细化也非常重要。任何不适当的设计都会导致巨大的成本。例如，阿里张北数据中心采用了新风和冷冻水系统，这实际上更适合张北，因为当地水资源短缺。

。数据中心运营:

在数据中心的规模很大之后，如此大的增量和人力储备肯定是行不通的。自动化、操作、人工智能等等都是必要的。

其次，数据中心变化迅速:

现在这个时代，互联网时代的产品或业务的“生存”和“爆炸”将在很短的时间内发生，传统的应对方式已经不能满足互联网的需求。

IDC的快速建设、快速扩张和按需建设非常重要。

。单一化、标准化、个性化和定制化将并存。

根据施工内容的循环分解，实现施工速度、施工成本和匹配需求的最佳组合；

对于规模应用，整个框架是一个非常好的选择。

三、数据中心高度可靠:

互联网已经涉及到民生。对可靠性的要求在不断提高。互联网数据中心的地位应该得到足够的重视。例如，支付宝的“5.27”、AWS的雷击、微信的断线等等都有很大的影响。从技术上讲，主要有三个要求:电源、制冷和网络。

供电系统:分布式供电减少了冲击面积；加强木柴配置，减少对外依赖；

制冷系统:采用不间断制冷技术和高度可靠的自动控制系统；

。网络系统:网络包括内部和外部，内部双上行/多上行；外部连接多条路由；

四.数据中心的高功率:

看过很多数据中心，大规模的建设是16A、20A，这更多考虑的可能是建设的时间，利润率比较高，还是针对中小型用户。从用户和大规模互联网的角度来看，性价比一定很低。我们现在选择高功率密度的机器一定更划算。

五、数据中心高带宽:

随着大数据的推广，网络发展很快，东西向流量翻倍，南北向流量不断增加。在短时间内，它实现了100万亿、千兆、10G和25G的飞跃。用户需求和流量正在推动网络架构的发展。未来会发生什么？

外国互联网巨头已经开始建造自己的传输和光缆，这很可能成为未来的趋势。他们已经建造了海底光缆，如谷歌和亚马逊，包括澳大利亚、欧洲和亚洲之间的互联。

六.数据中心的高成本:

从狭义上讲，数据中心的建设成本一般为2万至4万元/千瓦。从广义上讲，数据中心的生命周期成本是其成本的10倍以上。如何降低成本？

最有效的方法是提高利用率(如云计算、离线在线混合、服务器负载率、机柜负载率)；

提高硬件性能、降低数据中心的PUE、优化技术和减少冗余也是重要的方法。

只关注一个PUE指标往往会导致误解，比如简单地提高温度或减少数据中心冗余，这肯定弊大于利。

数据中心实际上是互联网。日新月异的互联网以密集的技术冲击着信息技术产业和传统的机电产业。我们做的许多事情不一定是对的。我们不断地摸索和作出许多决定，这可能不是每个人都能理解的，但我们仍然会在我们不断的斗争中找到平衡点。用阿里的话说，“梦仍然需要存在”。

通用数据

通用数据高级副总裁陈依琳

会上，通用数据高级副总裁陈依琳重点讲解了高性能数据中心。因为客户的需求，因为需求的增长，因为需求的差异，因为政府的一些指导原则，以及因为竞争环境，高性能数据中心被提到。应该如何构建高性能数据中心？

首先，高性能数据中心有五个特征:

高级:高级有一个特点。如今，客户希望在每个数据中心进行扩展，不仅仅是在本地，还包括在一个2到3点的城市。此外，客户正在寻求不同城市之间的扩张。这就形成了数据中心集群的需求。对于高层次的需求，规范认证也有一些要求。例如，有国际标准化组织要求、贸易协定要求和正常运行时间要求，它们形成了一系列高级定义。

高密度:到目前为止，8000瓦已经成为一个常见的规模，10至12千瓦也是一个共同的需求在未来。这给数据中心的运行和能耗带来了一定的变化，因此正在进行定制化和模块化。

。高能效:阿里千岛湖数据中心的年平均密度为1.3，为行业树立了标杆。我们也有许多技术和操作手段来实现这一点。这给数据中心的供暖和通风带来了挑战。更宏观地说，数据中心的位置，包括国家电力政策，是高度依赖的。

。模块化和定制化:当今数据中心的规格正在发生变化。除了从单个机柜到建筑物的交付不同外，还有许多产品规格，例如全向高压DC和微型模块，它们对制冷和电力提出了一系列设计要求。

二。数据中心整个生命周期的覆盖和改革:

。数据中心位置:位置非常重要且复杂。50%的数据中心位于一线城市。为什么？这是因为这里有许多客户应用程序。例如，滴滴打车将在2秒内给出反馈。你的反应一定很快。这将影响客户体验和网络部署。今天，中国电力的稳定和人才问题迫使你选择一线城市。

数据中心设计:更多地谈论可靠性和性价比之间的平衡。数据中心有成本的概念。每个成本制造者都应该尽力充分利用成本，但他也应该平衡可靠性、未来发展和未来技术创新等因素。

数据中心建设:一个重建的数据中心可以在5到6个月内完成，从土建工程开始大约12个月。你会发现中国基础设施建设的环境差异很大，所以施工的第一点是质量控制，这关系到整个行业的质量。第二，变革管理。在制造过程中，需求会不断变化。设备已经买了，但是需求已经改变了。如何平衡它？第三，成本控制。

数据中心的测试和验收:包括设备的现场检查、现场检查、设备安装后的单机调试、所有系统安装后的在线调试。这些链接可以帮助我们控制质量，并确保数据中心在启动时是一个安全可靠的数据中心。

。数据中心运营和维护:运营和维护平台包括内部管理和向客户提供的服务。无论从工艺、技术、人员等方面来看，它们都是紧密耦合、不断优化的，形成了我们很强的核心竞争力。

数据中心并不冷，但最终会以服务的形式提供给客户和合作伙伴。

XDC+(江苏恒运泰)

XDC+曹晓华，江苏恒运泰信息技术有限公司副总经理

从建设阶段就建立一个高度可靠的数据中心。根据我们的理解，数据中心的可靠性可以分为几个部分:物理可靠性；电源可靠性；暖通空调可靠性；控制可靠性。

一、物理可靠性:

通过将数据中心的物流和人流分离，并将人和物分离到数据中心路径中，确保了整体操作安全。

就物理结构而言，应实施全路径物理隔离，以确保电缆与管道之间没有交叉点，并应使用混凝土墙进行隔离。

在数据中心的建设中，实现了全方位的入侵防御，从流量的组织上实现了全方位的入侵防御。整栋大楼的外墙结构已被加固成防爆墙。

通过对外部人员的全程监控和通过独立开发的分析系统进行分析，分析数据中心是否存在危险，并将分析结果通过与报警系统的链接通知数据中心操作员。

第二，电源可靠性:

数据中心的主电源为10KV总线，并设置了两个总线开关，分为红色和蓝色，分别放置在不同的房间，以保证单独的电源维护不会影响整个数据中心的电力设施，保证整体的安全性和可靠性。

对于柴油发电机，数据中心柴油发电采用N+1或N+2，通过两段总线引入，以确保数据中心的高电源可靠性。

。不间断电源，在数据中心电源运行和维护方面，整个数据中心采用统一的不间断电源，确保任何不间断电源出现故障，将有一个备用不间断电源支持数据中心业务连续性，每组数据中心机房模块将配备一个独立的2NUPS，确保电源设施的可靠性；在整个系统架构上，采用传统的2N不间断电源代替高压DC技术，采用两个独立的2N不间断电源代替冷却通道。

三、暖通空调可靠性:

由于墙体结构和内部建筑的影响，局部热点是数据中心建设中的重要问题。为了保证数据中心集中供热的循环，数据中心空房间设置为无柱结构，屋顶降低一米，以保证物流和人流通道中的气流顺畅稳定。

。最后采用2N结构空音；

在管道上，它被设计为单侧环形网络模式。

在数据中心制冷设计方面，采用四个制冷站的结构，实现了各个模块的数据中心之间制冷站的共享，提高了制冷系统的运行效率。

数据中心制冷站的管理采用集散控制系统。冰箱控制和冷泵控制采用独立控制系统。四个制冷站环形连接。单个制冷站可以向任何一端供水，从而提高数据中心制冷系统的运行效率。

利用数据中心独特的补水系统，过滤后水质可达到饮用水标准；

排水系统方面，对管道进行全路径漏水检测，并记录在XDC控制系统中，与报警系统互联，及时发现问题，机房模块设置多回路冗余排水系统。

四、控制可靠性:

控制系统分为采集系统和高频采集。传统的采集系统将所有数据上传到PLC进行统一存储、搜索和管理。高频采集侧重于重要数据的采集，并独立存储数据。数据不是存储在原始的工业数据库中，而是存储在MYsql的数据系统中。

配电侧采用全冗余控制器，并具有国家认证的IC61850标准。二次泵采用独立的冗余装置，为数据中心建立独立的分析系统。从整个配电系统的仪表到供暖和通风设备的传感器，数据中心被整个系统的波形统一捕获。所有仪器支持每波63次采集的频率，采集的数据统一存储在HadOOP中，提高了配电系统的数据安全性。

决策系统是以整个配电系统为基础的。决策系统将基于多个数据中心的数据分析做出决策，统一所有数据中心控制系统，实现全远程控制。

第二，数据中心的所有系统都是标准化的，每个数据中心的软件都是不变的。每当通用控制系统升级其控制逻辑时，它将同步升级到每个数据中心的控制系统，以确保整个系统的软件版本始终是统一的。

V.网络可靠性:

每个数据中心都配有波分设备，实现了80，100 g波分技术，完成了数据中心的自由互联。

此外，通过一些高性能的路由设备，网络带宽可以超过1.5TB。通过国内运营商和国际运营商，建立了20 TB以上的带宽，以确保整体电路的可靠性。

以上安排，部分发言内容已被删除！