据不完全统计，奥运场馆从2007年8月开始的好运北京系统测试开始，如今已大概进行了几十场测试赛，期间涉及到的IT设施已然经过了一番历练。在临近奥运正式比赛的这个时刻，它们的备战情况如何?建设和运营它们的工程师们又有哪些感同身受?近日，“迎奥运：感受奥运ICT 探究前沿信息科技”沙龙成功举办，借2008中国奥运的IT监控项目了解到了整个奥运的IT建设情况。以下是根据现场嘉宾NetGain中国区副总经理王卫平的发言整理所得。
充满变数的奥运IT环境
从管理和运维的角度讲，奥运IT建设不光是一个规模非常庞大的项目，它跟一个规模庞大企业的IT管理相比还是有一些很明显的差异，最大的差异就是它不是一个稳定的系统。
对于赛事转播要用的信息，包括记录运动员信息管理系统等，这些管理系统可能到赛时才真正上线，我们需要保证对它的监控是无误的。从去年8月到今年残奥会结束之前，我们都面临动态的IT环境，它在不断地变化。IT场馆的具体设施也要反复地部署，所以也给我们带来了很大的挑战。
当一个场馆去部署IT的时候，可能已经是比赛前的一天或者是两天，在这么短的时间里面，除了它的IT系统要按照设计好的方案很快部署完以外，我们的监控设施也要部署完，所以这个要求是相当高的。就是说，等于是一个即插即用，这也是我们当时最大的一个挑战。之所以选择我们这个产品的原因，即我们能够适应快速的部署和应用，这是因为我们是一个硬件产品，确实体现了即插即用的特点。
分布式部署与管理的优势
值得一提的是，最为关键的就是我们所采用的是分布式特点，你随时随地撤掉任意一个，对全局架构是没有影响的，我们每个场馆都会有一个我们的监控设备，它就是像1U的设备，所以它是一个即插即用的盒子。当然，在正式赛事之前，我们都是用一个微缩版的系统在模拟，从而调整具体监控。
还有我们有上千人值班的，可能聘用每个厂商或者是每个业务组都有值班人员，就是三班倒，条件是很艰苦的，虽然大家看到那个大楼很酷，实际上里面工作环境是很艰苦的。我们给值班人员关心他所负责的设备或者是系统是否有故障，就会通过我们监控系统来察看，每个团队会通过我们的监控系统培训，他登录可以看到属于他负责的不管是系统还是硬件的一个运行状况。
另外，我们有一个备份系统。两级分布式可以发挥的另外一种优势就是，当所有数据，包括过去一年中所有的测试赛数据，突然无法被访问时，因为访问的数据都是在本地的，所以当出现这种情况时，我们可以在第一时间将数据访问目标切换到另一个地方的备份系统，而且视图上有颜色的改变标识这种切换。所以从这个角度来讲，这也是分布式部署的一个优势体现。
实际上，一个单独的业务系统，可能其部署会牵扯到多个场馆，或者若干种设备，而我们的视图是按照场馆来分的，一个业务可能是跨了各种设备类型的，而且可能是跨了多个场馆来部署的，每个场馆里面可能都有一个子系统在运行。我们就是关联跨场馆或者是跨设备的信息到上面，也就是说跟某一个业务相关的所有检测点会帮助它汇总到上面的图里。
这样专家组的团队中上千个人里面分很多的小团队，他们只关心自己的一部分，其它的设备不用管，他所关心的平台硬件又有另外一个团队来负责，分工是纵横交错，责任是相当细化的。所以它只关心影响自己业务的这部分检测点有没有故障，也都是我们能够在短时间内快速配上去的东西。
庞大项目中协同作业
当然，我做这个项目最大的体会真正难度还不是在技术上，真的是在人员组织和管理上，因为太庞大了，而且太多团队协同作战了，可能不只是几十个，光我们监控因为也是平台性的系统，要跟所有的部门厂商做接口，简单算起来就有60、70个，首先50个场馆，每个场馆有自己的IT，他们每一个要跟我们做接口。在PDC数据指挥中心按照IT的功能来分的话又至少有十多个团队，等等若干个团队，他们都有自己检测的角度，我们要汇总他们的意见，统一他们的意见，然后在这个平台上为他们划分权限和相应的规则等等，所以这是一个很复杂的管理工程。像在场馆一个IT团队，他要负责场馆所有的，还有包括应用，而在指挥中心呢，相关负责人要负责所有场馆的，不管哪个场馆出问题都要负责，所以是一个矩阵性的交叉的管理体制，所以感觉也是确实是疏而不漏的这样一个架构。
我觉得也是确实组织上是很有东西可学的，这样庞大的一个工程，而且在这么短期内，突然上千人在一起配合，是一个了不起的事情。
