谷歌筹备Spanner计算平台基于1000万台服务器
2009-10-26 网易科技 编辑:冬山
谷歌曾提出一个名为Spanner的远景规划。该规划的中心是谷歌一旦流量激增、硬件负荷过重,数据便在百万级的数据中心中自动转移。今年夏天,谷歌首次暗示将开发分布式技术增强服务器功能,当数据中过超载或者过热时,数据自动且即时进行再分配,该技术是一种后端技术。最近,谷歌工程师、杰出搜索专家杰夫·狄恩(Jeff Dean)证明了此消息,并提供了PDF介绍文档。
新平台名为Spanner,在英文中,Spanner原意为“扳手”,又有“桥梁的交叉支撑”之意。狄恩在报告中描述说:“这是存储与计算系统,它横跨我们的数据中心,自动移动与复制数据”。它与带宽、数据包丢失、能源、资源相关,还包括失败模式等内容。他还说,平台是对整个数据中心资源的再定位。
目前,谷歌在全球有36个数据中心,少许还在建设之中。谷歌从未透露自己有多少服务器,但是从狄恩的报告中却透露谷歌的规划:未来将达到1000万台服务器。在文档中,狡恩阐述了谷歌的远景规划panner将拥有100万-1000万台服务器,围绕10兆个虚拟目录,面向10的18次方字节存储空间,它们将分布在全球。
对此,谷歌拒评。谷歌的PR也未对Spanner多作说明。谷歌的高级工程师与架构师吉尔·沃克斯(Gill waxed)在旧金山的一个会议上却略有介绍。他将谷歌的分布式在线架构叫做“仓库式”机群,可以从危险与过热的数据中心中自动移动数据。他说:“我们正在建设的是仓库式的计算平台,当然,目前还是纸面意义多些。你必须与一切整合,从冷冻到CPU,都必须整合。”系统无须人工干预,即可完成大量工作。
当问及新技术是否已经投入使用时,沃克斯采用了外交式言辞作答:“我恐怕无法对此做出评论。”()