看开源技术如何在战地云中大显身手
2013-10-11 00:24 |来自: 网界网|
查看: 1791|
评论: 0
|
DCGS-A主承包商Booz Allen Hamilton的负责人Shane Miller表示：“从技术的角度来看，在应对数据处理和数据管理及数据融合时，几乎无法想象你能够拥有几乎无限的处理能力、无限的内存、无限的存储。” 云计算方法为军队提供了巨大的存储容量，自阿富汗对美军持久自由行动(Operation Enduring Freedom)以来生成的7500万记录以及来自600个feed来源的入站数据都得以保存在云中。为了建立DSC，陆军依赖于开源平台以及商业机构和 政府部门可用的软件，从而避免了昂贵的许可费用，将开发成本控制在高度管制的预算范围内。 DSC的基础设施包括228台服务器、超过1800个CPU、100个双6核处理器(运行速度为2.80 GHz)以及128个双4核处理器(运行为2.93 GHz)。这个基础设施需要13.92兆兆字节的RAM以及1.032TB的硬盘存储。 Miller 表示，陆军作为该项目的系统集成商不仅拥有该项目使用的开放架构平台，还拥有大量软件部件。 对于DSC，该军队采用了五个关键的开源技术，Hadoop、Hadoop Core、Accumulo、Condor以及Solrcloud。 DCGS-A项目经理Col. Charles Wells表示：“Hadoop是很多云技术人员一直在寻找的开源计算系统。” Hadoop是来自Apache软件基金会的项目，它通常用来处理大数据。DSC开发人员部署了Hadoop分布式文件系统(开源版本的谷歌文件系统)，以让他们对结构化和非结构化进行快速和可靠的数据分析，可以扩展到Exabyte水平。 开发人员部署了Hadoop Core并行化基础设施，用于可比的开源版本的MapReduce编程模型，以跨大量节点并行任务。 开源工具Accumulo为开发人员提供了一个强大的高性能数据存储和检索系统。使用Accumulo，他们能够利用开源技术来存储PB级结构化数据。 Condor是一个开源管理基础设施平台。开发人员选择Condor是因为它提供一个高吞吐量的计算环境，为他们的云计算提供了所需的弹性。 DSC具有类似互联网的搜索结构功能，这能使他们在几秒钟内获得查询答案，这种功能是通过SolrCloud实现的，SolrCloud是能够支持高速搜索的分布式索引管理功能。 Wells表示，使用COTS硬件和开源软件平台来部署云计算环境，能够为军队提供处理和存储能力，同时，让军队的情报云变成一个有效的高性能的系统。 |
免责声明：
除非特别声明，文章均为投稿或网络转载，仅代表作者观点，与大数据中国网无关。其原创性以及文中陈述文字和内容未经本站证实，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。如果本文内容有侵犯你的权益，请发送信息至ab12-120@163.com，我们会及时删除
最新评论
最新新闻
最新新闻
/1 
