百度组建深度机器学习开源平台 研发虫洞项

5月21日，由百度牵头构建的分布式开源平台正式亮相于公众视野。这个平台属于名为“深盟”的开源组织，其集结了众多行业翘楚的开发者团队，包括微软亚洲研究院、华盛顿大学、纽约大学、卡耐基梅陇大学等知名公司与高校的精英。

据透露，“深盟”目前的核心项目名为“虫洞”，该项目将成为所有深盟项目的统一入口。虫洞的力量在于，它能自动构建深盟所有项目，为各种组件提供流畅的数据流支持，无论数据以何种格式存在于网络共享磁盘、HDFS还是Amazon S3。不仅如此，它还提供了统一脚本来编译和运行所有组件，使用户既能在本地集群轻松运行分布式组件，又能将任务无缝提交到各大云平台，如Amazon EC2、Microsoft Azure和Google Compute Engine等，并具备自动容灾管理功能。

目前，“深盟”分布式开源平台已覆盖三类最常用的算法组件，包括决策树模型、稀疏线性模型和学习。其中，学习作为目前最接近人脑的智能学习方法，可广泛应用于图像识别、检索、自然语言理解等领域。百度在学习领域布局已久，其学习研究院（IDL）自成立起便面向全球招募顶尖学术人才，并将学习技术应用于多个领域。

深盟项目负责人、百度学习研究院的李沐介绍称，此次推出的开源平台没有任何使用限制，个人和机构均可自由使用。其最大的优势在于达到了工业级应用标准。与其他流行的分布式平台不同，深盟平台采用成熟的C++语言开发，保证了性能的稳定性，能够满足各种工业界的需求。

“深盟”还将不断开发和完善更多常用算法组件，致力于为用户提供更为一致性的体验。资料显示，学习是人工智能领域的重要方向，具有广泛的应用前景。百度通过这一开源平台，让世界各地的开发者都能免费获得优质、易用的分布式算法源码，从而降低了开发和部署分布式系统及相关应用的门槛。已有包括今日头条、汽车之家等在内的多家公司从这一开放平台中受益。