谷歌推出免费开源项目Kubeflow Pipelines 进一步实现人工智能民主化

图片来源：Venturebeat

Google Cloud今天宣布推出Kubeflow Pipelines，以促进企业内部的协作，并进一步实现人工智能的民主化。 Kubeflow Pipelines免费提供，并且是开源的。

Google Cloud产品管理高级总监Rajen Sheth表示，他认同估计世界上只有几千名机器学习工程师有能力将深度学习从概念带到实际，但现在有数百万数据科学家和数千万开发人员。

Kubeflow Pipelines旨在解决这一差距，为更多的数据科学家和开发人员提供支持，帮助企业克服成为人工智能公司所面临的障碍。

“我们现在看到的最大问题之一是，公司现在正在努力建立数据科学家团队，但它是如此稀缺的资源，除非利用得好，否则一开始就是浪费。”Sheth说，“我们看到的一个观察结果是，在超过60%的案例中，模型现在从未部署到生产中。因此，我们正在构建一些有希望帮助解决这个问题的事情。”

Sheth说，Pipelines是一个可组合的层，所以机器学习之旅的不同部分可以像乐高一样拼抢在一起。

这种方法允许团队的不同成员执行标记数据，将数据转换为功能以及验证数据等操作。如果找到更好的模型或方法，它也可以用于测试多次迭代并替换模型或方法。

“他们可以交换新模型，保持渠道的其余部分到位，然后看到：'新模型是否显著有助于产出?'因此，它能够以更好的方式实现快速实验。” Sheth说，“我们正在使用Pipelines，它可以开始涉及开发人员，它可以开始涉及业务分析师，它可以开始让最终用户参与，以便他们可以成为这个团队的一部分，构建一个Pipeline。”

Kubeflow是谷歌今年早些时候发布的一个开源项目，用于使用Kubernetes容器进行机器学习。使用Kubernetes将使企业变得灵活，避免完全承诺使用云中的内部数据和框架或培训模型来培训AI模型。

Kubeflow Pipelines部分基于并利用来自TensorFlow Extended(TFX)的库，这些库在谷歌内部用于构建机器学习组件，然后允许各个内部团队的开发人员利用该工作并将其投入生产。

今天在alpha版本中推出的还有AI Hub，它建立在今年早些时候推出的机器学习模块TensorFlow Hub之上。 AI Hub旨在为有兴趣培训或部署AI模型的人提供一站式服务。

除了提供培训外，AI Hub还将使用来自谷歌的资源，例如流行的TensorFlow嵌入和来自Kaggle的内容，这是一个拥有200多万数据科学家的社区。

随着时间的推移，谷歌希望AI Hub成为大型生态系统产生的流行模型的地方。

“我们最终希望AI Hub成为一个第三方也可以共享信息，并随着时间的推移将其转变为市场的地方。”Sheth说，“我们发现，社区实际上可以解决许多客户的问题。”

AI Hub最初将向大约100个业务合作伙伴提供。

与Kubeflow Pipelines一样，AI Hub也旨在教育员工，以消除公司内部团队之间的障碍，使他们能够让开发人员、数据科学家和ML工程师的工作更有价值。

人工智能扫盲是上个月在VB峰会上与谷歌和Google Cloud等高级管理人员讨论的一个概念。

“我认为真正的重大挑战是，为了成为人工智能的第一人，每个人都需要了解人工智能，这就是产品经理从开发人员到数据科学家再到生产团队的角度思考问题。一旦你掌握了它，你就可以开始将AI融入几乎任何业务问题，而这就是我们现在所处的位置。”Sheth说。

“谷歌几乎所有产品现在都以有趣的方式使用人工智能，我们意识到它可以为我们解决越来越多的问题，我们希望这可以帮助培养其他公司的文化。”