谷歌再为机器学习贡献利器 并支持周边机器学习工具

在Kubernetes日渐成为各大基础架构环境都要支持的公用工具时,其应用也逐渐在各个领域发酵,而该工具能调度庞大规模容器集群的能力,也相当适合与机器学习、大数据等应用场景结合。而近日,由Google自家推出的Kubernetes机器学习工具包Kubeflow终于发布了0.1版。 Google表示,虽然该项目仅成立5个多月,但是目前在GitHub上,已经有超过3,000名用户收藏该项目,“而在GitHub平台的关注热度,Kubeflow目前已经到达前2%了。”

而Kubeflow项目中,共依赖三个核心功能,让用户更容易在Kubernetes集群上执行机器学习应用。首先,Kubeflow支持开源项目JupyterHub,而JupyterHub项目,让工程师可以创建用户共同访问的窗口(Hub)。同时,还能让开发者除了可以使用不同程序语言,同步进行机器学习应用开发,加速项目协作速度。

再者,就是TensorFlow训练控件(TensorFlow Training Controller),依据任务性质,开发者可以同时针对分布式、非分布式的TensroFlow应用,部署相对应的集群资源。只要完成一次性设置,用户可以就指定该应用,所需要的CPU、GPU资源。最后是TensorFlow Serving容器,让企业可以将训练完毕的TensorFlow模型,搬迁至Kubernetes环境中执行。

而新发布的0.1版,除了上述核心功能外,也开始扩大支持周边的开源机器学习生态系统工具。像是整合Argo项目,这款主打容器原生的workflow引擎,可以在任何Kubernetes集群上运行外,该工具在资源调度上的自由,也比VM或是其他传统服务器环境更高。同时,利用容器技术,Argo将每个单一workflow,定义成单一容器执行,如此一来,企业就可以使用Kubernetes执行高密度的运算工作,像是数据处理、机器学习等任务。

另外一款工具则是开源机器学习部署平台Seldon Core,让机器学习模型可以部署于Kubernetes上运行。而Seldon Core的目标,要让数据科学家可以用任何工具包、程序语言创建机器学习模型。现阶段该工具的支持模型,包含以Python为基础的TensorFlow、Sklearn,还有Spark、H2O、R等知名模型。此外,Seldon Core也让机器学习模型可支持REST、gRPC,让用户可以更简单地集成相关企业应用。

不仅如此,Kubeflow 0.1版还有许多有意思的新功能、新特色。例如,它也开始实验性地支持深度学习框架Caffe2,让这款框架也能在Kubernetes上执行,或是改善TensorFlow的训练性能、利用身份验证功能增进安全性,以及加强复杂数据流管理等。而Google也已经预告,Kubeflow 0.2版将在今年夏季时发布。除了要简化初始设置工作、加速集成其他应用外,还想要支持更多不同的机器学习框架,例如Spark、XGBoost、Sklearn等。

来自:十轮网

原文链接:https://www.toutiao.com/a6552748725435892238/?tt_from=weixin&utm_campaign=client_share×tamp=1525778397&app=news_article&utm_source=weixin&iid=31841890762&utm_medium=toutiao_android&wxshare_count=1

原文发布于微信公众号 - 目标检测和深度学习(The_leader_of_DL_CV)

原文发表时间:2018-05-23

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏算法+

音频算法之小黄人变声 附完整C代码

前面提及到《大话音频变声原理 附简单示例代码》与《声音变调算法PitchShift(模拟汤姆猫) 附完整C++算法实现代码》

95870
来自专栏CDA数据分析师

如何在业务分析中实现商业洞察?-基于Excel BI

作者 CDA 数据分析师 一套完整的 BI 报表应该至少具备以下四个条件: 条件一:能够批量处理有一定规模的数据; 条件二:能够保证数据的时效性及准确性; 条...

24690
来自专栏量子位

陈天奇团队发布NNVM编译器,性能优于MXNet,李沐撰文介绍

夏乙 若朴 编译整理 量子位 出品 | 公众号 QbitAI 亚马逊和华盛顿大学今天合作发布了开源的端到端深度学习编译器NNVM compiler。 先提醒一句...

51060
来自专栏AI2ML人工智能to机器学习

当arXiv遇到Twitter

arXiv是一个开放的存放预备版(preprint)文章的地方。 这个Cornell University在1991开启的项目, 因为Grigori Perel...

9930
来自专栏机器之心

254页PPT!这是一份写给NLP研究者的编程指南

这份内容干货满满,仅仅只是看了 slide 就知道是非常有意思的一次演讲了。slide 共有 254 页之多,在「赤乐君」知乎专栏分享内容的基础上,机器之心为大...

13040
来自专栏瞎说开发那些事

RPA与AI认知--Microsoft Text Analysis

23860
来自专栏mySoul

软件测试的流程

V模型有两个流,为规范流和测试流。还有一个开发流属于连接规范流和测试流两个中间的桥梁。

20520
来自专栏玉树芝兰

如何用 R 快速了解科研领域?

用好 R 环境下的 BiblioShiny 软件包 ,可以让你在友好的图形化界面,快速扫描科研领域。

18940
来自专栏ATYUN订阅号

2017最流行的十大Python库

年末是你需要思考过去一年的成就的时候。对于程序员来说,这通常是回顾今年发布的或者最近流行的开源库,因为它们是解决特定问题的绝佳工具。 在过去的两个多年中,我们都...

48070
来自专栏SDNLAB

社交概念与SDN模型有什么相似之处?

社交原则似乎与网络工程,设计和软件定义网络有着奇怪的联系,或许就像很多人说的一个看似无关的原则通常可以应用于其他场景。社会辅助性原则对网络控制平面的使用和SDN...

10820

扫码关注云+社区

领取腾讯云代金券