前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >谷歌再为机器学习贡献利器 并支持周边机器学习工具

谷歌再为机器学习贡献利器 并支持周边机器学习工具

作者头像
朱晓霞
发布2018-07-20 16:39:04
1.1K0
发布2018-07-20 16:39:04
举报

在Kubernetes日渐成为各大基础架构环境都要支持的公用工具时,其应用也逐渐在各个领域发酵,而该工具能调度庞大规模容器集群的能力,也相当适合与机器学习、大数据等应用场景结合。而近日,由Google自家推出的Kubernetes机器学习工具包Kubeflow终于发布了0.1版。 Google表示,虽然该项目仅成立5个多月,但是目前在GitHub上,已经有超过3,000名用户收藏该项目,“而在GitHub平台的关注热度,Kubeflow目前已经到达前2%了。”

而Kubeflow项目中,共依赖三个核心功能,让用户更容易在Kubernetes集群上执行机器学习应用。首先,Kubeflow支持开源项目JupyterHub,而JupyterHub项目,让工程师可以创建用户共同访问的窗口(Hub)。同时,还能让开发者除了可以使用不同程序语言,同步进行机器学习应用开发,加速项目协作速度。

再者,就是TensorFlow训练控件(TensorFlow Training Controller),依据任务性质,开发者可以同时针对分布式、非分布式的TensroFlow应用,部署相对应的集群资源。只要完成一次性设置,用户可以就指定该应用,所需要的CPU、GPU资源。最后是TensorFlow Serving容器,让企业可以将训练完毕的TensorFlow模型,搬迁至Kubernetes环境中执行。

而新发布的0.1版,除了上述核心功能外,也开始扩大支持周边的开源机器学习生态系统工具。像是整合Argo项目,这款主打容器原生的workflow引擎,可以在任何Kubernetes集群上运行外,该工具在资源调度上的自由,也比VM或是其他传统服务器环境更高。同时,利用容器技术,Argo将每个单一workflow,定义成单一容器执行,如此一来,企业就可以使用Kubernetes执行高密度的运算工作,像是数据处理、机器学习等任务。

另外一款工具则是开源机器学习部署平台Seldon Core,让机器学习模型可以部署于Kubernetes上运行。而Seldon Core的目标,要让数据科学家可以用任何工具包、程序语言创建机器学习模型。现阶段该工具的支持模型,包含以Python为基础的TensorFlow、Sklearn,还有Spark、H2O、R等知名模型。此外,Seldon Core也让机器学习模型可支持REST、gRPC,让用户可以更简单地集成相关企业应用。

不仅如此,Kubeflow 0.1版还有许多有意思的新功能、新特色。例如,它也开始实验性地支持深度学习框架Caffe2,让这款框架也能在Kubernetes上执行,或是改善TensorFlow的训练性能、利用身份验证功能增进安全性,以及加强复杂数据流管理等。而Google也已经预告,Kubeflow 0.2版将在今年夏季时发布。除了要简化初始设置工作、加速集成其他应用外,还想要支持更多不同的机器学习框架,例如Spark、XGBoost、Sklearn等。

来自:十轮网

原文链接:https://www.toutiao.com/a6552748725435892238/?tt_from=weixin&utm_campaign=client_share×tamp=1525778397&app=news_article&utm_source=weixin&iid=31841890762&utm_medium=toutiao_android&wxshare_count=1

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2018-05-23,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 目标检测和深度学习 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
容器服务
腾讯云容器服务(Tencent Kubernetes Engine, TKE)基于原生 kubernetes 提供以容器为核心的、高度可扩展的高性能容器管理服务,覆盖 Serverless、边缘计算、分布式云等多种业务部署场景,业内首创单个集群兼容多种计算节点的容器资源管理模式。同时产品作为云原生 Finops 领先布道者,主导开源项目Crane,全面助力客户实现资源优化、成本控制。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档