【平台】Seldon.io发布新开源平台,用于Kubernetes上的机器学习

机器学习部署有很多挑战,但是新的Seldon Core打算帮助它的新的开源平台,用于在Kubernetes上部署机器学习模型。

Kubernetes(通常称为K8s) 是用于自动部署、扩展和管理容器化(containerized)应用程序的开源系统。它旨在提供“跨主机集群的自动部署、扩展以及运行应用程序容器的平台”。它支持一系列容器工具, 包括Docker等。

Seldon.io宣布了一个新的开源平台—Seldon Core,该平台可以让数据科学团队在规模上运行和管理模型。Seldon Core专注于解决任何机器学习项目的最后一步,帮助公司将模型投入生产,解决现实问题,并最大化投资回报。

传统的基础设施堆栈(stack)和devops流程不能很好地转化为机器学习,而且在这个领域中存在有限的开源创新,这迫使企业以巨大的代价建立自己的或者使用专有的服务。拥有必要的多科性技能的数据工程师是非常罕见的。低效率导致数据科学家被投入到服务质量和与性能相关的挑战中,这些挑战将他们的注意力从他们可以增加价值的地方转移到构建更好的模型上。

数据科学家专注于创建更好的模型,而devops团队能够更有效地使用他们所理解的工具来管理部署。

平台的特点包括:

  • 使数据科学家能够部署使用任何机器学习工具包或编程语言构建的模型。Seldon Core计划最初支持基于python的工具/语言,包括Tensorflow、scikitlearn、Spark和H20。
  • 在部署时,通过REST和gRPC将机器学习模型自动地集成到需要预测的业务应用程序和服务中。
  • 处理部署的模型的完整生命周期管理,没有停机,包括更新运行时图、缩放、监视和安全。

安装

  • 官方版本:https://storage.googleapis.com/seldon-charts

安装seldon-core:

helm install seldon-core --name seldon-core --repo 
https://storage.googleapis.com/seldon-charts

要安装包括Prometheus和Grafana在内的可选分析组件,使用一个内置的指示板来监控运行的机器学习部署:

helm install seldon-core --name seldon-core \
 --set grafana_prom_admin_password=password \
 --set persistence.enabled=false \
 --repo https://storage.googleapis.com/seldon-charts

部署指南

  • 更多详情请参阅:https://github.com/SeldonIO/seldon-core

原文发布于微信公众号 - ATYUN订阅号(atyun_com)

原文发表时间:2018-02-07

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏后端技术探索

简述架构设计原则

1.全面解耦原则:对业务进行抽象建模,业务数据与业务逻辑解耦,软硬件解耦,平台和产品解耦,系统各部件解耦。模块、组件高内聚,低耦合。

1173
来自专栏编程

一个老程序员的忠告

1 .工作当性能遇到问题时,如果可以计算并处理应用程序层,则将其从数据库层中取出。分类和分组是典型的例子。在应用程序层上执行性能改进总是比在数据库层中容易。与M...

1885
来自专栏数据科学与人工智能

【ETL工程】大数据技术核心之ETL

抛开大数据的概念与基本知识,进入核心。我们从:数据采集、数据存储、数据管理、数据分析与挖掘,四个方面讨论大数据在实际应用中涉及的技术与知识点。 核心技术 架构挑...

48910
来自专栏大数据挖掘DT机器学习

【推荐】网站转化率与漏斗模型

前段时间刚完成了一个分析网站流程的每个步骤的流失率,并用漏斗模型进行展示的需求,这里跟大家来分享一下。分析过程可以从以下三步展开:确定需要分析的访问路径...

3746
来自专栏云计算D1net

五步法降低基于PaaS的SaaS应用开发风险

对于希望按需快速部署、监控和扩展网络应用的云计算架构师和开发人员来说,AWS的Elastic Beanstalk (测试版)是一个非常有用的工具。他们所要做的就...

3759
来自专栏专知

Facebook深度学习框架Caffe2代码正式并入PyTorch

Facebook同时支持两个深度学习工具 Caffe2和 PyTorch, 显然不重复造轮子, 而是让能复用的组件和库(比如操作库)在这两个项目之间共享是没有争...

39812
来自专栏SAP最佳业务实践

从SAP最佳业务实践看企业管理(148)-MM-928供应商管理的库存

本文档的目的是为您详细介绍“供应商管理的库存(VMI)”业务情景中包含的所有步骤。本文解决最终客户的需求。 如果要在SAPBestPractices演示环境中测...

2966
来自专栏张俊红

带你走进网站分析的世界!

来源:书籍《网站分析实战》读书笔记 第42篇 ▼ (本文框架) 网站分析基本概念 网站分析的目的: 首先明确网站的目的是什么?大部分网站的目的是盈利,而网...

7175
来自专栏钱塘大数据

大数据处理过程之核心技术ETL详解

核心技术架构挑战: 1、对现有数据库管理技术的挑战。 2、经典数据库技术并没有考虑数据的多类别(variety)、SQL(结构化数据查询语言),在设计的一开...

5366
来自专栏杨建荣的学习笔记

数据库工单系统的初步设计

对于数据库工单的设计一直以来是工作中的一个重点和难点,说是重点其实主要是很多DBA同学对于业务支持大家不够重视,但是从支持上希望及时响应业务,说是难点是因...

2024

扫码关注云+社区