前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >0799-1.8-CDSW1.8的新功能

0799-1.8-CDSW1.8的新功能

作者头像
Fayson
发布2020-08-20 09:58:27
6900
发布2020-08-20 09:58:27
举报
文章被收录于专栏:Hadoop实操

CDSW1.8的新功能

1.1机器学习投产

机器学习生命周期功能可以使数据科学家将模型投产时间从之前数周缩短至几分钟,同时可以扩展ML场景用例,并同时具备企业级安全,可维护以及数据治理的支持。

1.2监控模型指标

CDSW允许你跟踪单个模型的预测并使用自定义代码分析指标。监控模型的功能和业务效果需要专门的工具,现在CDSW原生包含这部分功能,以支持存储和访问自定义和任意模型指标。还包括跟踪单个预测以确保真实性,同时保证模型以最佳且满足合规的方式运行。

1.3增强模型安全

Model REST endpoints现在具备安全功能,支持用户级别的访问控制以防止未经授权的用户访问endpoints。这使模型可以在CML生产环境中提供服务,而不会不具备安全性。

1.4Quota管理

资源配额功能可以限制每个用户的总CPU,内存和GPU资源消耗。可以为Workspace配置默认quota,也可以按用户使用自定义quota。现在正式支持Quota管理功能。

1.5更新会话启动视图

增强启动新的CDSW会话时的用户体验。

1.6添加CDSW会话元数据信息

管理员可以强制用户在启动CDSW会话之前输入额外的元数据。管理员最多可以配置三个字段来收集此类元数据信息以用于合规性目的,并且可以配置让这三个字段是必填项。该元数据会以键值的形式被捕获,并保存在user_events表和审计日志中。

1.7支持Base Engine 13

CDSW的Base Engine13默认打包支持Python2.7.18,3.6.10以及R3.6.3。

1.8自定义命令行参数用于会话和作业

CDSW作业会运行一些脚本,并且需要你在执行脚本时传递参数。创建作业时,可以在Engine的Command Line Arguments字段中设置这些命令行参数。这些命令行参数可以被项目中的CDSW会话,作业和实验共享。可以在脚本内部访问这些参数,就像使用命令行参数一样。

1.9 CDSW显示引擎总资源消耗

Engine Profile现在会反应运行引擎所需的总资源消耗。这意味着除了用于计算的“有效”资源外,额外的sidecar资源也会被计算,这些总资源消耗会受quota的限制。

1.10语法高亮支持其他编程语言

CDSW在预览文件时支持其它语言的高亮显示包括:XML,CSS,JS,HTML,CoffeeScript,SQL和CSV。

1.11配置Windows行尾以进行Git集成

以前当CDSW Brackets编辑器与具有Windows行尾的文件进行交互时,Brackets编辑器将所有Windows行尾转换为Linux行尾,从而使git日志不正确。现在管理员可以在站点级别上配置Windows行尾的使用行为。

1.12Cross-Origin Resource Sharing (CORS) 默认会被禁用

现在默认情况下会禁用CORS。如果你在不同域上有需要与CDSW API进行跨域通信的Web应用程序,可以启用CORS。

1.13OS支持变更

不再支持CentOS7.2

CDSW1.8修复的问题

1.提升平台稳定性和性能

a)修复了Kubernetes Pod基础操作系统中的许多潜在安全漏洞

b)Kubernetes升级到1.14

c)修复了Kubernetes基础架构中的Sweet32 Birthday攻击漏洞

Cloudera Bug: DSE-9061

2.许多CDSW Pod以非root用户身份运行

Cloudera Bug: DSE-10493, DSE-7357

3.更改了网络会话的处理方式

a)Web浏览器cookie具有固定的到期日期。关闭浏览器后,cookie不再过期,它会在指定的时间后过期。你可以在“Admin Security Settings”页面上配置过期日期。

有两种超时:一种针对普通用户,另一种针对管理员用户。默认的管理员超时为一小时。默认用户超时为24小时。

Cloudera Bug: DSE-7363, DSE-1114

b)CDSW提供了一个选项,可以在你的Web会话到期前五分钟刷新会话,以便活动用户可以继续其会话而不会使cookie过期

Cloudera Bug: DSE-11773

c)管理员现在可以禁用多个并发会话,这样可以防止用户使用多个浏览器或者电脑登录到同一个账户。默认情况下用户仍然可以打开多个Web浏览器,这个可能会在以后的版本中修改。

Cloudera Bug: DSE-8109

4.辅助功能修复

a)CDSW UI已通过许多辅助功能修补程序进行了完善。除了workbench editor之外,主要应用程序都努力与WCAG2AA兼容。

Cloudera Bug: DSE-4490

5.重新启动CDSW不会自动重新启动在线模型。这些模型必须手动重新启动,以便它们可以再次处理请求。

Cloudera Bug: DSE-4950

6.修复了多节点部署中CDSW重新启动的问题。

Cloudera Bug: DSE-9587, DSE-9663

7.如果你已为CDSW集群启用TLS,则Cloudera Manager现在为CDSW Web UI生成一个“ https”链接,而不是“ http”。

Cloudera Bug: DSE-8698

8.如果开启了配额功能,Experiments不会卡在Scheduled状态。你现在不需要手动重新调度实验。

Cloudera Bug: DSE-8736

9.包含附件时,作业通知的邮件不会再间歇性地失败。

Cloudera Bug: DSE-9469, DSE-8806

原文参考:

代码语言:javascript
复制
https://docs.cloudera.com/documentation/data-science-workbench/1-8-x/topics/cdsw_release_notes.html#concept_ej3_nmq_4mb
本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-08-14,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Hadoop实操 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
容器服务
腾讯云容器服务(Tencent Kubernetes Engine, TKE)基于原生 kubernetes 提供以容器为核心的、高度可扩展的高性能容器管理服务,覆盖 Serverless、边缘计算、分布式云等多种业务部署场景,业内首创单个集群兼容多种计算节点的容器资源管理模式。同时产品作为云原生 Finops 领先布道者,主导开源项目Crane,全面助力客户实现资源优化、成本控制。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档