交互式机器学习:再次让Python变得“活泼”

当使用交互式widget时,笔记本(notebook)就会活跃起来。用户可以可视化和控制数据和模型中的变化。学习变成一种沉浸式的、有趣的体验。

你已经在Jupyter上编写了代码,它是一个无处不在的笔记本平台,用于编写和测试几乎所有主要的编程语言。你喜欢它,并且经常使用它。

但是你想要更多的控制,你想要在鼠标的简单滑动中改变变量,而不是通过写入for循环来改变。你应该做什么呢? 你可以使用IPython widget。

Python widget是什么?

Jupyter于2014年在IPython项目中诞生,并迅速发展,以支持所有主要编程语言的交互数据科学和科学计算。毫无疑问,它已经对数据科学家如何快速地测试和原型化他们的想法并将其展示给同行和开源社区产生了最大的影响。

然而,当用户能够交互式地控制模型的参数并查看实时的效果时,学习和试验数据就会变得真正的沉浸在其中。Jupyter中的大多数常见呈现都是静态的。然而,名为ipywidgets的元素在Jupyter notebook上展示了有趣的和交互式的控件。

Widget是在浏览器中有一个表示形式的重要的python对象,通常是通过前端(HTML/java)呈现通道的控件,比如滑动条、文本框等等。

之前的文章演示了使用基本的widget控件进行简单的曲线拟合练习。请阅读这篇文章,了解有关安装这个widget包的说明。在本文中将进一步扩展到交互机器学习技术领域。

  • 之前的文章:https://towardsdatascience.com/a-very-simple-demo-of-interactive-controls-on-jupyter-notebook-4429cf46aabd

交互式线性回归

我们用交互控制元素来演示单变量的简单线性回归。注意,这个想法可以很容易地扩展到复杂的多变量、非线性的、基于核的回归。但是,为了简化可视化,我们在演示中只使用单个变量。

在我的Github库中,可以使用boiler plate代码。

  • Github库地址:https://github.com/tirthajyoti/Widgets

我们在两个阶段展示了交互性。首先,我们将数据生成过程作为输入变量和相关噪声的统计属性的函数。下面是这个过程的视频,用户可以使用简单的滑块控件动态地生成和绘制非线性函数。

  • 视频:http://imgcdn.atyun.com/2017/12/videoplayback-2.mp4?_=1

在这里,生成函数,又称“参考标准”(ground truth),它是一个四次多项式,噪声来自于高斯分布。接下来,我们将使用scikit-learn的多项式特性生成和pipeline方法来编写线性回归函数。一个机器学习pipeline流程的详细说明(参照:https://towardsdatascience.com/machine-learning-with-python-easy-and-robust-method-to-fit-nonlinear-data-19e8a1ddbd49)。在这里,我们将整个函数封装在另一个交互式控件widget中,以便能够动态地更改线性模型的各种参数。

我们为下面的超参数引入交互控制。

  • 模型复杂性(多项式级)
  • 正则化类型——LASSO或Ridge
  • 测试集的大小(测试中使用的总样本数据的一小部分)

下面的视频展示了用户与线性回归模型的交互。请注意,测试和训练分数如何动态更新,以显示在模型复杂性变化时,过度拟合或不适应的趋势。我们可以回到数据生成控制,并增加降低噪声的大小,以观察其对拟合质量和偏差/方差的影响。

  • 视频地址:http://imgcdn.atyun.com/2017/12/videopwdsWAlayback.mp4?_=2

原文发布于微信公众号 - ATYUN订阅号(atyun_com)

原文发表时间:2017-12-18

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器之心

入门 | 通过 Q-learning 深入理解强化学习

选自Medium 作者:Thomas Simonini 机器之心编译 参与:Geek AI、刘晓坤 本文将带你学习经典强化学习算法 Q-learning 的相关...

2625
来自专栏量子位

苹果推出高精度手写识别系统,可准确识别3万字符集

安妮 编译自 苹果机器学习博客 量子位 出品 | 公众号 QbitAI 在手机、平板和可穿戴设备不断普及的今天,手写识别比以往任何时候都重要。但这并非易事,拿汉...

4647
来自专栏ATYUN订阅号

使用深度学习训练聊天机器人与人对话

聊天机器人是“通过听觉或文本方法进行对话的计算机程序”,苹果的Siri, 微软的Cortana, 谷歌助手和亚马逊的Alexa是当下最流行的四种会话代理,它们能...

48310
来自专栏数据派THU

手把手教 | 深度学习库PyTorch(附代码)

原文标题: An Introduction to PyTorch – A Simple yet Powerful Deep LearningLibrary 作者...

1.7K4
来自专栏编程

2017年11月R新包推荐

一. 文档概述 11月份,在R官方(CRAN)共计发布了237个新包,本文选摘了40个R包,包含以下几个类别:计算方法、数据、数据科学、科学、社会科学、工具及可...

1978
来自专栏PPV课数据科学社区

只需七步就能掌握Python数据准备

摘要: 本文主要讲述了如何在python中用七步就能完成中数据准备。 上图为CRISP-DM模型中的数据准备   下面七个步骤涵盖了数据准备的概念,个别任务...

3207
来自专栏AI研习社

揭开Faiss的面纱 探究Facebook相似性搜索工具的原理

本月初 AI 研习社报道,Facebook 开源了 AI 相似性搜索工具 Faiss。而在一个月之后的今天,Facebook 发布了对 Faiss 的官方原理介...

98110
来自专栏数据小魔方

Stata特别篇(上)——Stata单变量图表汇总!

今天要跟大家分享的是Stata特别篇——Stata图表汇总! 本篇内容将会涉及到常用的图表类型以及统计分析过程作为判别和辅助分析的各种常用图表。 大家都知道由于...

6435
来自专栏逍遥剑客的游戏开发

游戏中的战争迷雾

64511
来自专栏PPV课数据科学社区

非主流自然语言处理——遗忘算法系列(二):大规模语料词库生成

一、前言   本文介绍利用牛顿冷却模拟遗忘降噪,从大规模文本中无监督生成词库的方法。 二、词库生成     算法分析,先来考虑以下几个问题     问:目标是从...

37112

扫码关注云+社区