1、预测模型 一旦使用deploy_model将模型成功部署到云中，或者使用save_model在本地成功部署了模型，就可以使用predict_model函数将其用于看不见的数据进行预测。 此功能采用训练有素的模型对象和数据集进行预测。 它将自动应用实验过程中创建的整个转换管道。 对于分类，将基于50％的概率创建预测标签，但是如果您选择使用通过optimize_threshold获得的不同阈值，则可以在predict_model中传递概率_threshold参数。 此功能还可用于生成保留/测试集的预测。
基于TensorFlow2.x的框架，使用PYthon编程语言，实现对服装图像进行分类。
我们将得到 torch 、 torch.nn （ nn 代表神经网络，这个包包含在 PyTorch 中创建神经网络的构建块）和 matplotlib 。
此数据包含大小为150x150、分布在6个类别下的约25k图像。 {'建筑物'：0，'森林'：1，'冰川'：2，'山'：3，'海'：4，'街道'：5}
TensorFlow 1.3 引入了两个重要功能，您应当尝试一下： 数据集：一种创建输入管道（即，将数据读入您的程序）的全新方式。 估算器：一种创建 TensorFlow 模型的高级方式。估算器包括
前几节用代码介绍了生成型对抗性网络的实现，但后来我觉得代码的实现七拐八弯，很多不必要的烦琐会增加读者的理解负担，于是花时间把代码进行强力精简，希望由此能帮助有需要的读者更顺利的入门生成型对抗性网络。
使用过TensorFlow的大家都会知道, TF通过计算图将计算的定义和执行分隔开, 这是一种声明式（declaretive）的编程模型. 确实, 这种静态图的执行模式优点很多,但是在debug时确实非常不方便(类似于对编译好的C语言程序调用,此时是我们无法对其进行内部的调试), 因此有了Eager Execution, 这在TensorFlow v1.5首次引入. 引入的Eager Execution模式后, TensorFlow就拥有了类似于Pytorch一样动态图模型能力, 我们可以不必再等到see.run(*)才能看到执行结果, 可以方便在IDE随时调试代码,查看OPs执行结果. tf.keras封装的太好了 。不利于适用于自定义的循环与训练，添加自定义的循环 是一个命令式的编程环境，它使得我们可以立即评估操作产生的结果，而无需构建计算图。
TensorFlow 1.3 引入了两个重要功能，您应当尝试一下： 数据集：一种创建输入管道（即，将数据读入您的程序）的全新方式。 估算器：一种创建 TensorFlow 模型的高级方式。估算器包括适用于常见机器学习任务的预制模型，不过，您也可以使用它们创建自己的自定义模型。 下面是它们在 TensorFlow 架构内的装配方式。结合使用这些估算器，可以轻松地创建 TensorFlow 模型和向模型提供数据： 我们的示例模型 为了探索这些功能，我们将构建一个模型并向您显示相关的代码段。完整
在上一篇文章中，我们简述了Keras和PyTorch的区别，旨在帮助你选择更适合你需求的框架。现在，我们进行实战进行。我们将让Keras和PyTorch互相较量以展示他们的优劣。我们使用的问题是：区分异形和铁血战士。
GAN的基本原理其实非常简单，它包含两个网络，G网络(Generator)和D网络(Discriminator)。G网络的目标是尽量生成真实的图片去欺骗判别网络D，D网络的目标是尽量把G网络生成的图片和真实的图片分别开来。
深度学习的广泛运用之一就是对文本按照其内容进行分类。例如对新闻报道根据其性质进行划分是常见的应用领域。在本节，我们要把路透社自1986年以来的新闻数据按照46个不同话题进行划分。网络经过训练后，它能够分析一篇新闻稿，然后按照其报道内容，将其归入到设定好的46个话题之一。深度学习在这方面的应用属于典型的“单标签，多类别划分”的文本分类应用。 我们这里采用的数据集来自于路透社1986年以来的报道，数据中每一篇新闻稿附带一个话题标签，以用于网络训练，每一个话题至少含有10篇文章，某些报道它内容很明显属于给定话题，
由 LeCun 和 Bengio 等人联合发起的深度学习顶会 ICLR，今年你投稿了吗？
寄语：PyCaret，是一款 Python中的开源低代码（low-code）机器学习库，支持在「低代码」环境中训练和部署有监督以及无监督的机器学习模型，提升机器学习实验的效率。
在有监督的机器学习和尤其是深度学习的场景应用中，需要大量的标注数据。标注数据是一项枯燥无味且花费巨大的任务，关键是现实场景中，往往无法标注足够的数据。而且模型的训练是极其耗时的。因此迁移学习营运而生。 传统机器学习(主要指监督学习)
当涉及到机器学习分类任务时，用于训练算法的数据越多越好。在监督学习中，这些数据必须根据目标类进行标记，否则，这些算法将无法学习独立变量和目标变量之间的关系。但是，在构建用于分类的大型标记数据集时，会出现两个问题：
模型经过训练测试之后，我们往往用一两张图对模型预测结果进行分析讨论，那么下面介绍在keras中用已训练的模型经过测试的方法。
要了解更多关于Apache Spark的信息，请参考Spark Summit East in the New York in Feb 2016。
在本节中，我们将研究许多人工神经网络（ANN）应用。 这些包括图像识别，神经风格迁移，文本风格生成，时尚识别以及电影评论的 IMDb 数据库的语义分析。
建立一个很酷的机器学习项目确实很不错，但如果你希望其他人能够看到你的作品怎么办呢？当然，你可以将整个项目放在GitHub上，但这只能给程序员看，如果你想给自己家里的老人看呢？GitHub肯定不行，所以我们想要的是将我们的深度学习模型部署成世界上任何人都轻易访问的Web应用程序。
这篇文章包括了神经网络在kaggle泰坦尼克生存数据集上的应用程序。它帮助读者加深他们对神经网络的理解，而不是简单地执行吴恩达代码。泰坦尼克生存数据集就是可以随意使用的一个例子。 Github repo上的代码地址: https://github.com/jaza10/AppliedNeuralNetworkTitanicSurvival 1.下载“深度神经网络应用程序”和来自Coursera中心的“dnn_utils_v2.py”文件，并将其保存在本地 Github repo不包含deeplearning
这个错误是因为在你的循环中，你在每次迭代时都试图将'年月'列设置为索引。然而，一旦你在第一次迭代中将'年月'列设置为索引，它就不再是数据框的一部分，所以在后续的迭代中，你不能再次将它设置为索引。
本教程的数据摘自Kaggle，该数据最初由Intel在analytics-vidhya上发布，以举办图像分类挑战赛。
在深度学习算法优化系列三 | Google CVPR2018 int8量化算法 这篇推文中已经详细介绍了Google提出的Min-Max量化方式，关于原理这一小节就不再赘述了，感兴趣的去看一下那篇推文即可。昨天已经使用tflite测试了训练后量化，所以今天主要来看一下训练时量化时怎么做的。注意训练中的量化实际上是伪量化，伪量化是完全量化的第一步，它只是模拟了量化的过程，并没有实现量化，只是在训练过程中添加了伪量化节点，计算过程还是用float32计算。然后训练得出.pb文件，放到指令TFLiteConverter里去实现第二步完整的量化，最后生成tflite模型，实现int8计算。
在TensorFlow官方新的教程中，第一个例子使用了由MNIST延伸而来的新程序。 这个程序使用一组时尚单品的图片对模型进行训练，比如T恤(T-shirt)、长裤(Trouser)，训练完成后，对于给定图片，可以识别出单品的名称。
KNN原理报告里有写，不作重复赘述。 本实验使用的编程环境是Jupyter，完整的程序代码可以戳这下载。 【模式识别】实验二：KNN，python程序代码与实验过程 这里仅贴上核心代码
Tensorflow 是干嘛的，就不过多赘述了，小伙伴们可以访问官网来详细了解 https://www.tensorflow.org/
在深度学习算法优化系列三 | Google CVPR2018 int8量化算法 这篇推文中已经详细介绍了Google提出的Min-Max量化方式，关于原理这一小节就不再赘述了，感兴趣的去看一下那篇推文即可。今天主要是利用tflite来跑一下这个量化算法，量化一个最简单的LeNet-5模型来说明一下量化的有效性。tflite全称为TensorFlow Lite，是一种用于设备端推断的开源深度学习框架。中文官方地址我放附录了，我们理解为这个框架可以把我们用tensorflow训练出来的模型转换到移动端进行部署即可，在这个转换过程中就可以自动调用算法执行模型剪枝，模型量化了。由于我并不熟悉将tflite模型放到Android端进行测试的过程，所以我将tflite模型直接在PC上进行了测试（包括精度，速度，模型大小）。
这里我们使用keras定义简单的神经网络全连接层训练MNIST数据集和cifar10数据集：
本文将利用机器学习的手段来对鸢尾花按照物种进行分类。本教程将利用 TensorFlow 来进行以下操作：
前半个多月总共写了三篇深度学习相关的理论介绍文章，另外两个月前，我们使用逻辑回归算法对sklearn里面的moons数据集进行了分类实验，最终准确率和召回率都达到了97.9%，详情参看这篇文章：一文打尽：线性回归和逻辑斯蒂线性回归（https://zhuanlan.zhihu.com/p/31075733），今天我们尝试使用神经网络来进行分类。全连接神经网络的搭建本身没什么难度，几句代码就够了，但是本文的真正目的是： 让大家了解Tensorflow 的基本使用方法； 使用 tensorboard 可视化你的
torchvision.datasets 包含许多示例数据集，可用于练习编写计算机视觉代码。FashionMNIST 就是其中之一。它有 10 个不同的图像类别（不同类型的服装），用于多分类问题。torchvision已经内置了该数据集，可以通过torchvision.datasets加载。
因为受其启发，所以在这提一下，快照集成是一种无需额外训练代价的多神经网络集成方法。 通过使单个神经网络沿它的优化路径进行多个局部最小化，保存模型参数。 利用多重学习速率退火循环实现了重复的快速收敛。
本文结构： 什么是命名实体识别（NER） 怎么识别？ ---- cs224d Day 7: 项目2-用DNN处理NER问题 课程项目描述地址 ---- 什么是NER？ 命名实体识别（NER）是指识别文本中具有特定意义的实体，主要包括人名、地名、机构名、专有名词等。命名实体识别是信息提取、问答系统、句法分析、机器翻译等应用领域的重要基础工具，作为结构化信息提取的重要步骤。摘自BosonNLP 怎么识别？ 先把解决问题的逻辑说一下，然后解释主要的代码，有兴趣的话，完整代码请去这里看。 代码是在 Tensor
上一节我们讲过了完整的保存模型及其训练完成的参数。 Keras中使用这种方式，预置了多个著名的成熟神经网络模型。当然，这实际是Keras的功劳，并不适合算在TensorFlow 2.0头上。 当前TensorFlow 2.0-alpha版本捆绑的Keras中包含：
FastAPI是用于在Python中构建API的高性能异步框架。 它提供了对Swagger UI开箱即用的支持。
机器翻译和语音识别是最早开展的两项人工智能研究。今天也取得了最显著的商业成果。 早先的机器翻译实际脱胎于电子词典，能力更擅长于词或者短语的翻译。那时候的翻译通常会将一句话打断为一系列的片段，随后通过复杂的程序逻辑对每一个片段进行翻译，最终组合在一起。所得到的翻译结果应当说似是而非，最大的问题是可读性和连贯性非常差。 实际从机器学习的观点来讲，这种翻译方式，也不符合人类在做语言翻译时所做的动作。其实以神经网络为代表的机器学习，更多的都是在“模仿”人类的行为习惯。 一名职业翻译通常是这样做：首先完整听懂要翻译的语句，将语义充分理解，随后把理解到的内容，用目标语言复述出来。 而现在的机器翻译，也正是这样做的，谷歌的seq2seq是这一模式的开创者。 如果用计算机科学的语言来说，这一过程很像一个编解码过程。原始的语句进入编码器，得到一组用于代表原始语句“内涵”的数组。这些数组中的数字就是原始语句所代表的含义，只是这个含义人类无法读懂，是需要由神经网络模型去理解的。随后解码过程，将“有含义的数字”解码为对应的目标语言。从而完成整个翻译过程。这样的得到的翻译结果，非常流畅，具有更好的可读性。
“变分自动编码器”(Variational Autoencoders，缩写:VAE)的概念来自Diederik P Kingma和Max Welling的论文《Auto-Encoding Variational Bayes》。现在有了很广泛的应用，应用范围已经远远超出了当时论文的设想。不过看起来似乎，国内还没有见到什么相关产品出现。
TensorFlow 估算器提供了一套中阶 API 用于编写、训练与使用机器学习模型，尤其是深度学习模型。在这篇博文中，我们描述了如何通过使用异步执行来避免每次调用预测方法时都需重载模型，从而让 TF 估算器的推断提速超过百倍。
模型可解释性是当今机器学习中最重要的问题之一。通常某些“黑匣子”模型（例如深度神经网络）已部署到生产中，并且正在运行从工作场所安全摄像头到智能手机的所有关键系统。令人恐惧的是，甚至这些算法的开发人员都无法理解为什么正是这些算法真正做出了自己的决定，甚至更糟的是，如何防止对手利用它们。
虽然这里是采用 TF-Slim 处理图像分类问题，还需要安装 TF-Slim 图像模型库 tensorflow/models/research/slim. 假设该库的安装路径为 TF_MODELS. 添加 TF_MODELS/research/slim 到 python path.
在上一篇文章“神经网络剪枝2019”(点击文末阅读原文可以打开知乎原文)中，我们回顾了一些关于修剪神经网络的优秀文献。我们了解到，剪枝是一种模型优化技术，包括去掉权重张量中不必要的值。这使模型更小且精度和基线模型非常接近。 在本文中，我们将通过一个示例来应用剪枝，并查看对最终模型大小和预测误差的影响。
有些教程会推荐安装nightly，它适用于在一个全新的环境下进行TensorFlow的安装，默认会把需要依赖的库也一起装上。我使用的是anaconda，本文我们安装的是纯净版的tensorflow，非常简单，只需打开Prompt：
TensorFlow训练好的模型以tensorflow原生方式保存成protobuf文件后可以用许多方式部署运行。
原文第四篇中，我们介绍了官方的入门案例MNIST，功能是识别手写的数字0-9。这是一个非常基础的TensorFlow应用，地位相当于通常语言学习的"Hello World!"。 我们先不进入TensorFlow 2.0中的MNIST代码讲解，因为TensorFlow 2.0在Keras的帮助下抽象度比较高，代码非常简单。但这也使得大量的工作被隐藏掉，反而让人难以真正理解来龙去脉。特别是其中所使用的样本数据也已经不同，而这对于学习者，是非常重要的部分。模型可以看论文、在网上找成熟的成果，数据的收集和处理，可不会有人帮忙。 在原文中，我们首先介绍了MNIST的数据结构，并且用一个小程序，把样本中的数组数据转换为JPG图片，来帮助读者理解原始数据的组织方式。 这里我们把小程序也升级一下，直接把图片显示在屏幕上，不再另外保存JPG文件。这样图片看起来更快更直观。 在TensorFlow 1.x中，是使用程序input_data.py来下载和管理MNIST的样本数据集。当前官方仓库的master分支中已经取消了这个代码，为了不去翻仓库，你可以在这里下载，放置到你的工作目录。 在TensorFlow 2.0中，会有keras.datasets类来管理大部分的演示和模型中需要使用的数据集，这个我们后面再讲。 MNIST的样本数据来自Yann LeCun的项目网站。如果网速比较慢的话，可以先用下载工具下载，然后放置到自己设置的数据目录，比如工作目录下的data文件夹，input_data检测到已有数据的话，不会重复下载。 下面是我们升级后显示训练样本集的源码，代码的讲解保留在注释中。如果阅读有疑问的，建议先去原文中看一下样本集数据结构的图示部分：
这是一篇手把手教你使用 Python 实现机器学习算法，并在数值型数据和图像数据集上运行模型的入门教程，当你看完本文后，你应当可以开始你的机器学习之旅了！
纵观机器学习领域，一个主要趋势是专注于将软件工程原理应用于机器学习的项目。例如，Cortex重新创造了部署serverless功能的体验，但使用了推理管道。类似地，DVC实现了现代版本控制和CI/CD管道，但是是针对ML的。
剪枝是一种模型优化技术，这种技术可以消除权重张量中不必要的值。这将会得到更小的模型，并且模型精度非常接近标准模型。
tf.contrib.learn Quickstart TensorFlow的机器学习高级API(tf.contrib.learn)使配置、训练、评估不同的学习模型变得更加容易。在这个教程里，你将使用tf.contrib.learn在Iris data set上构建一个神经网络分类器。代码有一下5个步骤： 在TensorFlow数据集上加载Iris 构建神经网络 用训练数据拟合 评估模型的准确性 在新样本上分类 Complete Neural Network Source Code 这里是神经网络的源代码：
随着时间的推移，学习模型变得越来越复杂，很难直观地分析它们。人们经常听说机器学习模型是"黑匣子"，从某种意义上说，它们可以做出很好的预测，但我们无法理解这些预测背后的逻辑。这种说法是正确的，因为大多数数据科学家发现很难从模型中提取见解。然而，我们可以使用一些工具从复杂的机器学习模型中提取见解。
知识蒸馏（Knowledge Distillation）最早是Hinton 2014年在论文Dislillation the Knowledge in a Neural Network中提出的概念，主要思想是通过教师模型（teacher）来指导学生模型（student）的训练，将复杂、学习能力强的教师模型学到的特征表示“知识蒸馏”出来，传递给参数小、学习能力弱的学生模型，从而得到一个速度快、表达能力强的学生模型。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
