首页
学习
活动
专区
圈层
工具
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

数据科学家提高工作效率的基本工具

你可以使用jupyter笔记本解决这个问题。Jupyter笔记本本质上是保存你的进展,让你从你离开的地方继续前进。在这里你可以用结构化的方式来写代码,这样你就可以在需要的时候重新编写代码并更新它。...打开jupyter笔记本,打开anaconda提示符,转到创建和输入的目录: jupyter notebook ? 在你的网页浏览器中打开jupyter笔记本(我是Mozilla Firefox)。...GitHub所做的是为你提供一个框架,用于保存你在代码中所做的所有更改,并在需要的时候返回。这为你提供了有效地执行数据科学项目所需的灵活性。 我将给你一个如何使用GitHub的例子。...在GitHub上创建一个存储库 将储存库与你的代码目录连接起来 要完成任务,遵循下面提到的步骤: 步骤1:在GitHub上添加一个新的存储库 ? 步骤2:给出适当的说明来设置存储库。 ?...步骤3:连接到存储库 ? 步骤4:使用下面的命令将本地存储库与GitHub上的存储库连接起来。

78040

GitHub微软_推荐者:推荐系统的最佳实践

https://github.com/microsoft/recommenders/ 推荐者 此存储库提供了构建推荐系统的示例和最佳实践,作为Jupyter笔记本提供。...--name reco_base --display-name "Python (reco)" 5.启动Jupyter笔记本服务器 cd notebooks jupyter notebook 6.在00..._quick_start文件夹下运行SAR Python CPU MovieLens笔记本。...注 - 交替最小二乘(ALS)笔记本需要运行PySpark环境。请按照设置指南中的步骤在PySpark环境中运行这些笔记本。 算法 下表列出了存储库中当前可用的推荐算法。...当不同的实现可用时,笔记本链接在Environment列下。 ? 注意:*表示Microsoft发明/贡献的算法。 初步比较 提供了一个基准笔记本,以说明如何评估和比较不同的算法。

2.7K81
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Azure云工作站上做Machine Learning模型开发 - 全流程演示

    本文内容 了解如何在 Azure 机器学习云工作站上使用笔记本开发训练脚本。 本教程涵盖入门所需的基础知识: 设置和配置云工作站。...如果没有工作区,请完成“创建开始使用所需的资源”以创建工作区并详细了解如何使用它。 从“笔记本”开始 工作区中的“笔记本”部分是开始了解 Azure 机器学习及其功能的好地方。...设置用于原型制作的新环境(可选) 为使脚本运行,需要在配置了代码所需的依赖项和库的环境中工作。 本部分可帮助你创建适合代码的环境。...若要创建笔记本连接到的新 Jupyter 内核,请使用定义依赖项的 YAML 文件。 - 上传文件 上传的文件存储在 Azure 文件共享中,这些文件将装载到每个计算实例并在工作区中共享。 1....这些名称是自动生成的。 将鼠标悬停在某个名称上时,如果要重命名该名称,请使用名称旁边的铅笔工具。 选择第一个作业的链接。 名称显示在顶部。 还可以在此处使用铅笔工具重命名它。

    22750

    FastAI 之书(面向程序员的 FastAI)(八)

    不幸的是,当涉及博客时,似乎您必须做出一个困难的决定:要么使用一个使事情变得容易但会让您和读者受到广告、付费墙和费用的平台,要么花费数小时设置自己的托管服务并花费数周学习各种复杂的细节。...它可以在 Mac、Windows 和 Linux 上运行。按照安装说明进行安装,当你运行它时,它会要求你登录 GitHub 并选择要同步的存储库。点击“从互联网克隆存储库”,如图 A-14 所示。...在 GitHub 桌面上克隆你的存储库 一旦 GitHub 完成同步你的存储库,你就可以点击“在资源管理器中查看存储库文件”(或 Finder),如图 A-15 所示,你将看到你博客的本地副本!...我们希望你现在也喜欢的另一个工具是 Jupyter Notebook——你也可以直接用它来写博客! 博客的 Jupyter 您还可以使用 Jupyter 笔记本撰写博客文章。...要使用笔记本撰写博客,只需将其放入您的博客存储库中的*_notebooks*文件夹中,它将出现在您的博客文章列表中。在撰写笔记本时,写下您希望观众看到的内容。

    16410

    在同一集群中安全管理多个Jupyter实例

    攻击者或不道德的用户可以利用它来获取对敏感信息的未经授权的访问权限。 在本文中,我将带您了解常见的 Jupyter 笔记本威胁,并解释如何使用 零信任安全 来保护它们。...以下是 Jupyter 笔记本由于其设计而可能面临的一些最常见的安全威胁。 远程命令注入 当攻击者利用 Jupyter 笔记本环境中的漏洞在主机服务器上运行任意命令时,就会发生远程命令注入。...Jupyter 笔记本设置: 在 Kubernetes 集群中创建了两个命名空间,每个命名空间都托管自己的 Jupyter 笔记本实例。...这有助于防止不同用户或项目之间潜在的安全问题和资源冲突。 安全措施: 实施安全措施涉及配置 Kubernetes 集群和 Jupyter 笔记本以最大程度地减少漏洞。...这可能包括设置网络策略、基于角色的访问控制以及监控潜在威胁。 资源分配: 正确的资源分配可确保每个 Jupyter 笔记本实例都能获得其所需的 CPU、内存和存储资源,而不会影响其他实例。

    23430

    ArcGIS Pro 创建和添加 Python notebook

    当单击新建笔记本选项时,会出现一个对话框,可以选择将笔记本存储在何处,至少需要在此处输入新笔记本的名称。...需要考虑的事情:如果的组织希望拥有单个笔记本存储库,或者想要按开发阶段将笔记本分开(例如,按开发,和生产将它们分开),可以通过将笔记本存储在不同的文件夹中或存储库。...保存后,的笔记本项目将出现在 Pro 项目的目录窗格中(在指定的文件夹位置)。 第二个选项是使用目录窗格。...可以将新笔记本添加到在 Pro 项目中配置的任何文件夹连接,包括启动项目时自动创建的默认文件夹。要创建笔记本,请右键单击该文件夹,然后导航至新建 > 新建笔记本。...要引入笔记本,请打开目录窗格并添加保存笔记本的文件夹位置。将文件夹位置添加到 Pro 后,将能够展开它、找到笔记本并根据需要打开它们。

    1.2K10

    【机器学习】使用MLflow管理机器学习模型版本

    在这篇文章中,我将向你展示如何在本地设置MLflow以及使用PostgreSQL注册模型和管理端到端机器学习生命周期的数据库备份存储。...模型注册表,需要为要存储的所有数据设置一个数据库。...在本文中,我们将学习如何: 设置本地postgreSQL数据库作为MLflow的后端存储 创建MLflow实验并跟踪参数、度量和其他 注册模型,允许阶段转换和模型版本控制 ---- 安装程序 我将使用WSL...进入交互终端后,为mlflow创建一个新的数据库,以存储所有注册的模型: postgres=# CREATE DATABASE mlflow_db; 并添加新的用户和密码以在访问数据库时进行身份验证:...Jupyter笔记本设置 如果还没有安装jupyter,我们首先需要在环境中安装jupyter: conda install jupyter 设置——没有浏览器会阻止浏览器在笔记本被服务后自动打开,如果通过

    3.1K20

    别再问我如何双击打开.ipynb文件了!

    最近我连续更新了四篇使用技巧,而且在更早之前,给大家介绍过,如何在指定文件夹能够快速打开jupyter notebook ?也分享过一个方法:如何双击直接打开.ipynb文件!...但是在我的使用过程中,还是有些小问题。(也要感谢其他小伙伴的反馈,) 那么本文,就会提供双击打开.ipynb文件的终极版解决方案! 提升什么?...而nbopen的主要功能呢,它会查找最近的正在运行的notebook服务器。 如果找到,就会打开该笔记本的 Web 浏览器。如果没有,它会在该目录中启动一个新的notebook服务器。...另外,执行完上面两条命令后,还需先任意打开一个 .ipynb文件,打开时选择 python 打开方式,将其设置成成默认打开方式。 ? 这时候所有.ipynb文件的图标也会变成Python样式。 ?...Mac:克隆存储库并运行 .

    6.1K50

    如何使用虚拟环境和Jupyter Notebook

    根据所开发或处理的项目,有时需要一个特定版本的库,但在任何给定时间只能保留一个版本的库。...Python虚拟环境(venv)通过创建Python和所有库的自包含副本来解决这个问题。当我们创建多个虚拟环境时,每个实例都是自隔离的,不会干扰其他环境,因此我们可以在计算机上同时拥有不同版本的库。...另一个例子是,当应用程序需要多个库时,在一个环境中安装太多库可能会导致库之间的潜在冲突。...例如,我从事的大多数项目都需要pandas,因此,我只需要在系统范围内安装pandas,而无需在每次启动新项目时创建虚拟环境。...事实上,Jupyter支持的三种核心语言是Julia、Python和R。顾名思义,它是一个“笔记本”。这意味着它可以包含计算机代码和人类可读的内容,如文本、图片等,就像一个物理笔记本一样。

    3.9K10

    七个动画演示教你如何玩转Pycharm

    所有使用的示例也适用于 VS Code。 01 从本地文件系统创建项目 要创建项目,请执行以下操作: 从主菜单中,选择文件 /新项目 在欢迎屏幕上,单击创建新项目 新建项目对话框打开。...注意:您可以直接从 PyCharm 克隆要贡献的存储库,并基于它创建一个新项目 我通过克隆托管在 GitHub 上的开源包 Rope 在 Pycharm 中创建了一个项目。...04 为项目配置Jupyter 通过让 Jupyter 在 PyCharm 内的 Docker 中工作,我将所有三个环境合二为一,即 PyCharm 环境。...专用的Jupyter Notebook 调试器。 使用 Jupyter 笔记本进行基本操作的快捷方式。...下面显示了鼠标悬停时函数、方法或类的签名和文档字符串(如果存在)。 注意:您可以通过单击文档弹出窗口最右侧的垂直椭圆在 4 个选项中进行选择。

    1.8K40

    如何让计算机工作环境更便捷?几行简单的命令即可

    我使用的设置包含以下组件: 个人电脑(Linux 发行版) 网关 远程服务器 ? 由于我研究的项目计算量巨大,笔记本电脑无法负担。因此,我需要这些机器辅助我。...但当你准备睡觉(人总要休息啊)时,你就会暂停/休眠你的电脑(不是关机)。第二天,你想重新开始工作,你在本地计算机上准备打开隧道时发现,...... 连接已关闭,你需要重新打开它。这也让人心累不是吗?...你可以在自己的计算机上编写代码,在远程服务器上运行代码,或者在远程服务器上完全同步整个存储库。 interlliJ 界面会不时变化,但主题不变。我将介绍特定版本 - V. 2018.1.4 的步骤。...进入 Pycharm 的设置界面 构建,执行,部署 - >部署 单击绿色+,创建新的部署设置 输入相关信息(名称、主机、端口(通常为 22)、根路径和用户名) 现在右键点击项目文件夹,在部署键下,你可以上传...使用远程解释器: 进入项目设置栏 在项目解释器标记下(在项目解释器选项附近,有一个小齿轮按钮)。单击它,然后点击「添加」。

    60710

    一文弄懂Jupyter的配置与使用(呕心沥血版)

    设置 Jupyter Notebook 的启动目录非常有用,尤其是在你的工程有大量分散在不同目录中的数据或代码时。通过将启动目录设置为你的工程根目录,你就可以更轻松的管理和访问这些数据或代码了。...如果你将 Jupyter Notebook 的启动目录设置为 “my_project” 目录,那么你就可以很方便地访问这个项目中的任何文件,而无需在 Jupyter Notebook 中输入完整路径。...选择 6.2扩展库 6.2.1简介与安装 扩展库一般涉及两个东西,一个就是jupyter_nbextensions_configurator,另一个是jupyter_contrib_nbextensions..."%USERPROFILE%/" 如何修改通过快捷方式打开的Jupyter的启动目录?...打开快捷方式文件夹,右键单击要修改的快捷方式图标,并选择 “属性”。

    20.2K85

    如何在Debian 9上使用Python 3设置Jupyter笔记本

    本教程将指导您设置Jupyter Notebook以从Debian 9服务器运行,并教您如何连接和使用笔记本。...第1步 - 安装Pip和Python标头 要开始这个过程,我们将从Debian存储库下载并安装我们需要的所有项目。稍后我们将使用Python包管理器pip来安装其他组件。...第3步 - 安装Jupyter 在虚拟环境处于活动状态时,使用本地实例pip安装Jupyter : 注意:当虚拟环境被激活时(当您的提示位于其(myprojectenv)前面时),即使您使用的是Python...本节将概述一些使您开始使用笔记本的基本功能。Jupyter Notebook将显示其运行目录中的所有文件和文件夹,因此当您处理项目时,请确保从项目目录启动它。...要创建新的笔记本文件,请从右上角的下拉菜单中选择New > Python 3: 这将打开一个笔记本。我们现在可以在单元格中运行Python代码或将单元格更改为markdown。

    2.8K94

    Jupyter Notebook 使用手册

    对于交互式开发和呈现数据科学项目来说,Jupyter笔记本是一个非常强大的工具。本文将指导您如何在本地计算机上设置Jupyter笔记本,以及如何开始使用它来执行Python程序。...这种直观的工作流程促进了迭代和快速的开发,使笔记本在当代数据科学、分析和越来越广泛的科学的核心领域成为越来越受欢迎的选择。 最重要的是,作为开源项目Jupyter的一部分,它们是完全免费的。...02 启动Notebook 现在已经安装了Jupyter Notebook,让我们学习如何使用它。首先,你需要做的就是打开你的终端应用程序,进入你选择的文件夹。...我建议你从你的文档文件夹开始,然后创建一个叫做“笔记本”的子文件夹,或者其他容易记住的文件夹。...您已经了解了代码单元格的工作方式,现在让我们学习如何使用Markdown对文本进行样式设置。 Jupyter Notebook支持Markdown,这是一种标记语言,是HTML的超集。

    3.5K20

    Azure机器学习 - 使用与Azure集成的Visual Studio Code实战教程

    在VS Code中将计算实例设置为远程 Jupyter Notebook 服务器。 关注TechLead,分享AI全维度知识。...选择“在 VS Code(桌面)中编辑”。 5. 还可以从文件资源管理器命令栏或文件资源管理器中文件夹上的操作菜单启动 VS Code 网页版,而不打开笔记本 计算 选择“计算”选项卡。...调试脚本和应用程序 使用 VS Code 管理 Git 存储库 二、远程 Jupyter Notebook 服务器 此选项允许你从 Visual Studio Code(桌面版)将计算实例用作远程 Jupyter...若要连接到计算实例: 在 Visual Studio Code 中打开 Jupyter Notebook。 加载集成笔记本体验时,选择“选择内核”。 或者,可以使用命令面板: a....如果你已在 Azure 机器学习中打开此笔记本,我们建议你连接到计算实例上的现有会话。此操作将重新连接到你在 Azure 机器学习中为此笔记本创建的现有会话。

    27020

    如何为Python 3设置Jupyter Notebook

    本教程将引导您设置Jupyter Notebook以在本地或从Ubuntu 16.04服务器运行,并教您如何连接和使用笔记本。...在本指南结束时,您将能够使用在本地计算机或远程服务器上运行的Jupyter Notebook运行Python 3代码。...为此,请执行以下命令: jupyter notebook Jupyter笔记本的活动记录将打印到终端。当您运行Jupyter Notebook时,它将在特定的端口号上运行。...本节将概述一些使您开始使用笔记本的基本功能。Jupyter Notebook将显示其运行目录中的所有文件和文件夹,因此当您处理项目时,请确保从项目目录启动它。...要创建新的笔记本文件,请从右上角的下拉菜单中选择New > Python 3: 这将打开一个笔记本。我们现在可以在单元格中运行Python代码或将单元格更改为markdown。

    2.8K00

    Jupyterlab 使用手册:号称要取代 Jupyter Notebook

    3、创建和保存文件 在本节中,我们将快速了解如何使用Jupyter Lab中的文件。 创建文件 只需单击主菜单中的“+”图标即可。...在Notebook中拖放单元格 ? 编辑器中的tab自动补全 文本编辑器现在具有代码自动完成功能。但是,目前只有在同时打开文本编辑器和控制台时,才能够使用。 ?...同一文件的新视图 有时我们的笔记本太长了,所以我们可以在一个实例中有两个相同(或不同)笔记本的视图。当我们想要同时查看笔记本的顶部和底部时,这可能很有用。 ?...当您登录自己的Google帐户时,您可以将存储在其中的文件提供给JupyterLab。...Github Extension 它是用于访问GitHub代码库的JupyterLab扩展。此扩展允许我们选择GitHub组织和用户,浏览其代码库,并打开其中的文件。

    6.4K60

    如何在Ubuntu 16.04上设置Jupyter Notebook以运行IPython

    本文将指导您设置服务器以运行Jupyter Notebook,并教您如何连接和使用Notebook。...install jupyter 根据Ubuntu apt-get存储库中pip的版本,尝试安装Jupyter时可能会出现以下错误: You are using pip version 8.1.1, however...Jupyter Notebook的活动记录将打印到终端。当您运行Jupyter Notebook时,它将在特定的端口号上运行。您运行的第一个笔记本通常在端口上运行8888。...Jupyter Notebook功能强大。本节将概述开始使用笔记本的基本功能。Jupyter Notebook将自动显示运行目录中的所有文件和文件夹。...要创建新的笔记本文件,请从右上角的下拉菜单中选择New > Python 2: 这将打开一个notebook。我们现在可以在单元格中运行Python代码或将单元格更改为markdown。

    4K51

    使用Jekyll显示Jupyter笔记本

    配置Jupyter笔记本 如果您的系统上尚未安装带有Jupyter的Anaconda,本节将指导您完成设置笔记本的过程,该笔记本将提供模板输出,然后可以将其导出到您的Jekyll博客。...笔记本: jupyter notebook 将Jupyter笔记本导出为Markdown 本节演示了Jupyter笔记本的一些常见功能,可以在Jekyll博客上显示HTML。...有关转义字符和格式化块的更多信息,请参阅Jekyll文档。 以下部分显示如何通过调整并设置表格和图像样式以改进显示。 扩展默认SCSS Jupyter中的表格输出转换为HTML表格。...本节介绍如何通过扩展主题SCSS以便对表格进行样式化。 1.在/exampleblog/assets文件夹中创建一个名为main.scss的新文件。...[jupyter_table.png] [jekyll_table.png] 在Jekyll中添加图像 通过markdown添加图像需要将图像存储在项目目录中。

    3.9K20
    领券