之前我们讨论过马尔可夫决策过程（MDP，参阅 https://goo.gl/wVotRL）以及寻找最优的动作-价值函数
加州大学洛杉矶分校计算机科学专业的 Ray Zhang 最近开始在自己的博客上连载介绍强化学习的文章，这些介绍文章主要基于 Richard S. Sutton 和 Andrew G. Barto 合著的《Reinforcement Learning: an Introduction》，并添加了一些示例说明。该系列文章现已介绍了赌博机问题、马尔可夫决策过程和蒙特卡洛方法。本文是对其中蒙特卡洛方法文章的编译。更多相关文章和最新更新可访问：https://oneraynyday.github.io
翻译 | AI科技大本营（公众号ID：rgznai100） 参与 | 林椿眄 编辑 | 费棋 FaceID 是新款 iPhone X 最受欢迎的功能之一，它取代 TouchID 成为了最前沿的解锁方式。 一些苹果的竞争对手们还在继续沿用着传统的指纹解锁方式，FaceID 解锁方式显然是革命性的：扫你一眼，手机自动解锁。 为了实现 FaceID 技术，苹果采用了先进而小巧的前置深度相机，这使得 iPhone X 能创建用户脸部的 3D 映射。此外，它还引入了红外相机来捕捉用户脸部图片，它拍摄到的图片对外界
原文地址：https://dzone.com/articles/machine-learning-automation-beware-of-the-hype
在学习过深度学习的基础知识之后，参与实践是继续提高自己的最好途径。本文将带你进入全球最大机器学习竞赛社区 Kaggle，教你如何选择自己适合的项目，构建自己的模型，提交自己的第一份成绩单。 本文将介绍数据科学领域大家都非常关心的一件事。事先完成一门机器学习 MOOC 课程并对 Python 有一些基础知识有助于理解文本，但没有也没关系。本文并不会向大家展示令人印象深刻的成果，而是回顾基础知识，试图帮助初学者找到方向。 文章结构： 1.介绍 2.Kaggle 综述 3.建立自己的环境 4.预测房价竞赛简介 5
我们程序员在着手一个项目时，需要做的关键决定之一就是选择一种语言，或一组语言，用于实施该系统。这一决定不仅会影响系统的实现，也会影响设计。例如，我们应该使用面向对象的语言还是过程语言？选择什么语言对项目以及作为项目一部分的程序的生命周期有着深远的影响，很多次，我们基于一些非常善变的因素，没有思考太多就去选语言：这语言是我惯常用来实现这类系统的；这语言我了解得最透彻；这是我最喜欢的语言，我很享受于用这种语言编程；等等。
我们程序员在着手一个项目时，需要做的关键决定之一就是选择一种语言，或一组语言，用于实施该系统。这一决定不仅会影响系统的实现，也会影响设计。例如，我们应该使用面向对象的语言还是过程语言？选择什么语言对项目以及作为项目一部分的程序的生命周期有着深远的影响，很多次，我们基于一些非常善变的因素，没有思考太多就去选语言：这语言是我惯常用来实现这类系统的；这语言我了解得最透彻；这是我最喜欢的语言，我很享受于用这种语言编程；等等。 既然这个决定会导致深刻而长远的结果，那么我们是不是在做这个抉择时应该更加务实？很多时候
选自Medium 作者：Oren Dar 机器之心编译 参与：刘晓坤、李泽南、路雪 在学习过深度学习的基础知识之后，参与实践是继续提高自己的最好途径。本文将带你进入全球最大机器学习竞赛社区 Kaggle，教你如何选择自己适合的项目，构建自己的模型，提交自己的第一份成绩单。 本文将介绍数据科学领域大家都非常关心的一件事。事先完成一门机器学习 MOOC 课程并对 Python 有一些基础知识有助于理解文本，但没有也没关系。本文并不会向大家展示令人印象深刻的成果，而是回顾基础知识，试图帮助初学者找到方向。 文章结
成为一个优秀的Java程序员，有着良好的代码编写习惯是必不可少的。下面就让我们来看看代码编写的30条建议吧。
成为一个优秀的Java程序员，有着良好的代码编写习惯是必不可少的。下面就让我们来看看代码编写的30条建议吧。 (1) 类名首字母应该大写。字段、方法以及对象（句柄）的首字母应小写。对于所有标识符，其中包含的所有单词都应紧靠在一起，而且大写中间单词的首字母。例如： ThisIsAClassName thisIsMethodOrFieldName 若在定义中出现了常数初始化字符，则大写static final基本类型标识符中的所有字母。这样便可标志出它们属于编译期的常数。 Java包（Package）属于一种特
想成为一个优秀的Java程序员，有着良好的代码编写习惯是必不可少的。下面就让我们来看看代码编写的30条建议吧。
想象一下飞越架构评论。一位建筑师走进来，看着，通过他的双筒望远镜凝视着他。他提供的评论通常过于通用或脱离背景。评论经常遭到震耳欲聋的沉默或激动人心的争论。如果有的话，他们很少帮助任何人。每个程序员都害怕它; 每个建筑师也都害怕它。
无可厚非你是一名程序员，但你真的是一个优秀的程序员吗？答案可不一定了。想要成为一个优秀的程序员，有着良好的代码编写习惯是必不可少的。下面就让我们来看看Java代码编写的30条建议吧，或许你会从中获得你想要的东西。 1、 类名首字母应该大写。字段、方法以及对象（句柄）的首字母应小写。对于所有标识符，其中包含的所有单词都应紧靠在一起，而且大写中间单词的首字母。例如： ThisIsAClassNamethisIsMethodOrFieldName 若在定义中出现了常数初始化字符，则大写static final
另外Elasticsearch入门，我强烈推荐ElasticSearch新手搭建手册和这篇优秀的REST API设计指南 给你，这两个指南都是非常想尽的入门手册。
选自arXiv 作者：Leslie N. Smith 机器之心编译 参与：Jane W、黄小天 近日来自美国海军研究室人工智能应用研究中心的 Leslie N.Smith 总结了一份报告，本报告对希
在了解Pandas之前，我很早就了解SQL，Pandas忠实地模拟SQL的方式使我很感兴趣。通常，SQL是供分析人员使用的，他们将数据压缩为内容丰富的报告，而Python供数据科学家使用的数据来构建（和过度拟合）模型。尽管它们在功能上几乎是等效的，但我认为这两种工具对于数据科学家有效地工作都是必不可少的。从我在熊猫的经历中，我注意到了以下几点：
作者：Jiaxiang Wu、Weidong Huang、Junzhou Huang、Tong Zhang
借助 JSON 和 CTE 等现代 SQL 功能，大型语言模型可以成为帮助加速学习和工作的“推理伙伴”。
网上看到一篇博文，我突然也想写一下自己正在使用的Python环境设置，以及对应的工具链。众众众所周知，Python环境管理是个很大很大的坑，坑里面有无数新人or老司机的尸体。而Python环境管理的工具又五花八门，所以可能每个人的设置都不尽相同。我列出的我使用的工具链，至少最大地满足了自己的需求，但不一定满足所有人的需求。但我自认为在Python环境管理方面颇有心得，所以有一定的参考价值。
整理 | 屠敏 出品 | CSDN（ID：CSDNnews） 一个好消息与一个坏消息。 好消息是，继 ChatGPT、GPT-4 等产品之后，代码生成工具的队伍再添新员。Google 近日宣布 Bard 可以辅助软件开发者完成编程和软件开发任务，支持代码生成、调试和代码解释等等。同时，Bard 支持 C++、Go、Java、JavaScript、Python 和 TypeScript 等 20 多种编程语言。开发者无需复制粘贴，就可以轻松地将 Python 代码导出到 Google Colab。 可以说，A
来源：https://www.qaseven.cn/posts/automation_refactor.html
现在，有这样一种主流观念，压垮了很多新手软件开发者，那就是你需要学习很多东西才能成为软件开发人员，并且很多人不知道从哪里开始起步。如今新手进入软件开发的程序员月薪大约是1w左右，新手在成长为成熟的开发工程师的路上，要学习和提升的技能是非常之多。工作经验或许能成为你拿高薪的一个指标，但是，技能才是最终的标准。
Python 是近十年来兴起的编程语言，并且被证明是一种非常强大的语言。我用 Python 构建了很多应用程序，从交互式地图到区块链。Python 有很多特性，初学者很难一开始就掌握所有的特性。
詹士 发自 凹非寺 量子位 | 公众号 QbitAI ChatGPT，越来越刑了! 已有不法分子将其“打扮成”年轻女孩，放社交软件上，引诱男性上钩，进而实施诈骗。 △ 面向中国市场，可能是个朋友圈里的卖茶女孩 事实上，据Forbes最新消息，ChatGPT不法用途还不止于此。 它不仅能编写程序，监视键盘输入信息，也能自己生成勒索软件，甚至，还有人用其编写暗网上毒品交易市场各种功能的代码。而对很多不擅长英语的异国黑客，ChatGPT也是协助生成英文钓鱼网站绝佳从犯。 安全研究机构（如Check Point）
自2010年以来，我以不同的形式在三家公司（Microsoft、Oracle以及AWS）从事开发者关系的工作。我在市场营销、研发工程、商务拓展等多个不同的部门从事该工作。我有各式各样的管理方式以及许多指标与目标，其中，每个指标与目标都有着不同的优先级和期望。
DOM diff 作为工程问题，需要具有一定算法思维，因此经常出现在面试场景中，毕竟这是难得出现在工程领域的算法问题。
这样的用户可能会拿到另一个人的照片。甚至可能他们的手机上就有其他人的照片或视频，他们可以用这样的照片或视频来欺骗识别人脸的相机（就像本文开头的图片那样）。
Python 在许多领域都是首选语言，包括编程入门、机器学习、数据科学以及数据工程等。在这篇文章中，我想聊下 Python 最大的优势和不足，以不足为主，因为这些问题已经存在了许多年，而且其中有些导致了很多问题。这篇文章对 Python 的评价看起来非常负面。但我仍然喜欢并每天使用 Python，并希望它能有所改进并不断变好。
现在要写出优秀的代码并不是一个真正的问题。一切都只是先进行 Google 搜索，然后只需找到 Stackoverflow 的第一个链接，找到最受欢迎或赞同最多的答案并复制粘贴就足够了！
照片、视频中的人脸有时也能骗过一些不成熟的人脸识别系统，让人们对人脸解锁的安全性产生很大怀疑。在这篇 4 千多字的教程中，作者介绍了如何用 OpenCV 进行活体检测（liveness detection）。跟随作者给出的代码和讲解，你可以在人脸识别系统中创建一个活体检测器，用于检测伪造人脸并执行反人脸欺骗。
作为一名新手Python程序员，你首先需要学习的内容之一就是如何导入模块或包。但是我注意到，那些许多年来不时使用Python的人并不是都知道Python的导入机制其实非常灵活。在本文中，我们将探讨以下话题：
K8ssandra 是 Apache Cassandra®在 Kubernetes 上的一个发行版，由多个开源组件构建而成。从一开始直到最近的 K8ssandra 1.3 版本，K8ssandra 一直使用 Helm 图表进行安装和管理。虽然该项目的某些组件使用了 Kubernetes Operators——包括 Cassandra（cass-operator）和 Medusa（medusa-operator），但还没有一个 Operator 对所有组件进行整体管理。
在 Python 中用的最多的可能就是 import 了，几乎我们写的每个 Python 脚本都是需要的，但这个 import 其实也有些讲究的，比如用不好很可能导致运行效率急剧下降，这里推荐一篇文章，对 import 的用法梳理得非常全面，希望对大家有帮助。
在百吉饼这种演绎逻辑游戏中，你必须根据线索猜出一个秘密的三位数。该游戏提供以下提示之一来响应您的猜测："Pico"，当您的猜测在错误的位置有正确的数字时，"Fermi"，当您的猜测在正确的位置有正确的数字时，以及"Bagels"，如果您的猜测没有正确的数字。你有 10 次机会猜这个秘密数字。
我特别支持软件开发者在他们掌握技术技能的同时去学习“软技能”——事实上，我写了一本关于这方面的书——但是不可否认的是：技术技能很重要。 我的意思是，如果你不能编写代码和开发软件，那么你学习众多软技能有
原文：http://effbot.org/zone/import-confusion.htm
我特别支持软件开发者在他们掌握技术技能的同时去学习“软技能”——事实上，我写了一本关于这方面的书——但是不可否认的是：技术技能很重要。
世界第一个不受语法束缚的基于数学归纳法的Proof Generator于2016年在 Wolfram|Alpha上闪亮登场，它的设计和创建离不开创意、行动力和优秀资源的整合。
暑期开始了！对于Lady姐来说，如何安排儿子的暑期生活是一件大事，显然是不能沉迷于王者农药， 于是Lady姐随手扔了一个教程给他：按照这份教程，在家里Win7的台式机上安装Tensorflow!
在许多组织中，自动化和人工智能/机器学习的第一步是采用机器人过程自动化 (RPA) 技术。
Devops和k8s的火热，越来越多的企业将docker运用到自动化运维中，不管是为了保证开发、测试、生产环境的环境一致性，还是和CI/CD工具的集成度，比如jenkins对docker或k8s的自动构建部署等，亦或利用docker进行自动化测试等
微服务在这个时代是一个常常被提及的话题。 我在 SoundCloud时, 曾经负责把一个巨石架构的 Ruby on Rails 应用迁移到微服务。这个故事的技术层面, 我做过多次演讲并且在 SoundCloud 的技术博客上发表过系列文章。这些工程的知识是人们最感兴趣的, 但最近我意识到我从来没有向大众解释我们是如何开启这段微服务之旅的。 抱歉让技术粉失望了, 我们迁移到微服务的原因更多是从产能考虑而非纯技术原因。下面我会做出解释。 注意:这篇文章有很多修正主义的成分, 为了使它更容易理解, 我们把一个相当
大数据文摘作品 编译：傅一洋、汪小七、张南星、GAO Ning、夏雅薇 高级的编程是逻辑思维的流露，会编程只代表你懂了这门语言的语法，但是会写清晰简洁易懂可迭代的代码才是程序员该追求的境界。编程入门已经不容易，但是如果能够在早期树立一些正确的“代码观”，或许可以让你的编程之路升级得更快。作者苦口婆心地给出了25条建议，句句真言。 首先我要声明的是：如果你是编程新手，本文并不是要让你对自己犯的错误感到愧疚，而是要你对这些错误有更好的认知，并避免在未来再犯。 当然，这些错误我也经历过，但是从每个错误中都学到
21点又名黑杰克（Blackjack），起源于法国，已流传到世界各地，有着悠久的历史。
我们刚庆祝了 Vue 上线十周年，Vue 首次在 2014 年 2 月对外公布。当我回想起来，自己也感到非常惊奇，我们已经坚持了十年。在 JavaScript 或整个前端领域，这样的时间可谓非常漫长。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
