腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Golang开发

专栏作者

289

文章

266787

阅读量

38

订阅数

DataFrame常用API操作

api java scala python 数据库

以列的（列名，列的类型。列值）的形式构成的分布式数据集，按照列赋予不同名称，约等于关系数据库的数据表

2019-08-27

1.2K0

python 分布式 spark sql

官方地址 http://spark.apache.org/sql/ Spark SQL是Spark用来处理结构化数据的一个模块，它提供了2个编程抽象：DataFrame和DataSet，并且作为分布式SQL查询引擎的作用。

2019-08-22

7060

ES6——Generator

javascript python 编程算法 java

ES6 新引入了 Generator 函数，可以通过 yield 关键字，把函数的执行流挂起，为改变执行流程提供了可能，从而为异步编程提供解决方案。基本用法

2019-07-18

2760

Python爬虫——Scrapy爬取名人名言

toscrape是一个名人名言的网站一条名人名言的结构如下 <div class="quote" itemscope="" itemtype="http://schema.org/CreativeWork"> <span class="text" itemprop="text">“I have not failed. I've just found 10,000 ways that won't work.”</span> <span>by <small class="au

2019-05-29

9180

Python爬虫——电影top榜

图片的实际是data-src，而不是src需要实际看一下请求数据返回的response值

2019-05-29

5360

Unicode 和 UTF-8

编程算法 python

In the older days of computing, ASCII code was used to represent characters. The English language has only 26 alphabets and a few other special characters and symbols. 在早期的计算机时代中，ASCII码用于表示26个英语字母以及一些特殊的字符和符号。 The table below provides the ASCII characters and their corresponding Decimal and Hex values. 下表展示了ASCII字符对应的十进制值和十六进制值。

2019-05-29

1.3K0

Python爬虫——Scrapy爬取技术博客文章

创建工程 $scrapy startproject ArticleSpider You can start your first spider with: scrapy genspider example example.com 创建爬虫通过scrapy genspide创建jobbole的爬虫 $cd ArticleSpider $scrapy genspider jobbole blog.jobbole.com 创建main.py import sys import os from

2019-05-29

5270

Python基础(1) ——安装与配置

Python has been installed as /usr/local/bin/python3 Unversioned symlinks `python`, `python-config`, `pip` etc. pointing to `python3`, `python3-config`, `pip3` etc., respectively, have been installed into /usr/local/opt/python/libexec/bin If you need

2019-05-29

5330

Python——JSON

编程算法 json python

json.loads 用于解码 JSON 数据,将Json格式字符串解码转换成Python对象

2019-05-29

9450

Django——基础创建

manage.py是项目管理文件，通过它管理项目。 init.py是一个空文件，作用是这个目录demo1可以被当作包使用。 settings.py是项目的整体配置文件。 urls.py是项目的URL路由配置文件。 wsgi.py是项目与WSGI,服务器和Django交互的入口。

2019-05-29

2660

SelectionSort选择排序

java python go gif 排序

1 算法步骤首先在未排序序列中找到最小（大）元素，存放到排序序列的起始位置再从剩余未排序元素中继续寻找最小（大）元素，然后放到已排序序列的末尾。重复第二步，直到所有元素均排序完毕。 select

2019-05-29

3270

Django——模型Model

python 数据库 sql 编程算法 django

对象关系映射（Object Relation Mapping）实现了关系和数据库之间的映射，隐藏了关系数据访问的细节，不需要再编写SQL语句

2019-05-28

6890

Python爬虫——Scrapy简介

爬虫 python scrapy php

Scrapy Engine（引擎）：Scrapy框架的核心部分。负责在Spider和ItemPipeline、Downloader、Scheduler中间通信、传递数据等。 Spider（爬虫）：发送需要爬取的链接给引擎，最后引擎把其他模块请求回来的数据再发送给爬虫，爬虫就去解析想要的数据。这个部分是我们开发者自己写的，因为要爬取哪些链接，页面中的哪些数据是我们需要的，都是由程序员自己决定。 Scheduler（调度器）：负责接收引擎发送过来的请求，并按照一定的方式进行排列和整理，负责调度请求的顺序等。 Downloader（下载器）：负责接收引擎传过来的下载请求，然后去网络上下载对应的数据再交还给引擎。 Item Pipeline（管道）：负责将Spider（爬虫）传递过来的数据进行保存。具体保存在哪里，应该看开发者自己的需求。 Downloader Middlewares（下载中间件）：可以扩展下载器和引擎之间通信功能的中间件。 Spider Middlewares（Spider中间件）：可以扩展引擎和爬虫之间通信功能的中间件。

2019-05-28

4550

Python基础(8)——内建函数

mapreduce python

Build-in Function,启动python解释器，输入dir(builtins), 可以看到很多python解释器启动后默认加载的属性和函数，这些函数称之为内建函数，这些函数因为在编程时使用较多，cpython解释器用c语言实现了这些函数，启动解释器时默认加载。由于内建函数数量众多，可以通过help(function)查看函数的使用方法。

2019-05-28

2560

Python网络——Urllib&Requests

python http 网站网络安全

Urllib 库，它是 Python 内置的 HTTP 请求库.不需要额外安装即可使用,在 Python中，有 Urllib 和 Urlib2 两个库可以用来实现Request的发送。而在 Python3 中，已经没有Urllib2 ，统一为 Urllib

2019-05-28

3890

Python基础(12)——装饰器

python装饰器就是用于拓展原来函数功能的一种函数，这个函数的特殊之处在于它的返回值也是一个函数（函数的指针），使用python装饰器的好处就是在不用更改原函数的代码前提下给函数增加新的功能给当前代码增加代码执行时间

2019-05-28

3280

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态