腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
Python小屋
专栏作者
举报
961
文章
1634160
阅读量
146
订阅数
订阅专栏
申请加入专栏
全部文章（961）
python（692）
其他（156）
编程算法（79）
面向对象编程（79）
程序（28）
matplotlib（26）
numpy（24）
数据库（22）
爬虫（19）
tkinter（19）
http（18）
游戏（18）
windows（17）
opengl（16）
api（15）
正则表达式（15）
html（14）
程序设计（14）
设计（14）
sql（13）
shell（12）
https（12）
视频（12）
对象（11）
android（10）
sqlite（10）
人工智能（10）
图像处理（10）
函数（10）
算法（10）
动画（9）
mp4（8）
pandas（8）
机器学习（7）
网站（7）
存储（7）
gui（7）
数据可视化（7）
pdf（7）
word（7）
测试（7）
可视化（7）
django（6）
udp（6）
安全（6）
cmd（6）
excel（6）
后台（6）
java（5）
微信（5）
数据分析（5）
基础（5）
统计（5）
微信公众号（5）
打包（4）
神经网络（4）
大数据（4）
腾讯云开发者社区（4）
docx（4）
pip（4）
xlsx（4）
公众号（4）
工作（4）
排序（4）
源码（4）
xml（3）
嵌入式（3）
git（3）
matlab（3）
linux（3）
windows server（3）
深度学习（3）
访问管理（3）
容器（3）
缓存（3）
网络安全（3）
spark（3）
opencv（3）
二叉树（3）
selenium（3）
anaconda（3）
验证码（3）
dataframe（3）
powerpoint（3）
服务端（3）
集合（3）
数据（3）
推送（3）
效率（3）
音频（3）
原理（3）
字符串（3）
tensorflow（2）
c++（2）
php（2）
json（2）
mapreduce（2）
文件存储（2）
腾讯云测试服务（2）
视频处理（2）
开源（2）
erp（2）
决策树（2）
scrapy（2）
markdown（2）
socket编程（2）
数据结构（2）
nat（2）
腾讯云图数据可视化（2）
label（2）
png（2）
pywin32（2）
编程（2）
遍历（2）
表格（2）
队列（2）
多进程（2）
计算机图形学（2）
开发（2）
客户端（2）
事件（2）
手机（2）
数学（2）
线程（2）
指针（2）
对象存储（1）
语音识别（1）
官方文档（1）
数据挖掘（1）
javascript（1）
go（1）
.net（1）
css（1）
jquery（1）
typescript（1）
qt（1）
汇编语言（1）
云数据库 SQL Server（1）
云数据库 Redis（1）
access（1）
ruby on rails（1）
ide（1）
github（1）
ubuntu（1）
日志服务（1）
文字识别（1）
mongodb（1）
渲染（1）
xslt & xpath（1）
serverless（1）
分布式（1）
自动化（1）
html5（1）
jdk（1）
ssh（1）
卷积神经网络（1）
强化学习（1）
监督学习（1）
ftp（1）
grep（1）
tcp/ip（1）
无监督学习（1）
小程序（1）
机器人（1）
数据处理（1）
unicode（1）
utf8（1）
ascii（1）
数据脱敏（1）
工商注册（1）
汽车（1）
append（1）
bmp（1）
casting（1）
count（1）
data（1）
decorator（1）
dpi（1）
ffmpeg（1）
file（1）
filter（1）
flush（1）
gif（1）
imagemagick（1）
input（1）
key（1）
mask（1）
math（1）
multiprocessing（1）
openpyxl（1）
path（1）
plot（1）
pyaudio（1）
pyinstaller（1）
python3（1）
queue（1）
reportlab（1）
smtp（1）
spyder（1）
stdout（1）
treeview（1）
win10（1）
编辑器（1）
变量（1）
编码（1）
代码优化（1）
登录（1）
递归（1）
二进制（1）
二维码（1）
服务（1）
管理（1）
继承（1）
接口（1）
连接（1）
排序算法（1）
配置（1）
数据采集（1）
数组（1）
搜索（1）
特效（1）
通信（1）
协议（1）
压缩（1）
异常（1）
优化（1）
字符编码（1）
解释器（1）
搜索文章
搜索
搜索
关闭
Win10+Python3.6配置Spark创建分布式爬虫
spark
爬虫
jdk
html
介绍Spark在Win 10系统中的的安装、配置以及在分布式爬虫中的使用，Python版本为3.6.8。
Python小屋屋主
2019-12-13
848
0
Python大数据处理扩展库pySpark用法精要
python
大数据
spark
开源
分布式
Spark是一个开源的、通用的并行计算与分布式计算框架，其活跃度在Apache基金会所有开源项目中排第三位，最大特点是基于内存计算，适合迭代计算，兼容多种应用场景，同时还兼容Hadoop生态系统中的组件，并且具有非常强的容错性。Spark的设计目的是全栈式解决批处理、结构化数据查询、流计算、图计算和机器学习等业务和应用，适用于需要多次操作特定数据集的应用场合。需要反复操作的次数越多，所需读取的数据量越大，效率提升越大。 Spark集成了Spark SQL（分布式SQL查询引擎，提供了一个DataFrame编
Python小屋屋主
2018-04-16
1.7K
0
Python利用Spark并行处理框架批量判断素数
python
spark
方法一： from pyspark import SparkConf, SparkContext conf = SparkConf().setAppName("isPrime") sc = SparkContext(conf=conf) def isPrime(n): if n<2: return False if n==2: return True if not n&1: return False for i in range(3, int(n**0.5)+2, 2): if n%i =
Python小屋屋主
2018-04-16
745
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天，分 10000 元奖品池！
立即发文
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档