首页
学习
活动
专区
工具
TVP
发布

最新最全的大数据技术体系

专栏作者
717
文章
542340
阅读量
33
订阅数
【大数据实训】python石油大数据可视化(八)
一直到2020年,我国原油产量基本处于平稳的状态,大部分原油来自国外进口;中国原油加工产量在华东、东北地区占比较大,华南地区相对较少。原油的加工企业对原油的加工有很大的影响,中国石油营业收入及净利润也十分可观。
Maynor
2023-12-21
1510
2023年最新Python大数据之Python基础【七】管理系统
Maynor
2023-10-17
1690
Python大数据之Python进阶(六)多线程的使用
Thread([group [, target [, name [, args [, kwargs]]]]])
Maynor
2023-10-13
2430
Python大数据之Python进阶(五)线程
1. 线程的介绍 在Python中,想要实现多任务除了使用进程,还可以使用线程来完成,线程是实现多任务的另外一种方式。 2. 线程的概念 线程是进程中执行代码的一个分支,每个执行分支(线程)要想工作执行代码需要cpu进行调度,也就是说线程是cpu调度的基本单位,每个进程至少都有一个线程,而这个线程就是我们通常说的主线程。 3. 线程的作用 多线程可以完成多任务 多线程效果图:
Maynor
2023-10-13
690
Python大数据之Python进阶(七)线程的注意点
假如我们现在创建一个子线程,这个子线程执行完大概需要2.5秒钟,现在让主线程执行1秒钟就退出程序,查看一下执行结果,示例代码如下:
Maynor
2023-10-13
2000
2023年最新Python大数据之Python基础【六】变量
Maynor
2023-10-13
1270
2022年最新Python大数据之Python基础【五】(集合)
Maynor
2023-10-13
1220
2022年最新Python大数据之Python基础【五】(字典)
Maynor
2023-10-13
1420
2022年最新Python大数据之Python基础【五】(元组)
Maynor
2023-10-13
1080
Python大数据之PySpark(八)SparkCore加强
print(“释放缓存之后,直接从rdd的依赖链重新读取”) print(join_result_rdd.count())
Maynor
2023-10-10
1500
Python大数据之PySpark(七)SparkCore案例
Maynor
2023-10-09
2090
Python大数据之PySpark(六)RDD的操作
from pyspark import SparkConf, SparkContext import re
Maynor
2023-10-08
2040
Python大数据之PySpark(五)RDD详解
rdd2=sc.textFile(“hdfs://node1:9820/pydata”)
Maynor
2023-10-04
3240
Python大数据之PySpark(四)SparkBase&Core
在哪个文件下面更改?spark-env.sh中增加YARN_CONF_DIR的配置目录
Maynor
2023-10-04
4020
Python大数据之Python进阶(四)进程的注意点
假如我们现在创建一个子进程,这个子进程执行完大概需要2秒钟,现在让主进程执行0.5秒钟就退出程序,查看一下执行结果,示例代码如下:
Maynor
2023-09-30
1060
Python大数据之PySpark(三)使用Python语言开发Spark程序代码
需求:[(‘Spark’, 2), (‘Flink’, 1), (‘hello’, 3), (‘you’, 1), (‘me’, 1), (‘she’, 1)]
Maynor
2023-09-29
2460
Python大数据之Python进阶(三)多进程的使用
获取进程编号的目的是验证主进程和子进程的关系,可以得知子进程是由那个主进程创建出来的。
Maynor
2023-09-29
1890
Python大数据之Python进阶(二)多任务编程-进程
不能,因为之前所写的程序都是单任务的,也就是说一个函数或者方法执行完成另外一个函数或者方法才能执行,要想实现这种操作就需要使用多任务。 多任务的最大好处是充分利用CPU资源,提高程序的执行效率。
Maynor
2023-09-29
1330
Python大数据之PySpark(二)PySpark安装
spark-submit 提交圆周率的计算代码 */examples/src/main/python/pi.py*
Maynor
2023-09-28
1K0
【已解决】Caused by: org.apache.spark.SparkException: Python worker failed to connect back.
TypeError: ‘JavaPackage’ object is not callable
Maynor
2023-09-28
4040
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档