专栏首页祥子的故事spark | 学习记录: 启动Scala、python

spark | 学习记录: 启动Scala、python

初学者,记录学习spark的最基本东西,不忘记

在spark下启动scala:

./bin/spark-shell

测试例子:

sc.parallelize(1 to 1000).count()

在spark中启动python:

./bin/pyspark

测试例子:

sc.parallelize(range(1000)).count()

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • python | 学习总结 urllib.request

    Number of Rows of Data =208 Number of Columns of Data =61

    努力在北京混出人样
  • spark | metastore_db cannot be creat

    努力在北京混出人样
  • R语言:计算各种距离

    ================================================================================...

    努力在北京混出人样
  • Spark安装(单机版)

    选择版本和type,这里为 spark-2.4.4-bin-without-hadoop.tgz

    宋先生
  • Python要上天啊!一行代码就可以搞定炫酷的数据可视化!

    学过Python数据分析的朋友都知道,在可视化的工具中,有很多优秀的三方库,比如matplotlib,seaborn,plotly,Boken,pyechart...

    1480
  • Python一行代码搞定炫酷可视化,你需要了解一下Cufflinks

    导读:学过Python数据分析的朋友都知道,在可视化的工具中,有很多优秀的三方库,比如matplotlib,seaborn,plotly,Boken,pyech...

    华章科技
  • 推荐收藏 | Python一行代码搞定炫酷可视化,Cufflinks了解一下

    学过Python数据分析的朋友都知道,在可视化的工具中,有很多优秀的三方库,比如matplotlib,seaborn,plotly,Boken,pyechart...

    小草AI
  • 我们误会cufflinks,虽然定量不准但却是很好的可视化工具

    早期做转录组分析的朋友们应该都接触过Cufflinks,一款有争议的拼装和定量软件。对其拼装和定量准确性做了评估,拼装确实不如StringTie,但定量的稳定性...

    生信宝典
  • Python一行代码搞定炫酷可视化,你需要了解一下Cufflinks

    学过Python数据分析的朋友都知道,在可视化的工具中,有很多优秀的三方库,比如matplotlib,seaborn,plotly,Boken,pyechart...

    用户2769421
  • 自动机器学习第一次!KDD首次开办AutoML竞赛

    2019年国际数据挖掘顶级会议KDD (ACM SIGKDD CONFERENCE ON KNOWLEDGE DISCOVERY AND DATA MINING...

    量子位

扫码关注云+社区

领取腾讯云代金券