首页
学习
活动
专区
工具
TVP
发布

数据挖掘

一个分享机器学习和大数据挖掘的栏目
专栏作者
197
文章
383689
阅读量
37
订阅数
scala中spark运行内存不足
发现其原因竟然是运行的时候默认的内存不足以支撑海量数据,可以用 bash spark-submit --help 中查看到自己代码的运行内存,即:
机器学习和大数据挖掘
2019-08-08
1.9K0
Linux下升级python
原来是没有gcc,我这里是新安装的Linux,所以我需要安装gcc,安装命令如下:
机器学习和大数据挖掘
2019-07-02
2.9K0
python判断两个文件是否相同
此方法相当于 Linux 系统下的diff,或者是 git 下的 checkout
机器学习和大数据挖掘
2019-07-02
2K0
python连接Linux命令行
#!/usr/bin/python # -*- coding: utf-8 -*- '''https://www.ibm.com/developerworks/cn/linux/l-cn-pexpect2/index.html''' import pexpect import types username = "root" ip = "192.168.***.***" password = "****" pex = pexpect.spawn('ssh %s@%s' % (username, ip)
机器学习和大数据挖掘
2019-07-02
4.4K0
scala调用Linux命令行
在 scala 里面存在 调用 Linux 命令行的函数: import scala.sys.process._ 执行的方法也不难: import scala.sys.process._ /** * Created by TTyb on 2017/5/22. */ object test1 { def main(args: Array[String]): Unit = { val cmd = "history" val result = cmd.!! // 查看返回的结
机器学习和大数据挖掘
2019-07-02
5.6K0
hdfs创建删除文件和文件夹
在 hadoop 中,基于 Linux 命令可以给 hdfs 创建文件和文件夹,或者删除文件和文件夹
机器学习和大数据挖掘
2019-07-02
16.2K1
xshell连接ubuntu
设置新密码,设置成功后会有提示 passwd:password updated sucessfully
机器学习和大数据挖掘
2019-07-02
2K0
Linux查看系统、核数、CPU、位数
40 个核,处理器为 Intel(R) Xeon(R) CPU E7-8891 v4 @ 2.80GHz , 64 位
机器学习和大数据挖掘
2019-07-01
8.1K0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档