腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
大数据-Hadoop、Spark
专栏成员
举报
88
文章
145537
阅读量
39
订阅数
订阅专栏
申请加入专栏
全部文章(88)
spark(18)
其他(15)
linux(14)
hadoop(10)
hive(10)
大数据(9)
sql(7)
java(6)
node.js(6)
TDSQL MySQL 版(5)
http(5)
kubernetes(5)
hbase(5)
数据库(4)
云数据库 SQL Server(4)
yarn(4)
zookeeper(4)
打包(3)
apache(3)
容器镜像服务(3)
tcp/ip(3)
python(2)
javascript(2)
bash(2)
scala(2)
ubuntu(2)
专用宿主机(2)
容器(2)
编程算法(2)
存储(2)
html5(2)
jvm(2)
ssh(2)
面向对象编程(2)
windows(2)
https(2)
微服务(2)
kafka(2)
image(2)
png(2)
负载均衡(1)
go(1)
html(1)
云数据库 Redis(1)
jar(1)
tomcat(1)
maven(1)
负载均衡缓存(1)
bash 指令(1)
spring(1)
访问管理(1)
命令行工具(1)
es 2(1)
人工智能(1)
网站(1)
日志数据(1)
缓存(1)
shell(1)
网络安全(1)
jdk(1)
yum(1)
dns(1)
jdbc(1)
rpc(1)
kernel(1)
gcc(1)
kerberos(1)
数据分析(1)
数据结构(1)
nat(1)
emr(1)
flink(1)
file(1)
jmx(1)
list(1)
ls(1)
memory(1)
output(1)
sort(1)
time(1)
日志(1)
搜索文章
搜索
搜索
关闭
Linux的一些知识
kernel
linux
:wq 强制性写入文件并退出。即使文件没有被修改也强制写入,并更新文件的修改时间。
sparkle123
2021-03-07
493
0
Linux /var/log下的各种日志文件
https
网络安全
linux
last等日志是二进制文件,无法直接修改。所以清除的最简单方式是清空日志文件本身。
sparkle123
2021-01-21
1.8K
0
Spark任务日志
sql
spark
linux
SparkListenerLogStart SparkListenerBlockManagerAdded SparkListenerEnvironmentUpdate SparkListenerApplicationStart //N个 SparkListenerExecutorAdded //N个 SparkListenerBlockManagerAdded org.apache.spark.sql.execution.ui.SparkListenerSQLExecutionStart SparkListenerJobStart //N个 SparkListenerStageSubmitted //N个 SparkListenerTaskStart SparkListenerTaskEnd //N个
sparkle123
2021-01-13
456
0
ReadProcessor read fields took xx ms
node.js
hadoop
大数据
linux
cd /opt/log/xdp/hadoop-hdfs/hdfs_datanode
sparkle123
2021-01-08
981
0
2018-08-01-日报
linux
1、研究了数据治理、数据质量两份文档,整理了产品的功能需求文档, 使用在线工具将pdf转化为word,使用工具将chm转为word,转化效果还挺好的。 2、发现两个linux命令: 执行以下命令,查看内存是否不足。 free -m 当内存不足时,执行以下命令,释放空闲内存。 echo 3 > /proc/sys/vm/drop_caches 3、截图前后对比:
sparkle123
2018-08-15
344
0
本地Eclipse提交MR程序到Yarn
linux
windows
yarn
node.js
1、一般地,从Windows本地的Eclipse提交程序到yarn,会报如下错误: Diagnostics: Exception from container-launch. Container id: container_1526537597068_0006_02_000001 Exit code: 1 Exception message: /bin/bash: line 0: fg: no job control Stack trace: ExitCodeException exitCode=1: /
sparkle123
2018-07-04
541
0
Linux解决方案:No space left on device
linux
spark
字面上理解,磁盘上没有多余的空间了。 1/先用df命令查看当前计算器磁盘空闲情况 df -a image.png /dev/mapper/vg_spark01-lv_root文件系统占用了95%
sparkle123
2018-06-19
2.4K
0
Flume整合Kafka实时收集日志信息
linux
Linux系统查看文件内容的特殊方法: 最基本的有cat和less,more,如果有特殊的要求的话。 1/如果只想看文件的前5行,可以使用head命令,如: head -5 /etc/passwd 2/如果想查看文件的后10行,可以使用tail命令,如: tail -10 /etc/passwd 3/参数-f使tail不停地去读最新的内容,这样有实时监视的效果: tail -f /var/log/messages 定时调度工具的使用 1/各种工具聚集的网站:https://tool.lu/cront
sparkle123
2018-06-14
1.2K
0
Linux本地Yum源制作
linux
yum
操作之前准备好以下环境: VMWare Workstation SecureCRT CentOS-6.7-x86_64-minimal.iso //用来安装minimal版本的Linux虚拟机
sparkle123
2018-04-26
6.9K
0
Linux环境基本设置
linux
dns
安装好Linux系统后,通常要做一些基本设置,比如网络,防火墙等。 1.修改ip地址,执行如下命令: vi /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0 TYPE=Ethernet ONBOOT=yes #开机使用 BOOTPROTO=static #ip地址设置为静态 IPADDR=192.168.92.82 #Linux服务器ip地址 GATEWAY=192.168.92.1 #网关地址 NETMASK=255.
sparkle123
2018-04-26
3.8K
0
Linux NAT网络设置访问外网
linux
nat
1.查看本地实体机的VMNet8的属性, 物理机VMNet8信息.png 实体机的网络信息 本地实体机的IP4地址:192.168.92.2 子网掩码: 255.255.25
sparkle123
2018-04-26
7.9K
0
Linux上安装MySql
linux
云数据库 SQL Server
数据库
准备安装环境 CentOS6.7 Final MySQL-5.5.48-1.linux2.6.x86_64.rpm-bundle.tar 上传MySQL安装包到CentOS上 执行rz,就可以从本地选择要上传的文件了。 默认上传至服务器的usr/local目录下 设置执行权限chmod u+x MySQL-5.5.48-1.linux2.6.x86_64.rpm-bundle.tar 执行解压命令 tar -xvf MySQL-5.5.48-1.linux2.6.x86_64.rpm-bundle.t
sparkle123
2018-04-26
3.1K
0
Linux上安装Tomcat后,远程访问不了
linux
tomcat
apache
1.上传apache-tomcat-7.0.82.tar.gz到Linux上 2.解压tomcat tar -zxvf apache-tomcat-7.0.82.tar.gz -C /usr/local/ 3.启动tomcat /usr/local/apache-tomcat-7.0.82/bin/startup.sh 4.查看tomcat进程是否启动,执行 jps 4085 Jps 3698 Bootstrap 5.查看tomcat进程端口 netstat -anpt | grep 3698
sparkle123
2018-04-26
4K
0
Linux下redis下载,编译,安装
linux
云数据库 Redis
gcc
1.在Linux系统的~/Downloads目录下,下载redis3.0.5。 wget http://download.redis.io/releases/redis-3.0.5.tar.gz 2.解压文件,并创建软件连接 tar -zxvf redis-3.0.5.tar.gz -C ln –s redis-3.0.5/ redis 3.编译redis源码 cd ~/Downloads/redis make(先安装gcc) Redis安装报错error:jemalloc/jema
sparkle123
2018-04-26
7.3K
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档