腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
让技术和时代并行
专栏作者
举报
388
文章
434053
阅读量
30
订阅数
订阅专栏
申请加入专栏
全部文章(388)
kubernetes(102)
java(44)
api(37)
容器(31)
linux(29)
容器镜像服务(25)
编程算法(22)
prometheus(20)
http(15)
go(14)
nginx(14)
devops(14)
安全(13)
web(13)
数据(13)
系统(13)
存储(12)
ip(12)
sql(11)
集群(11)
监控(11)
node.js(10)
数据库(10)
grafana(10)
部署(10)
工作(10)
jvm(9)
io(9)
it(9)
最佳实践(9)
hadoop(8)
bug(8)
deployment(8)
server(8)
服务(8)
架构(8)
配置(8)
性能(8)
负载均衡(7)
缓存(7)
jdk(7)
微服务(7)
服务网格(7)
istio(7)
kubectl(7)
yaml(7)
服务器(7)
工具(7)
互联网(7)
xml(6)
jar(6)
自动化(6)
网络安全(6)
大数据(6)
cpu(6)
service(6)
程序员(6)
实践(6)
json(5)
打包(5)
tomcat(5)
负载均衡缓存(5)
人工智能(5)
tcp/ip(5)
windows(5)
etcd(5)
max(5)
proxy(5)
测试(5)
开发(5)
内存(5)
日志(5)
软件(5)
性能优化(5)
html(4)
maven(4)
运维(4)
dns(4)
数据结构(4)
架构设计(4)
bit(4)
container(4)
db(4)
error(4)
redis(4)
root(4)
编程语言(4)
程序(4)
分布式系统(4)
软件开发(4)
线程(4)
php(3)
python(3)
android(3)
云数据库 SQL Server(3)
oracle(3)
github(3)
文件存储(3)
mongodb(3)
日志数据(3)
开源(3)
分布式(3)
ssh(3)
grep(3)
https(3)
性能测试(3)
amd(3)
assembly(3)
cli(3)
core(3)
default(3)
goroutine(3)
guava(3)
key(3)
mysql(3)
native(3)
pid(3)
ping(3)
port(3)
string(3)
tls(3)
操作系统(3)
插件(3)
产品(3)
服务端(3)
工具类(3)
管理(3)
解决方案(3)
进程(3)
镜像(3)
流量(3)
漏洞(3)
模型(3)
设计(3)
同步(3)
统计(3)
对象存储(2)
javascript(2)
ruby(2)
lua(2)
servlet(2)
云数据库 Redis(2)
ide(2)
spring(2)
神经网络(2)
深度学习(2)
mapreduce(2)
腾讯云测试服务(2)
企业(2)
压力测试(2)
爬虫(2)
正则表达式(2)
rpc(2)
udp(2)
jenkins(2)
云计算(2)
ipv6(2)
rust(2)
amazon(2)
aws(2)
break(2)
case(2)
client(2)
config(2)
dashboard(2)
dockerfile(2)
email(2)
exists(2)
fluent(2)
fluentd(2)
for循环(2)
free(2)
google(2)
host(2)
influxdb(2)
kill(2)
ldap(2)
mesh(2)
meta(2)
mq(2)
properties(2)
protobuf(2)
ps(2)
release(2)
requests(2)
return(2)
runtime(2)
security(2)
size(2)
static(2)
storage(2)
time(2)
wait(2)
wireshark(2)
编码(2)
编译(2)
低代码(2)
高性能(2)
工程师(2)
行业(2)
基础(2)
集合(2)
计算机科学(2)
加密(2)
客户端(2)
垃圾回收(2)
量化(2)
浏览器(2)
面试(2)
权限(2)
软件工程(2)
软件架构(2)
算法(2)
网络(2)
虚拟机(2)
异步(2)
异常(2)
硬件(2)
优化(2)
源码(2)
指针(2)
中间件(2)
其他(1)
c++(1)
bash(1)
jquery(1)
postgresql(1)
access(1)
mvc(1)
eclipse(1)
svn(1)
lucene/solr(1)
ubuntu(1)
centos(1)
apache(1)
bash 指令(1)
批量计算(1)
访问管理(1)
云数据库 MongoDB(1)
数据库一体机 TData(1)
cci 持续集成(1)
网站(1)
混合云解决方案(1)
黑客(1)
shell(1)
面向对象编程(1)
hashmap(1)
zookeeper(1)
自动化测试(1)
aop(1)
单元测试(1)
dubbo(1)
ddos(1)
socket编程(1)
lamp(1)
物联网(1)
安全漏洞(1)
系统架构(1)
kafka(1)
迁移(1)
groovy(1)
功能测试(1)
负载测试(1)
raft(1)
es(1)
零信任安全(1)
activemq(1)
agent(1)
akka(1)
algorithm(1)
apex(1)
app(1)
apply(1)
async(1)
asynchronous(1)
atom(1)
average(1)
azure(1)
bandwidth(1)
bitmap(1)
boot(1)
buffer(1)
build(1)
builder(1)
byte(1)
channel(1)
class(1)
clock(1)
code(1)
com(1)
command(1)
compare(1)
consul(1)
controller(1)
copy(1)
correlation(1)
count(1)
cron(1)
crud(1)
curl(1)
database(1)
date(1)
decode(1)
device(1)
dos(1)
druid(1)
dst(1)
elasticsearch(1)
endpoint(1)
excel(1)
exception(1)
execute(1)
executorservice(1)
facebook(1)
fastjson(1)
fedora(1)
file(1)
filter(1)
final(1)
flags(1)
flatbuffers(1)
fork(1)
gc(1)
gin(1)
gpt(1)
gzip(1)
haproxy(1)
hash(1)
heap(1)
histogram(1)
history(1)
hook(1)
hostname(1)
image(1)
init(1)
input(1)
int(1)
iot(1)
iptables(1)
ipv4(1)
jetty(1)
jira(1)
kibana(1)
limit(1)
line(1)
linkedin(1)
live(1)
local(1)
match(1)
memory(1)
messaging(1)
metrics(1)
min(1)
minikube(1)
mock(1)
modbus(1)
nagios(1)
nfs(1)
object(1)
offset(1)
ole(1)
operators(1)
owasp(1)
packet(1)
partial(1)
patch(1)
pdb(1)
pdf(1)
plugin(1)
point(1)
private(1)
profiler(1)
project(1)
public(1)
puppet(1)
pusher(1)
quartz(1)
queue(1)
replace(1)
request(1)
response(1)
ribbon(1)
route(1)
saas(1)
scheduler(1)
scheduling(1)
sdl(1)
select(1)
semaphore(1)
session(1)
sh(1)
socket(1)
sql语句(1)
src(1)
stdin(1)
summary(1)
super(1)
swap(1)
synchronized(1)
tcp(1)
tcpdump(1)
telnet(1)
thread(1)
thrift(1)
timeout(1)
traefik(1)
tree(1)
txt(1)
uber(1)
ui(1)
union(1)
url(1)
vi(1)
volume(1)
web3(1)
weblogic(1)
word(1)
worker(1)
xss(1)
youtube(1)
zip(1)
备份(1)
编程(1)
编辑器(1)
并发(1)
测试工具(1)
测试开发(1)
磁盘(1)
定时器(1)
定时任务(1)
动画(1)
多线程(1)
二进制(1)
工业互联网(1)
公有云(1)
关系型数据库(1)
后端(1)
后台(1)
后台开发(1)
混合云(1)
计算机(1)
计算机网络(1)
监控工具(1)
兼容性(1)
脚本(1)
接口(1)
接口文档(1)
可视化(1)
框架(1)
内核(1)
软件测试(1)
设计模式(1)
生命周期(1)
事件(1)
手机(1)
数据库设计(1)
数据中心(1)
搜索(1)
文件系统(1)
系统设计(1)
线程池(1)
协议(1)
芯片(1)
性能分析(1)
序列化(1)
需求分析(1)
压缩(1)
用户体验(1)
语法(1)
原理(1)
原型(1)
云安全(1)
主机(1)
注解(1)
状态机(1)
搜索文章
搜索
搜索
关闭
Kubernetes集群环境下fluentd日志收集方案介绍
kubernetes
存储
大数据
前段时间写了一篇日志收集方案,Kubernetes日志收集解决方案有部分读者反馈说,都是中小企业,哪有那么多资源上ELK或者EFK,大数据这一套平台比我自身服务本身耗费资源还要多,再说了,现阶段我的业务不需要格式转换,不需要数据分析,我的日志顶多就是当线上出现问题时,把我的多个节点日志收集起来排查错误。但是在Kubernetes平台上,pod可能被调度到不可预知的机器上,如果把日志存储在当前计算节点上,难免会出现排查问题效率低下,当然我们也可以选用一些共享文件服务器,比如GFS、NFS直接把日志输出到特定日志服务器,这种情况对于单副本服务没有任何问题,但是对于多副本服务,可能会出现日志数据散乱分布问题(因为多个pod中日志输出路径和名称都是一样的),下面我介绍通过CNCF社区推荐的fluentd进行日志收集。
用户5166556
2020-06-15
1.6K
0
愿意自己被监控的同时,我也可以监控别人
大数据
神经网络
深度学习
人工智能
过去警察在办案的时候,总是搜集各种证据,进行一系列的逻辑推理,来证明某个人犯案,如果未来通过人工智能,把每个人无论生活中还是工作娱乐中的片段全都一一不拉的记录下来,先不说我们愿不愿意看到这种场景,是不是从警察的角度来说,要变得更加轻松愉悦。 现实生活中,当我们早上起来去工作时,办公室里大多安装有摄像头(当然这个摄像头中的录像并不是用来监视我们的工作,只有调查某件紧急事情时,才会回访,但是从某种意义上来说,我们的确是被监视了),工作过程大都使用电脑,电脑能够记录下我们点击键盘的节凑,打开某个文档操作了多长时间
用户5166556
2019-11-28
618
0
用程序对hdfs进行操作。
大数据
jar
调试加安装了半天,怎么也没有配置好怎么通过Eclipse直接连接hdfs,最后我还是打成一个jar包放到Linux虚拟机中执行的。
用户5166556
2019-04-16
435
0
java线程中Exchanger使用
大数据
有时我们需要对元素进行配对和交换线程的同步点,使用exchange方法 返回其伙伴的对象,这时我们就需要使用线程类中的Exchanger类了,
用户5166556
2019-04-16
424
0
用java程序把本地的一个文件拷贝到hdfs上并显示进度
access
node.js
大数据
rpc
jar
把程序打成jar包放到Linux上 转到目录下执行命令 hadoop jar mapreducer.jar /home/clq/export/java/count.jar hdfs://ubuntu:9000/out06/count/ 上面一个是本地文件,一个是上传hdfs位置
用户5166556
2019-04-16
1.6K
0
could only be replicated to 0 nodes, instead of 1
node.js
hadoop
大数据
出现 这种异常是因为数据冲突造成的,可以把通过日志查看,解决办法:删掉tmp文件夹下生成的dfs文件,重新format一下,问题解决。
用户5166556
2019-04-16
462
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
立即发文
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档