首页标签日志数据

#日志数据

日志数据解决方案提供集日志采集、存储到日志内容搜索、统计分析等能力的一站式服务。您无需关注扩缩容等问题,五分钟便捷接入,大大降低运维及运营门槛。

消息队列常用应用场景介绍

朝雨忆轻尘

消息队列作为分布式系统中重要的组件,可以解决应用耦合,异步消息,流量削锋等系列问题

7820

分布式架构实记——消息队列(一)

慕容千语

消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件...

10530

Java消息队列总结只需一篇ActiveMQ、RabbitMQ、ZeroMQ、Kafka

慕容千语

消息队列中间件是分布式系统中重要的组件,主要解决应用解耦,异步消息,流量削锋等问题,实现高性能,高可用,可伸缩和最终一致性架构。目前使用较多的消息队列有Acti...

7320

使用云函数将CDN的日志存储到COS中

rexliao

腾讯云 · 工程师 (已认证)

本文介绍如何使用腾讯云的云函数功能,创建两个函数,实现定时将CDN的日志存储到COS中。

30350

Pipeline大数据架构

王小雷

Pipeline大数据架构,面向大数据仓库和大数据处理平台。是基于lambda的大数据架构的变种,增加了企业级服务,而并非只是大数据组件的对切,是一种更落地的方...

10430

防代码泄漏的监控系统架构与实践

FB客服

代码资源是组织的核心资源,对于敏感的代码是不希望流传到外部的,但由于各种原因还是有资源泄露出去, 对于泄露的原因先不论,因为相对比较难避免,但我们可以通过一定的...

11520

大数据技术之_20_Elasticsearch学习_02_ELK 简介以及新旧版架构介绍

黑泽君

  互联网行业中日志数据非常重要,形式也多种多样。通过日志我们可以计算请求量、流量来源分析、了解用户行为。对于故障排除也是具有重要意义,故障问题的快速排除几乎都...

6610

攻击取证之日志分析(一)

漏斗社区

首先,咱们还是老规矩,先介绍一下什么是日志分析。 日志分析----计算机、网络和其他IT系统生成审计跟踪记录或记录系统活动的日志。日志分析是对这些记录的评估,帮...

13920

日志定期清理和logrotate

zero000

财付通支付科技有限公司 · 业务运维工程师 (已认证)

常见应用服务,都会记录日志,方便问题查询和故障定位。linux系统本身也会有日志输出。

16130

linux日志循环

zero000

财付通支付科技有限公司 · 业务运维工程师 (已认证)

操作系统(Windows,Unix),应用一般都会记录日志,方便使用者常看系统或应用使用情况,或者排查故障。

15840

有赞百亿级日志系统架构设计

用户1278550

日志是记录系统中各种问题信息的关键,也是一种常见的海量数据。日志平台为集团所有业务系统提供日志采集、消费、分析、存储、索引和查询的一站式日志服务。主要为了解决日...

12340

K8S学习笔记之kubernetes 日志架构

用户1729674

通过在每个节点上运行一个日志收集的 agent 来采集日志数据,日志采集 agent 是一种专用工具,用于将日志数据推送到统一的后端。一般来说,这种 agent...

14930

Logstash读取Kafka数据写入HDFS详解

37丫37

通常日志数据除了要入ES提供实时展示和简单统计外,还需要写入大数据集群来提供更为深入的逻辑处理,前边几篇ELK的文章介绍过利用logstash将kafka的数据...

12750

Flume入门 | 基本概念及架构说明

CREATE_17

Apache Flume是一个分布式,可靠且可用的系统,可以有效地从许多不同的源收集,聚合和移动大量日志数据到集中式数据存储。

12440

Lync日志收集

杨强生

Lync管理人员在部署Lync过程中,测试或多或少会遇到一些问题,通过Lync客户端可以收集测试项的日志,如下是收集日志的方法:

9620

【数道云大数据】一站式大数据平台,大数据采集技术方法

数道云大数据

许多公司的业务平台每天都会产生大量的日志数据。对于这些日志信息,我们可以得到出很多有价值的数据。通过对这些日志信息进行日志采集、收集,然后进行数据分析,挖掘公司...

9610

【推荐收藏】六大主流大数据采集平台架构分析

钱塘数据

Flume最初是由Cloudera的工程师设计用于合并日志数据的系统,后来逐渐发展用于处理流数据事件。

19520

使用时序数据库CTSDB快速搭建日志系统

腾讯云时序数据库团队

日志数据是典型的时序数据,因此,日志场景是时序数据库CTSDB的典型应用场景。下文主要描述如何用CTSDB搭建日志系统。

10K60

消息队列设计1 何时需要

JavaEdge

消息队列通常作为企业IT系统内部通信的核心手段 具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能,成为异步RPC的主要手段之一。

15240

面向对象和面向过程最本质的区别是什么?

程序员互动联盟

这是技术面试过程中经常问的问题,真要彻底的讲明白,不是一件很容易的事情。可以简单的用C语言和C++两种语言的本质区别来具体解释,首先从设计模式来讲面向对象更加容...

19010

相关产品

  • 日志数据

    日志数据解决方案提供集日志采集、存储到日志内容搜索、统计分析等能力的一站式服务。您无需关注扩缩容等问题,五分钟便捷接入,大大降低运维及运营门槛。

扫码关注云+社区

领取腾讯云代金券