日志服务器是企业中重要的一环，它可以从各种设备和应用程序中收集日志，并将它们归档、过滤和分析。可以帮助管理员快速诊断和解决问题，同时也可以帮助企业满足安全合规性要求（一般要求日志保存180天）。之前介绍的Kiwi Syslog Server 和今天介绍的Syslog Watcher都是其中的佼佼者。
如果你的数据中心全是 Linux 服务器，而你就是系统管理员。那么你的其中一项工作内容就是查看服务器的日志文件。但是，如果你在大量的机器上去查看日志文件，那么意味着你需要挨个去登入到机器中来阅读日志文件。如果你管理的机器很多，仅这项工作就可以花费你一天的时间。
如果你的数据中心全是Linux服务器，而你就是系统管理员。那么你的其中一项工作内容就是查看服务器的日志文件。但是，如果你在大量的机器上去查看日志文件，那么意味着你需要挨个去登入到机器中来阅读日志文件。如果你管理的机器很多，仅这项工作就可以花费你一天的时间。
无论是Unix、Linux、FreeBSD、Ubuntu，还是路由器、交换机，都会产生大量的日志，而这些，一般会以syslog的形式存在。在RFC 3164中定义了syslog是一种日志协议，syslog数据包的大小为1024字节，包含Facility, Severity, Hostname, Timestamp和Message信息。syslog服务器默认使用UDP 514号端口。简单的说，syslog可以告诉管理员:谁（Facility)，什么时间(Timestamp)，什么地方(Hostname)做了什
syslog服务器可以用作一个网络中的日志监控中心，所有能够通过网络来发送日志的设施（包含了Linux或Windows服务器，路由器，交换机以及其他主机）都可以把日志发送给它。 通过设置一个syslog服务器，可以将不同设施/主机发送的日志，过滤和合并到一个独立的位置，这样使得你更容易地查看和获取重要的日志消息。
环境:CentOS 5.3 x32 日志服务器环境:nginx php mysql rsyslog rsyslog-mysql loganalyzer 日志客户端环境:rsyslog 日志服务器 192.168.0.100 日志客户端服务器 192.168.0.101
syslog-ng 的不足是文档并不容易梳理。但是，我已经解决了这个问题，我可以通过这种方法马上进行安装和配置 syslog-ng。下面我将在 Ubuntu Server 16.04 上示范这两种方法：
Kiwi Syslog Server 是一款经济实惠的 syslog 管理工具，可以接收跨网络设备（路由器、交换机、防火墙等）、服务器（Windows 、Linux服务器）的日志，对日志集中存储和管理以及报警。
rsyslog是一个开源工具，被广泛用于Linux系统以通过TCP/UDP协议转发或接收日志消息。rsyslog守护进程可以被配置成两种环境，一种是配置成日志收集服务器，rsyslog进程可以从网络中收集其它主机上的日志数据，这些主机会将日志配置为发送到另外的远程服务器。rsyslog的另外一个用法，就是可以配置为客户端，用来过滤和发送内部日志消息到一台可以路由到的远程syslog服务器上
由于企业内部权限管理启用了sudo权限管理，但是还是有一定的风险因素，毕竟运维、开发等各个人员技术水平、操作习惯都不相同，也会因一时失误造成误操作，从而影响系统运行
# mysql -u syslog -h 192.168.2.11 -p # 输入密码123456，测试是否能正常访问
syslog是Linux系统默认的日志守护进程，默认的syslog配置文件是/etc/syslog.conf文件。syslog守护进程是可配置的，它允许人们为每一种类型的系统信息精确地指定一个存放地点。比较 syslog ，syslog-ng 具有众多高级的功能：更好的网络支持，更加方便的配置，集中式的网络日志存储，并且更具有弹性。比如，使用syslogd时，所有的iptables日志与其他内核日志一起全部存储到了kern.log文件里。Syslog-ng则可以让你有选择性的将iptables部分分出到另外的日志文件中。Syslogd仅能使用UDP协议，Syslog-ng 可以使用UDP和TCP协议。所以我们可以在加密的网络隧道中传输日志到集中日志服务器。
我们可以通过集中式日志服务器将多台机器的日志收集在一个日志服务器，然后通过脚本或者其他方式去分析，但是真正做过运维的小伙伴明白，日子收集在硬盘上，硬盘的空间有限且大文件分析起来IO压力超级大，分析日志需要高超的技术，一般运维人员分析起来会很困难，更无法实时的去查看某个机器的日志。这样的话我们的日志收集就变成了真正意义上的收集了，收集起来如何利用就变成了一个难题，总结一下主要的问题就是以下几点：
Linux系统内核和许多程序会产生各种错误信息、警告信息和其他的提示信息,这些信息对管理员了解系统的运行状态是非常有用的,所以应该把它们写到日志文件中去,完成这个过程的程序就是syslog,syslog可以根据日志的类别和优先级将日志保存到不同的文件中.
并安装logstash-output-syslog插件以及logstash-input-gelf(自带，无需单独下载插件）
JumpServer 的配置文件的默认存储位置位于：/opt/jumpserver/config/config.txt
②选择自定义配置——计费模式为“按量付费”——地域选择“北京”——可用区选择“随机可用区”——网络选择“默认”即可
中央日志服务器和Tomcat节点均向同一个时钟源（例如：pool.ntp.org）进行对时即可。说明：本小节下面命令均以root用户执行，并且在中央日志服务器和Tomcat节点均要执行。
为满足《网络安全法》和《网络安全等级保护》针对安全日志审计的要求，遂作者在对比可多款( syslog、syslog-ng和rsyslog )的日志记录服务器工具后，最终选择了 rsyslog 日志工具来完成企业内部日志收集，并采用 Loki & Promtail 进行日志采集，最后使用Grafana 通过 LogQL 语法进行采集数据查询以及展示，此文深入浅出讲解了从rsyslog初识到实践配置使用，可以让各位运维的同道中人可以快速为企业搭建收集各类网络日志服务器，以满足合规要求！
在本教程中，我们将在Ubuntu 14.04上重新安装Elasticsearch ELK Stack，即Elasticsearch 1.7.3，Logstash 1.5.4和Kibana 4.1.1。我们还将向您展示如何对其进行配置，以便在集中位置收集和可视化系统的系统日志。Logstash是一个用于收集，解析和存储日志以供将来使用的开源工具。Kibana是一个Web界面，可用于搜索和查看Logstash已编入索引的日志。这两个工具都基于Elasticsearch。
如下图所示我们需要将区域A的GrayLog采集的交换机/Linux服务器日志转发到右侧总部区域的GrayLog上
概述 不怕出问题，就怕出问题找不到原因 运维团队一般会有个需求就是记录运维或者开发同事在服务器上的操作记录，比如进行一些常规审核或者是服务器被黑了、服务器日志被删的情况需要知道发生过什么事情，今天和大家分享下我们现在的服务器的shell和mysql操作日志记录的DIY方案。 团队内部之前有测试过一些堡垒机硬件，但终端操作方面不够人性化，不够灵活，而且价格昂贵，硬件容易形成单点故障。当然也接触过一些开源的方案，比如可以直接用ttyrec对终端进行录制，并且支持文本匹配，但是在实际使用中发现过严重bug，
笔记内容：搭建ELK日志分析平台——搭建kibana和logstash服务器 笔记日期：2018-03-03
日志文件是包含系统本身已记录的一组记录（或事件列表）的文件。使用日志文件，系统管理员可以跟踪在特定日期或特定时间发生的情况。管理员通常将日志文件用于故障排除。日志文件是自动生成的，并保存在公共目录-/ var / log /下。我们还可以将消息手动添加到Linux系统日志文件中。例如，设置日志服务器后，您可能要检查日志服务器是否正常运行。为此，我们可以在日志文件中手动添加一些条目以测试日志服务器。这是logger命令派上用场的地方。
前几天在看apue第16章关于socket的例子，就是一个非常典型的socket服务器，关键代码如下：
在本教程中，我们将介绍在Ubuntu 16.04上安装Elasticsearch ELK Stack（即Elasticsearch 2.3.x，Logstash 2.3.x和Kibana 4.5.x）。我们还将向您展示如何使用Filebeat 1.2.x将其配置为在集中位置收集和可视化系统的syslog。Logstash是一个用于收集，解析和存储日志以供将来使用的开源工具。Kibana是一个Web界面，可用于搜索和查看Logstash已编入索引的日志。这两个工具都基于Elasticsearch，用于存储日志。
在本教程中，我们将介绍在CentOS 7上安装Elasticsearch ELK Stack，即Elasticsearch 2.2.x，Logstash 2.2.x和Kibana 4.4.x. 我们还将向你展示如何使用Filebeat 1.1.x将其配置为在集中位置收集和可视化系统的syslog。 Logstash是一个用于收集，解析和存储日志以供将来使用的开源工具。 Kibana是一个Web界面，可用于搜索和查看Logstash已编入索引的日志。 这两个工具都基于Elasticsearch，用于存储日志。
版权声明：本文为木偶人shaon原创文章，转载请注明原文地址，非常感谢。 https://blog.csdn.net/wh211212/article/details/54015645
集中日志记录在尝试识别服务器或应用程序的问题时非常有用，因为它允许您在单个位置搜索所有日志。它也很有用，因为它允许您通过在特定时间范围内关联其日志来识别跨多个服务器的问题。本系列教程将教您如何在CentOS上安装Logstash和Kibana，然后如何添加更多过滤器来构造您的日志数据。
为什么要使用日志 在生产环境中我们可能需要一个较为完整的日志系统来查看运行中主机服务的状态和所作出的操作，我们可以在较大型的网络架构中使用ELK来实现对日志的收集、检索、前端显示，但是中小型架构中使用rsyslog足以对所有服务器的日志进行收集和检索来达到实时分析数据流量的目的。 本文目标 使用rsyslog将两台主机的日志信息存储到MySQL数据库中，并且编译安装Loganalyzer对MySQL中的日志信息使用httpd+php在前端进行展示。 实验拓扑图 实验环境 主机名
在接入网络安全设备例如防火墙，上网行为管理，IPS等设备和数通设备（交换机，路由器）的Syslog日志时, 有些网络安全设备和数通设备只能将Syslog日志发送到日志服务器的UDP 514端口，无法自定义修改为其他端口
在本教程中，我们将介绍如何在Ubuntu 14.04上安装Graylog v1.3.x（有时称为Graylog2），并将其配置为在集中位置收集系统的syslog。Graylog是一个功能强大的日志管理和分析工具，具有许多用例，从监控SSH登录和异常活动到调试应用程序。它基于Elasticsearch，Java和MongoDB。
日志的作用、分类、管理、轮转和级别 日志的作用： 用于记录系统、程序运行中发生的各种事件 通过阅读日志，有助于诊断，解决系统故障 日志文件的分类： 内核及系统日志：由系统服务 rsyslog 统一管理，日志格式相似 用户日志：记录系统用户登录及退出系统的相关信息 程序日志：由各种应用程序独立管理的日志文件，格式不统一 日志管理策略 日志也并不是完全可靠的，高级的黑客在入侵系统后，会删除相应的日志记录，因此需要做好日志的管理工作： 日志的备份和归档 延长日志的保存期限 控制日志的访问权限 集中管理日志。比如，将服务器的日志文件发送到统一到日志文件服务器，这样便于日志信息的统一收集、整理和分析，还可以杜绝日志信息的意外丢失、恶意修改和删除 日志的轮转和切割 随着时间的推移，日志文件肯定会越来越大，而且这个趋势是呈线性增长。所以，需要对之前的日志文件做一些处理。日志轮转和切割指的是实现对当前日志归档，开始新的日志，删除早期的日志。Linux中，日志轮转和切割这个服务是由 logrotate 提供的。logrotate这个程序的目录：/etc/cron.daily/logrotate 。logrotate 是作为 corn 的一个每日任务，周期性执行的。它具备自动轮转、压缩、搬迁 和 邮件通知到日志系统的多项功能。每一个日志文件都可以按照每天、每周、每月周期性处理，或是增长到多大而触发处理。 日志消息的级别 日志消息的级别 level等级 状况 0 EMERG（紧急） 会导致主机系统不可用的情况 1 ALERT （警告） 必须马上采取措施解决的情况 2 CRIT （严重） 比较严重的情况 3 ERR （错误） 运行出现错误 4 WARNING (提醒) 可能会影响系统功能的事件 5 NOTICE (注意) 不会影响系统但值得注意 6 INFO （注意） 一般信息 7 DEBUG（调试） 程序或系统调试信息等
由于nginx功能强大，性能突出，越来越多的web应用采用nginx作为http和反向代理的web服务器。而nginx的访问日志不管是做用户行为分析还是安全分析都是非常重要的数据源之一。如何有效便捷的采集nginx的日志进行有效的分析成为大家关注的问题。
业务服务器免装插件，使用rsync+nxlog同步+采集应用日志并接入到GrayLog5.1
log_destination (string) PostgreSQL支持多种方法来记录服务器消息，包括stderr、csvlog和syslog。在 Windows 上还支持eventlog。设置这个参数为一个由想要的日志目的地的列表，之间用逗号分隔。默认值是只记录到stderr。这个参数只能在postgresql.conf文件中或在服务器命令行上设置。
在本教程中，我们将介绍在CentOS 7上安装Elasticsearch ELK Stack，即Elasticsearch 1.7.3，Logstash 1.5.4和Kibana 4.1.1。我们还将向您展示如何对其进行配置，以便在集中位置收集和可视化系统的系统日志。Logstash是一个用于收集，解析和存储日志以供将来使用的开源工具。Kibana是一个Web界面，可用于搜索和查看Logstash已编入索引的日志。这两个工具都基于Elasticsearch。
Docker不仅改变了应用程序的部署方式，还改变了日志管理的工作流程。容器将日志写入控制台（stdout / stderr），而Docker Logging Drivers将日志转发到目的地，而不是将日志写入文件。快速检查Docker GitHub问题表明用户在处理Docker日志时遇到各种问题。使用Docker管理日志似乎很棘手，需要更深入了解Docker日志驱动程序实现和替代方案，以克服人们报告的问题。
1.背景与需求介绍 抓取流量最流行的工具就是Wireshark，在Windows上Wireshark的GUI界面很酷，但对于在linux和mac用惯了tcpdump用户来说，用命令行的tcpdump更直接便捷，Windows上有没有类似tcpdump的抓包工具呢？答案是有的，就是windump，底层是基于winpcap库的命令行工具。 大体的背景是这样的，有Windows服务器运行了一个较定制化的闭源的认证服务，因为这是一个历史遗留下来的服务，并没完备的日志输出机制，无法从现有的日志统计出用户流量数据，在服
在本教程中，我们将介绍如何在CentOS 7上安装Graylog v1.3.x（有时称为Graylog2），并将其配置为在集中位置收集系统的syslog。Graylog是一个功能强大的日志管理和分析工具，具有许多用例，从监控SSH登录和异常活动到调试应用程序。它基于Elasticsearch，Java和MongoDB。
在昨天的推文中，有朋友留言想要看看kiwi syslog的文章，并且是win系统下，今天安排一下：
Rsyslog的全称是 rocket-fast system for log，它提供了高性能，高安全功能和模块化设计。rsyslog能够接受从各种各样的来源，将其输入，输出的结果到不同的目的地。rsyslog可以提供超过每秒一百万条消息给目标文件。
从2013年开始接触Zabbix，之前在一家互联网公司任职监控运维，后来在"中国太平洋保险（集团）有限公司"任职，研究大体量环境下的Zabbix监控系统，
在 Linux 系统上管理日志文件可能非常容易，也可能非常痛苦。这完全取决于你所认为的日志管理是什么。
除了网络通信外，服务器程序还必须考虑许多其他细节问题，零碎，但基本上都是模板式的。
了解组织生成的数百万条日志行是一项艰巨的挑战。一方面，这些日志行提供了应用程序性能，服务器性能指标和安全性的视图。另一方面，日志管理和分析可能非常耗时，这可能会妨碍采用这些日益必要的服务。
本文介绍了华为交换机日志的定义、分类以及输出方法，通过配置举例详细说明了两种常用的日志输出方法。
作者：且飙丶且珍惜 来源： http://blog.csdn.net/dextrad_ihacker/article/details/51930998 除了网络通信外，服务器程序还必须考虑许多其他细节问题，零碎，但基本上都是模板式的。 ———引 Linux服务器程序一般以后台形式运行。后台程序又称守护进程。它没有控制终端，因而也不会意外接受用户输入。守护进程的父进程一般是init进程（pid=1）。 Linux服务器程序通常有一套日志系统，它至少能输出日志到文件，有的高级服务器可以输出日志到专门的UDP
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
