我们这里使用 hadoop-senior.zuoyan.com 这台主机作为时间服务器
设置时区为亚洲/上海 timedatectl set-timezone Asia/Shanghai
SQL> SELECT TZ_OFFSET(SESSIONTIMEZONE), TZ_OFFSET(DBTIMEZONE) FROM DUAL;
在接入集团一个平台的时候，发现录制某个接口到测试环境回放，发现接口入参一致，一个start_day 一个end_day，但回放的时候会多调用一次数据库查询，很是奇怪；
【讲在前面】 Hadoop完全分布式集群的搭建需要多台虚拟机，每台虚拟机单独安装配置比较麻烦，因此我们可以在VMware中创建一个虚拟机后完成公共的基础配置然后直接创建完整克隆，这样效率比较高。 Hadoop完全分布式集群的搭建是典型的主从架构，即一台master节点多台slave节点，这里我采用三台虚拟机，一台作为master节点，另外两台作为slave1节点和slave2节点。
安装jdk：必须把jdk放在/usr/java/目录下，不然启动cloudera-scm-server会报错
本期主要介绍 Hadoop HA 完全分布式模式的部署。HA 完全分布式模式（Highly Available Fully-Distributed Mode）是生产环境上最常见的 Hadoop 安装部署方式。HA 即高可用，是指当当前工作中的机器宕机后，会自动处理这个异常，并将工作无缝地转移到集群中的其他备用机器上去，以保证服务的高可用性。
时间同步这个需求在很多地方都有。比如安装cm和cdh的话，需要ntp时间同步，否则会出现红色警告
ntp服务器顾名思义就是时间同步服务器(Network Time Protocol)，时间同步对于计划备份、入侵检测记录、分布式任务调度或者事务订单管理来说都是非常有必要的日常任务。
rsync是一个提供快速增量文件传输的开源工具。其基于GNU General Public License 发布，目前主要有 Wayne Davison （http://opencoder.net/）维护。
《CDH5部署三部曲》共三篇文章，对CDH5.7.2版本的准备、部署、启动、设置等环节进行实战，内容如下：
网络时间协议（英语：Network Time Protocol，缩写：NTP）是在数据网络潜伏时间可变的计算机系统之间通过分组交换进行时钟同步的一个网络协议，位于OSI模型的应用层。自1985年以来，NTP是目前仍在使用的最古老的互联网协议之一。NTP由特拉华大学的David L. Mills设计。 NTP意图将所有参与计算机的协调世界时（UTC）时间同步到几毫秒的误差内。它使用Marzullo算法的修改版来选择准确的时间服务器，其设计旨在减轻可变网络延迟造成的影响。NTP通常可以在公共互联网保持几十毫秒的误差，并且在理想的局域网环境中可以实现超过1毫秒的精度。不对称路由和拥塞控制可能导致100毫秒（或更高）的错误。 该协议通常描述为一种主从式架构，但它也可以用在点对点网络中，对等体双方可将另一端认定为潜在的时间源。发送和接收时间戳采用用户数据报协议（UDP）的端口123实现。这也可以使用广播或多播，其中的客户端在最初的往返校准交换后被动地监听时间更新。NTP提供一个即将到来闰秒调整的警告，但不会传输有关本地时区或夏时制的信息。 当前协议为版本4（NTPv4），这是一个RFC 5905文档中的建议标准。它向下兼容指定于RFC 1305的版本3。
从下面的网盘地址 或者 360 软件管家搜索 VMware Workstation 都可下载：
背景 当服务器多了，时间准确与否，一致与否是个大问题。虽然这个问题总是被忽略，但是统一一致的时间是很有必要的。下面说一下在局域网内配置Linux时间服务器的方法。
注意：若不加上-u参数， 会出现以下提示：no server suitable for synchronization found
网络时间同步协议(NTP)是时间同步的技术基础。Linux操作系统都默认安装了ntp组件。如果服务器能访问外网并且配置了DNS服务器地址，直接ntpdate 0.cn.pool.ntp.org就可以同步外网时间。但很多服务器出于安全考虑，虽然通外网，但没有配置DNS，这时需要直接从时间服务器的ip地址同步时间了。可以使用阿里云（ntp1.aliyun.com）的时间服务器ip直接同步，ntpdate 120.24.81.91，或者清华的时间服务器84.16.73.33。 服务器第一次同步时间显示如下
scp /root/.ssh/authorized_keys node02:/root/.ssh
在多主机协同工作时，各个主机的时间同步很重要，时间不一致会造成很多重要应用的故障，例如：加密协议、日志，集群等。利用NTP(Network Time Protocol)协议网络中的各个计算机时间达到同步。
公司领导反馈：无权限登录系统，临近下班无奈只能吃过晚饭后回工位排查问题，一直排查到20:30多无法查出问题根源。
目前国内电网逐步形成以大机组,超高压和高自动化为主要特征的现代化大电网,电网运行瞬息万变,发生事故后更要掌握实时信息及时决策处理,这些都离不开统一的时间基准.时间同步主要用于电力系统各类自动化及继电保护装置,这些装置包括:调度自动化系统,电能量计费系统,事件顺序记录装置,故障录波器,微机继电保护装置,电厂,变电站监控系统等。当前在国内电力系统中,时间同步的应用方式是接收导航卫星发送的无线标准时间信号并采用符合相应规范要求的装置作为统一时钟信号源,再由统一时钟信号源向电网中各类装置提供标准时间,时标的输出主要包括1PPS输出,1PPM输出,IRIG-B输出,NTP/SNTP,PTP等.
1. 注释掉原来的restrict default ignore这一行，这一行本身是不响应任何的ntp更新请求，其实也就是禁用了本机的ntp server的功能，所以需要注释掉。
在 Windwos 中，系统时间的设置很简单，界面操作，通俗易懂，而且设置后，重启，关机都没关系。系统时间会自动保存在 BIOS 时钟里面，启动计算机的时候，系统会自动在 BIOS 里面取硬件时间，以保证时间的不间断。但在 Linux 下，默认情况下，系统时间和硬件时间并不会自动同步。在 Linux 运行过程中，系统时间和硬件时间以异步的方式运行，互不干扰。硬件时间的运行，是靠 BIOS 电池来维持，而系统时间，是用 CPU Tick 来维持的。在系统开机的时候，会自动从 BIOS 中取得硬件时间，设置为系统时间。
问题描述: 上一篇就是NameNode 的HA 部署完成，但是存在问题，问题是如果 主NameNode的节点宕机了，还是需要人工去使用命令来切换NameNode的Acitve 这样很不方便，所以
找一个机器，作为时间服务器，所有的机器与这台机器时间进行定时的同步。
手表用久了，会出现时间方面的误差。机器磨合久了，也会出现配合方面的间隙。服务器也是如此，运行的久了之后，自然而然的会出现系统时间方面的误差。今天告诉大家用指令去设置和同步时间的办法。
各项新的数据业务，如电子商务、多媒体通信、IP电话等都是电信业务发展的新增长点，而传统业务也存在多家企业互连互通和网间结算问题，并且通信业务所涉及的安全、认证及计费等，都与一个共同的标志“时间”有着密切联系。精确的“时间”标志对于现代通信网显得越来越重要，因此，在通信网中引入新的支撑网—时间同步网是完全必要的。
修改ntp server (仅在master即可) 的/etc/ntp.conf
zookeeper里的每一个节点叫znode，他们既是目录的功能也有自己的文本信息。 下面进行的集群配置并没有实现高可用效果（内存空间有限） 此次搭建要准备三台虚拟机，准备必备jar包。
准备两台服务器，一台用作k8smaster，一台用作k8snode。示例系统为Centos7。
从 docker 下载 docker-desktop (opens new window)，并完成安装
fontpackages-filesystem-1.41-1.1.el6.noarch
eg: bigdata-cdh01.test.com. bigdata-cdh02.test.com. bigdata-cdh03.test.com
刚开始多数项目用单机数据库就够了，随着服务器流量越来越大，面对的请求也越来越多，我们做了数据库读写分离， 使用多个从库副本（Slave）负责读，使用主库（Master）负责写，master和slave通过主从复制实现数据同步更新，保持数据一致。slave 从库可以水平扩展，所以更多的读请求不成问题
本次实验是基于腾讯CVM（腾讯云虚拟主机）部署的TBase企业版集群，需要部署开源版集群的请移步开源部署方案
环境：两台联想R680的物理机搭建一套2节点RAC，数据库版本为ORACLE 11.2.0.4
一、实验拓扑图 二、实验要求 （1）在主服务器搭建时间同步服务器。从服务器进行时间同步。mysql安装过程略。 （2）配置主从复制 （3）搭建amoeba实现mysql读写分离 步骤： 1、根据拓扑图
在我们依赖文件服务器、邮件服务器、互联网网关以及其它无数网络设备的背后，存在一个基本的信任就是：网络里的计算机都有精确的时间。伴随着企业计算的引人注目的增长以及真正类似UNIX的多任务机制在PC上实现，相应地，企业内产生了同步所有计算机/工作站的需求。
一、首先准备linux环境 使用了两个虚拟机系统 版本为Centos 7 ip地址固定为192.168.194.128 192.168.194.129
如上图 准备好该准备的食材（ps：其中的hadoop-3.1.2-src更改为hadoop-3.1.2
版权声明：本文为耕耘实录原创文章，各大自媒体平台同步更新。欢迎转载，转载请注明出处，谢谢
找一个机器，作为时间服务器，所有的机器都和这台机器时间进行定时的同步，比如每隔十分钟，同步一次时间。
随着金融市场的不断发展、信息化程度的不断提高，金融信息系统构成已逐渐完成量变到质变的转化，各个系统不再独自处理各自业务而是趋向协同工作，逐渐形成信息系统生态，为快速的金融创新迭代提供基础支撑。要确保信息系统生态稳定、严谨运行，规避信息流动过程中时间不一致导致的技术漏洞及可能造成的商业纠纷，就要确保时间标尺的高度准确和统一。
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-F5x3IfHz-1624685690449)(assets/1558957195965.png)]
千呼万唤始出来，这一篇感觉写了好久，总想写的清楚明白简洁，但是还是洋洋洒洒写了好多，希望大家喜欢吧！本来打算将这一篇文章是放在性能测试中讲解和分享的，但是有的童鞋或者小伙伴们私下问的太多了，实在是忍不了也解答烦了，索性就在这里分享一下吧。权当参考，但是希望对大家有所帮助。
在一个生产系统中，通常都需要用高可用方案来保证系统的不间断运行。PostgreSQL 本身不支持任何多主群集解决方案，例如MySQL或Oracle。尽管如此，仍有许多商业和社区产品提供此实现，以及其他产品，例如PostgreSQL的复制或负载平衡。
日志聚集功能好处：可以方便的查看到程序运行详情，方便开发调试。 ==注意：开启日志聚集功能，需要重新启动 NodeManager 、ResourceManager 和 HistoryServer。 == 开启日志聚集功能具体步骤如下：
Cloudera Manager(简称CM)是Cloudera公司开发的一款大数据集群安装部署利器，这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能，使得安装集群从几天的时间缩短在几小时以内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。所以为了同学们能够快速搭建该平台，写出以下教程仅供参考，有什么不足之处请提出，加以改正。 开始之前其实有很多的工作要做，比如配置IP地址、关闭防火墙、配置SSH免密登录等，这些都是比较常规的环境配置，这里不再赘述，不懂者自行百度。 附上大数据“前世今生”的一篇文章给大家，希望大家对大数据有更多的了解，大数据的前世今生：诞生、发展、未来？
参考：https://www.cnblogs.com/boboooo/p/13891447.html
作为一个开发人员，日常的工作、学习，经常需要用到各种Linux，但是我们不可能去找大量(土豪跳过)的物理机来供我们学习，因此使用虚拟机进行开发及学习是我们常用的一种方式；下面带你基于VirtualBox搭建Linux(CentOS)虚拟机环境；
在三台机器上分别启动etcd服务.CLUSTER_IPS=(192.168.1.158 192.168.1.60 192.168.1.24)这是一个ip数组.
领取专属 10元无门槛券
手把手带您无忧上云
