一.NTP服务
NTP ( Network Time Protocol,网络时间协议)是使计算机时间同步化的- “种协议,可以使计算机对其服务器或时钟源进行同步化,提供高精准度的时间校正。安装步骤如下,查看是否存在对应服务出现如图则有对应服务
rpm -qa | grep ntp
1.1.如果安装失败则需要重新挂载YUM源,命令如下:
yum install -y ntp
mount/dev/sr0/media
2.修改ntp.conf文件,使用命令打开/etc/ntp.conf
注释掉以server开头的行,并添加如下代码:
vim /etc/ntp.conf
4.启动NTP服务,启动过程如下
systectl stop firewalld
systemctl disable firewalld
使用命令启动NTP服务:
再使用命令查看NTP服务状态:
systectl start ntpd
systemctl enable ntpd
systemctl status ntpd
二.集群时间同步
完全分布式模式由多台主机组成,各个主机的时间可能存在较大差异。如果时间差异较大,执行MapReduce程序的时候会存在问题。如果服务器能连接外网,可以不采用集群时间同步,因为服务器会定期和公网时间进行校准;如果服务器在内网环境,必须要配置集群时间同步,否则时间久了,会产生时间偏差,导致集群执行任务时间不同步。
NTP服务通过获取网络时间使集群内不同主机的时间保持一致,如果系统未安装NTP服务需要进行安装。
安装流程:NTP服务安装流程
集群时间同步流程:
1.需求
选定一个机器,作为时间服务器,所有的机器与这台服务器时间进行定时同步,生产环境根据任务对时间的准确程度要求周期同步。测试环境为了尽快看到效果,采用1分钟同步一次。
2.**时间服务器配置(必须root用户)**
(1)查看所有节点ntpd服务状态和开机自启动状态(2)修改hadoop102的ntp.conf配置文件
$ sudo systemctl status ntpd
$ sudo systemctl start ntpd
$ sudo systemctl is-enabled ntpd
修改内容如下
$ sudo vim /etc/ntp.conf
(a)修改1(授权192.168.10.0-192.168.10.255网段上的所有机器可以从这台机器上查询和同步时间)
(b)修改2(集群在局域网中,不使用其他互联网上的时间)
#解除注释
#restrict 192.168.10.0 mask 255.255.255.0 nomodify notrap
(c)添加3(当该节点丢失网络连接,依然可以采用本地时间作为时间服务器为集群中的其他节点提供时间同步)
# 打开注释
#server 0.centos.pool.ntp.org iburst
#server 1.centos.pool.ntp.org iburst
#server 2.centos.pool.ntp.org iburst
#server 3.centos.pool.ntp.org iburst
(3)修改hadoop102的/etc/sysconfig/ntpd 文件
server 127.127.1.0
fudge 127.127.1.0 stratum 10
增加内容如下(让硬件时间与系统时间一起同步)
$ sudo vim /etc/sysconfig/ntpd
(4)重新启动ntpd服务
SYNC_HWCLOCK=yes
(5)设置ntpd服务开机启动
$ sudo systemctl start ntpd
$ sudo systemctl enable ntpd
3.其他机器配置(必须root用户)
(1)关闭所有节点上ntp服务和自启动(2)在其他机器配置1分钟与时间服务器同步一次
$ sudo systemctl stop ntpd
$ sudo systemctl disable ntpd
编写定时任务如下:
$ sudo crontab -e
(3)测试:修改任意机器时间
*/1 * * * * /usr/sbin/ntpdate hadoop102
(4)1分钟后查看机器是否与时间服务器同步
sudo date -s "2022-9-30 09:18:45"
sudo date