上一篇 下一篇 分享链接 返回 返回顶部

服务器时间怎么同步

发布人: 发布时间: 阅读量:42

服务器时间怎么同步

机器时间慢了三分钟,最先出问题的往往不是监控,而是登录。验证码对不上,证书校验报错,日志里两条本该有因果的记录排反了序。时间这件事平时没人看,坏了之后每一处都在报错。

差多少算严重

十几毫秒的抖动属于正常,每台机器都有,不值得管。差到几秒,分布式系统里的锁、租约、消息顺序开始出问题,表现出来是偶发的重复扣款或者任务重复执行,查起来极难。

差到五分钟,绝大多数双因素验证直接失效,因为 TOTP 的有效窗口就那么宽,前后各三十秒,超出就是无效码。用户会说验证码明明是对的,你复现不了。具体差多少会被业务感知,我说不准,跟实现有关,但超过三十秒基本都会出问题。

差到几小时,HTTPS 握手会以证书未生效或者已过期失败,而证书本身完全没问题。查证书链、查中间证书、查 SNI,全查一遍才发现是系统时间错了三年。

我一般把五百毫秒当红线。过了就先修同步,别去翻业务代码,那是在错误的方向上花时间。

时间源选哪个

国内机器优先用运营商或者云厂商的内网 NTP 地址。公网 pool.ntp.org 在国内的可用性时好时坏,123 端口被限速甚至被丢的情况不少,出口做了策略的网络里更常见。

有内网源就用内网,一跳可达,抖动小,也不受出口策略影响。没有的话用国内的公共授时地址,配两到四个,再多没意义,只是增加选源开销,源质量参差时反而更容易选中差的。我自己更愿意只留两个源,一个内网一个备用,多了反而不好判断哪个在起作用。

物理机可以上 GPS 或者北斗授时卡,精度到微秒级。除非做的是撮合交易或者计量计费,这笔钱花得没必要。自己攒机器的话,定制高配物理机 那类方案要提前问清机箱里有没有位置装授时卡。

chrony 怎么落地

现在的发行版基本都用 chrony 替代了老的 ntpd。装上之后改 /etc/chrony.conf,把 server 换成自己的时间源,后面加 iburst,让启动时快速对齐,而不是等几分钟才慢慢收敛。

别把 allow 开成 0.0.0.0/0。配置错误的 NTP 服务会被拿去做反射放大,你的机器成了打别人的工具,流量还记在你账上,最后收到的是机房的封禁通知。

启动并设为开机自启,然后 chronyc sources -v 看输出。行首的 ^* 表示当前选中的源,看不懂就只记这一条。第一次偏差大,用 chronyc makestep 强跳一次,之后让它自己慢慢调,别反复重启服务。

时区不是时间

系统时间统一用 UTC 存,展示时按需转换,这是最省事的做法。数据库、日志、应用全用 UTC,排障时不用心算时差,也不会在跨时区时把顺序看反。

需要本地时间就 timedatectl set-timezone Asia/Shanghai,改的是显示,不是时间本身。改完 date 输出变了,底层时钟没动,这一点要分清。

手动 date -s 改时间是下策。时间一跳,cron 会丢任务,监控会出现负的持续时间,按时间排序的日志会乱。真要改,先停服务再改,改完再起。

硬件时钟和容器

物理机关机后靠主板电池走时,久了会漂。同步好之后 hwclock --systohc 写回硬件时钟,下次开机就不会从错的起点开始,这个动作很多人从来没做过。

容器共享宿主内核的时钟,在容器里跑 ntpd 没有任何作用,还会因为改不动时钟而报错。要修就修宿主,容器里只做观察。

云主机的时钟一般由平台侧同步,你在里面再装一套不冲突,但两套同时大幅调整会互相拉扯。选一套为主,另一套只做观察。买 西安云服务器 这类云主机,时间源通常由平台提供,你只需要确认时区和自动同步有没有开。

跳变比漂移更危险

慢慢漂是慢性病,业务基本无感;突然跳变是急症,正在跑的定时任务、正在等超时的连接、正在算的令牌,全会被打乱。

所以生产机器上尽量用渐进调整,只有偏差大到一定程度才允许直接跳。chrony 默认就是这么设计的,别为了马上对齐把 makestep 设成无条件执行。

同一套系统里的机器,误差要控制在一个量级内。一半机器用内网源、一半用公网源,误差能到几百毫秒,跨机的事务顺序照样会乱。

日志里的因果

两台机器的时间差,最先暴露在日志的因果上。A 机器记录收到请求,B 机器记录处理完成,两条时间颠倒,说明时间没同步,不是逻辑错。

还有一种:应用日志显示写成功了,去数据库里按时间查却查不到,因为写的那台快了、查的那台慢了,查询窗口正好错开。

排查时先固定一台机器当基准,把可疑机器的 date -u 和它对比,差多少一眼就知道,比翻十页日志快得多。

日志平台按采集时间排序本身也会引入偏差,别拿它当唯一证据,原始日志的时间戳才是准的。

迁移时最容易忘

迁移最容易忽略时钟。旧机器同步得好,新机器没配,切过去之后定时任务在错误的时间点跑,备份、对账、清理脚本全乱。

上线检查清单里加一条:date -u 和基准机对比,chronyc tracking 看 offset。三十秒的事,能省掉一整晚的排查。

从物理机迁到虚拟机,时钟行为会变。虚拟机对宿主负载更敏感,原来稳的机器可能开始漂,这不是玄学。

同步不上怎么查

先看出口有没有放行 UDP 123。不少办公网和部分机房封这个端口,现象是 chronyc 一直显示未同步,日志里全是 timeout,但网络明明是通的。

换源换端口都不行,就用内网源,或者让宿主机代同步。防火墙这边只需要放行出向,入向不必对公网开放。

跨地域混布的时候还有个坑:境内和境外机器的时间源不同,日志拼在一起对不上。统一到 UTC 之后这个问题自然消失,香港 CN2 云服务器 三十六元起的那档拿来放前端足够。

一句判断

时间同步属于那种做好了看不出价值、做坏了到处是故障的基础设施。花十分钟配好,比事后对着证书报错查半天划算。你的机器上一次校时,是什么时候?

本文价格取自官网公开报价页,均为起价,实际以下单页为准。

目录结构
全文