PTP协议精讲（2.11）：纳秒从何而来——硬件时间戳的奥秘

2.11 纳秒从何而来硬件时间戳的奥秘一个看似简单的问题现在几点假设你想记录现在。方法一看手表你低头看手表发现显示10:30:45。这是现在吗不是。在你低头、眼睛聚焦、大脑读取数字的过程中时间已经过了几百毫秒。方法二看电脑屏幕你按下一个键程序调用gettimeofday()返回一个时间戳。这是现在吗也不是。从系统调用、内核处理、到返回用户空间又过了几微秒。方法三硬件时间戳在网线接口处有一个硬件电路在报文经过的瞬间记录下精确的时间。这可能是最接近现在的时刻。PTP的纳秒级精度正是依赖于这种硬件时间戳。时间戳的层级从软件到硬件层级一应用层时间戳实现位置应用程序中过程报文到达网卡网卡产生中断操作系统调度中断处理程序中断处理程序将报文复制到内核缓冲区应用程序调用recv()应用程序读取时间延迟来源中断延迟几微秒到几十微秒调度延迟几微秒到几百微秒数据复制几微秒总延迟10微秒到1000微秒抖动大因为调度不确定适用场景NTP、普通应用精度毫秒级层级二内核时间戳实现位置操作系统内核过程报文到达网卡网卡产生中断内核中断处理程序记录时间报文传递到应用层延迟来源中断延迟几微秒中断处理延迟几微秒总延迟几微秒到几十微秒抖动中等适用场景低精度PTP精度微秒级层级三驱动层时间戳实现位置网卡驱动程序过程报文到达网卡驱动程序立即记录时间在网卡DMA之前延迟来源驱动程序延迟几微秒总延迟几微秒抖动小适用场景中精度PTP精度亚微秒级层级四硬件时间戳实现位置网卡PHY层物理层过程报文到达PHY层PHY硬件在报文经过时立即记录时间延迟来源PHY内部延迟几纳秒总延迟几纳秒抖动极小适用场景高精度PTP精度纳秒级硬件时间戳的实现原理PHY层时间戳**PHY物理层芯片**是以太网接口的最底层负责信号的编解码数据的串并转换链路状态检测PTP PHY的额外功能检测PTP报文通过Ethertype或UDP端口识别在PTP报文经过时记录时间戳将时间戳传递给驱动程序实现方式方式一专用寄存器PHY维护一个实时计数器基于本地晶振当检测到PTP报文时将计数器值锁存到寄存器。方式二报文标记PHY在PTP报文中插入时间戳信息如IEEE 1588 over IEEE 802.3的某些实现。方式三旁路通道PHY通过旁路通道如SPI、I2C将时间戳传递给CPU。时间戳捕获点PTP标准规定时间戳应在消息时间戳点通过参考平面时生成。消息时间戳点对于以太网是帧起始分隔符SFD后的第一个符号的开始。以太网帧结构 [Preamble] [SFD] [Destination MAC] [Source MAC] ... [Payload] [FCS] ↑ 时间戳捕获点参考平面PTP实例与网络的边界通常在PHY层。为什么选择这个点原因一确定性SFD是一个明确的标志容易识别。原因二可复现无论报文内容如何SFD位置固定时间戳可复现。原因三最小延迟在SFD处捕获延迟最小抖动最小。硬件时间戳的挑战挑战一时间戳传递延迟硬件在PHY层捕获时间戳但时间戳需要传递给PTP协议栈软件。传递过程PHY → 网卡 → 驱动 → 内核 → 用户空间问题传递过程中软件如何知道哪个时间戳对应哪个报文解决方案方法一报文关联每个报文携带一个唯一标识如sequenceId时间戳也携带这个标识。方法二顺序保证硬件保证时间戳和报文的顺序一致软件按顺序匹配。挑战二时钟源硬件时间戳需要一个时钟源。选项一本地晶振使用网卡上的晶振通常25 MHz或125 MHz。优点独立低成本缺点频率不准确几十ppm误差需要软件频率补偿选项二外部时钟输入使用外部的高精度时钟如GPS驯服的原子钟。优点频率准确缺点需要外部设备成本高选项三同步以太网SyncE从以太网链路中恢复时钟信号。优点利用现有基础设施精度高缺点需要所有设备支持SyncE链路中断会丢失时钟挑战三时钟分辨率硬件计数器的分辨率决定了时间戳的分辨率。示例晶振频率125 MHz 计数器位数64位 分辨率 1 / 125 MHz 8纳秒提升分辨率的方法方法一使用更高频率的晶振如1 GHz晶振分辨率可达1纳秒。方法二使用相位插值用相位检测器测量晶振周期内的精确位置。方法三使用DDMTD数字延迟锁相环可以实现皮秒级分辨率用于White Rabbit。软硬件协同时间戳校正实际时间戳点的偏差硬件时间戳不一定在理想位置捕获。原因PHY设计限制信号传播延迟内部缓冲延迟示例理想情况在SFD处捕获时间戳实际情况在SFD后10纳秒捕获结果所有时间戳都慢了10纳秒校正方法PTP标准提供了校正机制7.3.4.2实际时间戳 捕获的时间戳 校正延迟校正延迟的测量设备制造商需要测量ingressLatency从参考平面到捕获点的延迟egressLatency从捕获点到参考平面的延迟这些延迟可以通过设计规范理论值校准过程实测值配置参数用户设置timestampCorrectionPortDS这是PTP数据集的一个可选部分存储时间戳校正参数成员含义ingressLatency入口时间戳校正延迟egressLatency出口时间戳校正延迟配置示例ingressLatency 10ns egressLatency 15ns 实际接收时间戳 硬件捕获时间戳 10ns 实际发送时间戳 硬件捕获时间戳 - 15ns主流硬件时间戳方案方案一Intel I210/I350特点支持IEEE 1588-2008硬件时间戳精度约10纳秒支持one-step和two-step模式实现PHY层捕获时间戳通过寄存器传递给驱动驱动提供API给应用层应用工业控制电信边缘设备方案二Broadcom BCM5XXX特点高精度硬件时间戳支持SyncE支持多种PTP Profile应用电信核心网络高性能交换机方案三Xilinx ZynqMP特点SoC集成PTP硬件支持硬件辅助PTP可编程逻辑支持自定义时间戳应用专用PTP设备研发和原型验证方案四FPGA方案特点完全自定义可实现极高精度支持White Rabbit应用科研高精度测量一个完整的时间戳流程示例发送方向应用层应用层构造PTP报文调用send()发送内核3. 内核将报文传递给驱动驱动4. 驱动将报文写入网卡的发送队列5. 网卡开始发送PHY层6. PHY检测到SFD7. PHY锁存当前计数器值t_tx 1000.000000000秒8. PHY将t_tx存入寄存器驱动稍后9. 驱动读取寄存器获取t_tx10. 驱动应用egressLatency校正实际发送时间 t_tx - egressLatency 1000.000000000 - 15ns 999.999999985秒11. 驱动将校正后的时间戳传递给PTP协议栈PTP协议栈12. 协议栈将时间戳填入Follow_Up报文接收方向PHY层PHY检测到SFDPHY锁存当前计数器值t_rx 1000.000000100秒PHY将t_rx存入寄存器PHY继续接收报文传递给MAC层驱动5. 驱动收到报文读取时间戳寄存器6. 驱动应用ingressLatency校正实际接收时间 t_rx ingressLatency 1000.000000100 10ns 1000.000000110秒驱动将报文和时间戳一起传递给PTP协议栈PTP协议栈8. 协议栈使用t_rx进行offset计算小结硬件时间戳的核心要点时间戳层级应用层毫秒级内核层微秒级驱动层亚微秒级PHY层纳秒级硬件时间戳原理PHY层检测PTP报文在SFD处锁存计数器值传递给驱动和协议栈关键挑战时间戳传递延迟时钟源选择分辨率限制时间戳校正测量ingress/egress延迟通过timestampCorrectionPortDS配置软硬件协同主流方案Intel I210/I350通用中精度Broadcom BCM5XXX高端交换机Xilinx ZynqMPSoC集成FPGA超高精度下集预告现在我们知道了PTP如何通过硬件时间戳实现纳秒级精度。但所有这些讨论都假设PTP报文能够正确发送和接收。PTP报文到底长什么样包含哪些字段下一节我们将深入讲解PTP报文格式——PTP的语言。【悬念留给2.12】PTP定义了10种报文类型每种报文都有特定的用途Sync、Follow_Up时间同步Delay_Req、Delay_Resp延迟测量Pdelay_Req、Pdelay_Resp、Pdelay_Resp_Follow_Up对等延迟测量Announce主时钟公告Signaling信令Management管理下一节我们详细解读每种报文的格式和用法。本文内容摘自本人的开源书《PTP技术书 - 从思想实验到协议实现》全书从时间本质的思想实验出发深度解析 IEEE 1588 协议、逐章分析 LinuxPTP 源码并带你动手实现一个轻量级 PTP 程序ptp-lite。 在线阅读/下载ptp-bookgitclone https://github.com/Lularible/ptp-book.git⭐ 如果对您有帮助欢迎 Star 支持也欢迎通过 GitHub Issues 交流讨论。