压缩JSON跑出40GB/s，你的数据管道该重画了

40 GB/s——这个数字放在JSON解析的语境里，够扎人。Daniel Lemire又在博客上放了一篇文章，标题直白：Parsing compressed JSON at 40 GB/s。压缩状态下的JSON，不需要先解压再逐字段扫描，直接流式穿透、边读边解，把解析和IO瓶颈一起掀掉。我的判断是，这条路径对日志聚合、流式ETL、实时特征工程这几类场景，是实打实的架构级替代，不是微优化。Lemire一直是这类"数据基础设施性能天花板"的常客，方法论通常是：把整条链路拆开，量化每一步的延迟和带宽，找到那个被忽略的大头——这次，大头是JSON的重复解压缩环节。40 GB/s未必是终局，但足够让你重新审视现有管道里那些"性能还行"的瓶颈假设。

原文：Parsing compressed JSON at 40 GB/s · 来源：Hacker News