体育数据底层正在悄悄重建:过去72小时发生了什么
9月30日,Tigris发布工程复盘,解释为何将对象存储队列从FoundationDB迁出,并把异步任务移至Kafka。这虽非体育新闻,却描述了当前承载海量体育媒体的底层管道。同一周,欧洲数据中心被要求公开水电消耗数据,不能再将其视为秘密。

过去72小时里,关于体育技术最有价值的一篇发布与体育本身无关。9月30日,对象存储厂商Tigris发布工程复盘,解释为何将垃圾回收等异步任务从FoundationDB移至Kafka。这对体育分析至关重要:若Worker在执行中途崩溃,任务也随之丢失。公司写道:“一旦Worker消费了任务,它就不再位于队列中,该任务也随之消亡。”
如今的体育就是一堆此类任务。追踪数据流、视频管道、博彩结算、集锦渲染。任何一项都无法容忍消息丢失。
Tigris对权衡直言不讳。部分队列仍保留在FoundationDB中,因为数据库消除了双写问题。但调度“需要大量写入和扫描,给FoundationDB带来读负载,直接竞争用户请求资源”。公司实现了苹果的QuiCK论文,即CloudKit背后的排队系统,并将其描述为“基于FoundationDB Record Layer实现的时间消息队列”。文章对Kafka的调侃也颇为幽默,将自托管Kafka比作醒来变成“一只巨大的害虫”,而旁人还客气地劝你继续生活。
这与体育并不牵强。联盟和转播商花了十年承诺数据原生报道,但宣传通常止步于仪表盘。底层是编排:哪些事件被处理、顺序如何、以及凌晨3点比赛中Worker崩溃时发生什么。
欧洲数据中心对数字闭口不谈
同一天,荷兰媒体NL Times报道了Lighthouse Report联合Trouw及其他欧洲媒体为期一年的调查结果,聚焦数据中心的环境信息披露。结论严峻:在荷兰,不到四分之一的大型数据中心公开用电和饮用水数据。
这一缺口背后的数字具体。据荷兰数据中心协会统计,截至去年年底,荷兰有186座容量500千瓦及以上的商业数据中心。负责为欧盟收集数据的荷兰企业局仅掌握其中104座的记录,公开用电数据的仅44座,公开用水数据的仅47座。欧盟《能源效率指令》已要求达到该门槛的数据中心披露信息三年。
荷兰统计局数据显示,2024年荷兰数据中心用电51亿千瓦时,占全国用电量的4.6%,接近五年前水平的两倍。电网运营商TenneT预计到2030年这一比例将达到10%至15%。荷兰企业局今年夏天披露,仅微软在荷兰最大的数据中心就占全国用电量的1%。谷歌在荷兰运营两座大型数据中心,但不公开其数据。
对体育而言,这并不抽象。流媒体、实时追踪和计算机视觉都接在同一张电网上,也处于同一片信息披露盲区。
不搬数据也能查湖
同样在9月30日,AWS宣布Aurora PostgreSQL现可通过外部表直接查询Apache Iceberg和Parquet数据,使用嵌入PostgreSQL的DuckDB查询引擎。公司表示,该功能从Aurora PostgreSQL 17.11和18.6版本起在所有商业区域和GovCloud区域正式可用,不额外收费。
卖点是消除ETL。公告称:“访问这些数据通常需要通过管道将数据从数据湖复制到Aurora,随着Schema演变,成本和工程工作量都会增加。”对体育机构而言,这决定了数据湖是静止在仓库中,还是分析师在赛季中能实际查询。
本周,各俱乐部和联盟在行业活动上承诺数据原生体育生态。Consultancy-me.com于9月29日报道了一位Pure Sports负责人在LEAP 2026上讨论此事,SVG Europe同日发布了一篇关于海量媒体基础设施的文章。两者均非产品发布。它们描述的是一个假设数据层正常运行的市场。
数据层确实越来越可靠。这就是故事核心。
研究层也在动
9月29日,研究者Osayamen Jonathan Aimuyo、Swapnil Gandhi和Christos Kozyrakis向arXiv提交论文,介绍Purlin,一个在GPU集合通信中分离编排与数据通路的通信框架。论文报告,在A100、H200和B200 GPU上的七种集合操作中,延迟最多加速5.14倍,带宽最多提升4.50倍。集成到SGLang服务栈后,Purlin将离线LLM服务吞吐和交互性平均提升1.13倍,最高1.37倍;在线推理交互性平均提升1.26倍,最高2.85倍,过载时收益最大。
这些不是体育基准。但负载形态与自动集锦生成、多机位追踪、实时战术推理相同。在这些场景中,负载下的延迟就是产品本身。
论文中2.85倍的交互性提升与可用的场边系统之间距离巨大,档案中无迹象表明有人填补了这一差距。但本周发布的每个来源指向一致方向:有趣的工作发生在界面之下,在编排、查询引擎和网络集合通信中。
这一周未解决的问题
隐私问题未解决。9月30日,404 Media报道,特朗普政府正利用1980年代的“高强度毒品贩运区”项目,将Flock、Axon等厂商的地方自动车牌识别数据导入联邦监控中心,某些情况下还送往美国缉毒局的全国车牌识别项目。这些记录由HaveIBeenFlocked.com创建者Cris van Pelt通过公共记录申请获得。电子隐私信息中心的Jeramie Scott对404 Media说:“如果你因Flock感到愤怒,那对这件事也该愤怒。”
体育场馆是这套摄像头资产的一部分。场馆周围的停车场也是。
健康数据问题也未解决。《卫报》9月30日报道,超过44000人依据英国GDPR第21条,对英格兰NHS由Palantir驱动的联邦数据平台处理其信息提出正式反对,活动人士提及Palantir为以色列军方和美国移民执法部门做过的工作。Palantir表示该平台正帮助缩短等待名单,列举了增加117000台手术、长期住院患者出院延误减少14.3%、28天内癌症诊断改善5.6%等数据。
环境问题也未解决。Lighthouse Report调查发现,在披露义务生效三年后,欧洲数据中心大多仍不愿说明其水电消耗量。
综合来看,过去72小时描述的体育技术行业是这样的:可见层(仪表盘、追踪图形、AI解说)运行在不可见层上。该层正在公开工程博客和arXiv预印本中被重建,而其资源和隐私成本基本未披露。这不是丑闻。这是一个测量问题,也是值得关注的重点。
资料来源
6- 01We used a database as a message queue. Now we use Kafka.EN
- 02Most data centers refusing to say how much water, electricity they useEN
- 03Aurora PostgreSQL now supports querying of Apache Iceberg and Parquet dataEN
- 04Purlin: Separating Orchestration from the Datapath of CollectivesEN
- 05How Cities Are Forced to Funnel License Plate Data to a Massive Federal Surveillance ProgramEN
- 06More than 44,000 file legal objections to Palantir NHS platform handling their dataEN
本文所有数字与引语均来自下列来源,未添加来源之外的内容。
本内容由编辑部在人工智能辅助下制作完成。
评论
0- 还没有评论——来说两句吧。