面向监管报告的工程就绪型数据管道 笔记

面向监管报告的工程就绪型数据管道

有一种特定的沉默,常出现在监管问询中:当监管者问“能否详细说明这个数字是如何计算的?”时,电话另一端的人只能回答“我稍后回复您”。我曾身处这样的通话中。那并非愉快的处境,而且通常并非因为有人做错了什么,而是因为生成该数字的数据管道从一开始就没被设计用来回答这个问题。监管报告,无论是流动性申报、资本计算,还是更为细分的领域,与大多数数据工程工作相比,具有一种奇特的属性。团队之外的人并不真正关心支撑该报告的数据看板长什么样。他们真正关心的是,数月甚至数年后,能否确切追溯每一个数值的来源、谁对其进行过修改,以及为何在两个报告期间之间发生了变化。这是一个与“让报告快速运行”截然不同的设计目标。诚然,许多数据管道首先是为了速度和便利而构建,可审计性则作为事后补充被附加其上。其后果便是显而易见的。