HK × FSI / 社区日
仅限受邀者 / 香港岛水域

香港 Databricks FSI 社区日

这是一场专为在数据、市场、风险和机构判断交汇领域工作的专业人士举办的私人海港聚会。没有阶级分明的舞台。禁止录音录像。这里只有严谨分享的实战专业知识。

私人邀请注册 / 2026

申请加入。

申请参加香港 Databricks FSI 社区日。请分享您的专业信息,社区团队将审核您的申请。

提交操作将在新标签页中打开。由于此表单使用 GET 方法,输入的值将显示在目标 URL 中。请仅提交您愿意与活动组织者分享的专业联系信息。

跨境流动性 Genie 和智能体辅助的溢价管理 亚洲实时市场 用于流式决策的统一受管数据平面 决策优势 将市场碎片化转化为可执行的行动 外汇套息情报 具有受管风险上下文的 Lakeflow 管道 中国外汇套息 具备政策、资金和结算意识的机遇分析 智能体治理 带有完整审计跟踪的人工审查操作 机构 AI 受控研究、推理和决策支持 市场微观结构 深度、点差弹性和承压流动性 FSI 运营模式 交易、资金、风险和运营的统一
五场实战简报

任务日程

每场会议都是一次工作交流,而不是产品推销。主题将平台架构与流动性、治理、区域市场结构和受控机构行为的现实联系起来。

使用 Genie 和 Agent Bricks 进行跨境流动性溢价管理

设计一个受管工作区,将市场数据、资金余额、结算头寸、政策和研究结合起来。研究专家智能体如何调查碎片化、预付资金、外汇对冲和结算延迟,同时重大行动仍需保留人工审查。

智能体架构

用于亚洲实时市场的统一受管数据平面

探索连接低延迟应用程序状态、流式计算和高并发分析的 LTAP 蓝图。追踪从亚洲市场事件到可执行深度、点差弹性、实时风险上下文和可审计决策跟踪的路径。

实时系统

从市场碎片化到决策优势

将实时基础设施转化为跨交易、资金、风险、运营和监督的业务成果。测试一个可见的机遇在经历了市场冲击、外汇转换、资金限制、结算时间要求和承压流动性之后是否依然存在。

FSI 运营模式

使用 Lakeflow 设计受管的亚洲外汇套息平台

构建一条面向生产环境的路径,从即期、远期、曲线、资金和运营数据源走向经过质量认证的套息情报。讨论数据契约、声明式管道、延迟事件、重放、法人实体权限控制以及受控平台变更。

Lakeflow 蓝图

中国外汇套息:从实战纪律到受管决策

跟踪一个明显的离岸人民币 (CNH) 套息机会,从报价标准化、交易成本、基差、波动性、市场深度、政策情景和承压退出假设等方面进行分析。目标不是自动化的判断,而是更快、可解释的判断。

转型故事
完整源日程

所有演讲者提案

提供的演讲者文档中的所有三十三份提案全文复制如下。

01使用 Databricks Genie One 和 Agent Bricks 构建受管的跨境流动性溢价工作区

主题:

使用 Databricks Genie One 和 Agent Bricks 构建受管的跨境流动性溢价工作区

重点:

聚焦于架构

演讲者背景:

从 Amazon Prime 配送司机到量化分析师,演讲者将国际配送承运管理经验带入新加坡与韩国的跨境流动性溢价分析,把路线优化、异常处理、运力规划与运营纪律,同机构级数据、AI、风险与资金架构结合起来。

描述:

跨境流动性溢价管理并不是单纯的价差监控问题。对于在新加坡和韩国之间运营的自营交易公司,它是一套受管的决策系统,涵盖市场数据、资金余额、结算通路、外汇管制、交易对手敞口、资本预先配置和运营证据。架构必须区分真正可执行的溢价,以及由陈旧价格、碎片化场所、截止时间、转移限制、结算不确定性或未计量的资金成本造成的表面溢价。

本环节提出 Databricks 跨境流动性溢价管理工作区的参考架构。新加坡被视为东南亚数字金融、机构外汇、区域资金和多币种流动性的枢纽。韩国则被视为深度足够、但运营上明显不同的市场;零售数字资产溢价、国内流动性状况、外汇规则和离岸访问限制,都可能造成价格与资金错位。工作区评估 SGD、USD、EUR 和 KRW 走廊,同时承认访问方式、允许工具、结算终局性和报告义务会因法律实体和司法管辖区而不同。

来源层把结构化的市场与企业数据,同非结构化的运营上下文连接起来。它接入外汇即期、远期、掉期、订单簿、波动率、融资利率、银行余额、付款状态、现金头寸、抵押品、交易对手限额、头寸、损益和结算数据。它也连接来自 Google Drive、SharePoint、电子邮件、日历、政策、法律意见、操作规程和事件记录的已批准文件与通信。机构专用数据源可以代表全球银行和新兴网络,例如 Citigroup、J.P. Morgan Kinexys、Partior、SOOHO.IO 和 Liquid Group,但不假设每一条通路都支持每一种货币、客户或司法管辖区。

Unity Catalog 提供数据所有权、权限、血缘、分类、可审计性和法律实体分离的控制平面。受信任层标准化货币、时间戳、假日、报价方向、工具标识、结算状态和交易对手记录。质量门禁检测陈旧市场、交叉报价、重复转移、缺失余额、无法解释的价格缺口、不一致的结算状态,以及在计入费用、滑点、对冲、资本费用、税负和受压平仓假设后消失的溢价。

Genie Ontology 建立受管的业务词汇。它把可执行溢价、预先配置资本、可用流动性、已实现溢价、代币化存款、最终结算、受限余额和压力退出成本等术语,连接到经认证的表、指标、政策和已批准文件。这可以避免用户和智能体把屏幕上的价差当成可用利润。本体还记录走廊专属规则、数据权威、指标所有权、新鲜度要求和允许的行动。

Genie One 成为面向业务的调查层。投资组合经理可以询问新加坡至韩国溢价为何扩大、变动是市场驱动还是运营因素、哪些余额可以动用,以及哪些证据支持答案。Deep Research 可以建立调查计划,跨市场微观结构、资金、付款、政策事件和运营事件检验假设,然后返回附有引用的响应。结果仍然是决策支持,而不是自主交易指令。

Genie App Builder 用于创建受管的流动性驾驶舱,包含走廊地图、溢价拆解、可用余额、结算状态、数据质量警告、情景结果和证据链接。应用区分观察到的价差、毛溢价、可执行溢价、流动性调整后溢价和压力调整后溢价。每一个数字都披露其来源、时间戳、转换、负责人和置信状态。

Agent Bricks 提供市场监控、资金运力、结算异常、合规证据和模型验证的专门智能体。Supervisor Agent 协调长时间研究、检查依赖关系、监控失败、请求人工介入,并在数据质量、法律批准或风险限额不完整时阻止行动。对 GPT、Gemini、Grok 或其他已批准模型系列的访问,通过企业控制、评估、日志和成本政策路由,而不是直接嵌入交易台应用。

本环节以部署边界作结:先进行只读研究;任何改变余额或订单的工作流都需要人工批准;严格分离研究身份与执行身份;提示词和工具允许列表、模型评估、终止开关、不可变审计证据,以及走廊专属的韧性测试。该架构旨在获得洞察,同时避免智能体工作流变成不受控的市场、流动性或合规事件。

受众收获:

与会者将获得一套面向生产的新加坡与韩国溢价管理架构,包括受管数据区域、Genie Ontology 语义、Genie One 研究工作流、Genie App Builder 驾驶舱、专门的 Agent Bricks 角色、Supervisor Agent 控制,以及受监管自营交易的人工批准边界。

02用 Databricks Genie One 将新加坡—韩国流动性摩擦转化为受管决策

主题:

用 Databricks Genie One 将新加坡—韩国流动性摩擦转化为受管决策

重点:

聚焦于业务和 FSI

演讲者背景:

从 Amazon Prime 配送司机到量化分析师,演讲者把国际承运管理中的路线、运力、服务水平和异常恢复经验,应用到新加坡与韩国的跨境流动性溢价分析,把碎片化的市场和结算信号转化为资金、风险、运营和交易团队的受管决策。

描述:

看得见的跨市场价格缺口并不自动等于可兑现的流动性溢价。自营交易公司必须判断资本能否在法律和运营上移动、接收场所是否有足够深度、结算能否在机会窗口内完成,以及预期收益在外汇对冲、网络费用、资产负债表占用、交易对手敞口、运营延迟和压力退出成本之后是否仍然成立。本环节把溢价捕获重新定义为企业流动性和控制问题,而不是狭窄的交易信号。

区域背景很重要。新加坡结合了机构外汇、区域资金、支付创新和数字资产基础设施。韩国结合了大量国内参与,以及更严格的外汇流程和市场准入考量。结果可能是显示价格与可部署流动性之间的错配。传统代理行链条可能需要预付资金,并围绕截止时间运作;代币化存款和基于区块链的结算网络可以延长运营窗口,并提高资金流动性。然而,新通路并不会取消客户资格、货币覆盖、法律实体、终局性、制裁、反洗钱、对账或运营风险要求。

拟议的运营模式为前台和控制职能创建一个跨境流动性溢价工作区。投资组合经理看到毛溢价和可执行溢价、可用运力、预期持有期、置信度和情景损失。资金团队按实体、货币、银行、通路和结算状态查看现金,以及预计的盘中需求、被困余额和预付资金要求。风险团队看到集中度、基差敞口、波动率、流动性期限、交易对手限额和压力损失。运营看到付款状态、截止风险、失败结算、断点和证据。合规看到每条建议背后的来源、所有权、政策依据、批准历史和司法限制。

Genie One 提供共同的业务界面。用户可以问:当前溢价是什么造成的?哪一部分反映市场需求、时区错配、转移摩擦或资金稀缺?哪些余额真正可以部署?如果韩元波动上升、某条支付通路暂停或对冲变贵,会发生什么?Genie One 根据受管数据和已批准的企业上下文作答,而不是依赖孤立仪表板或通用模型知识。

Deep Research 改变决策支持的质量。它不是返回单一指标,而是可以制定研究计划并检验相互竞争的假设。它可以比较场所深度、外汇基差、银行融资、支付延迟、政策通知、历史事件和交易台评论,然后给出带来源链接的结论和未解决问题。对金融服务治理而言,研究计划、来源、计算、假设和用户批准成为证据包的一部分。

Genie Ontology 在团队之间建立共同含义。它定义溢价何时是被观察到的、已验证的、可执行的、已实现的或经压力调整的。它把这些状态连接到权威数据集和政策。它还可以把结构化数据与 SharePoint、Google Drive、电子邮件和日历中的已批准内容连接起来,使最近的运营通知或结算变更与价格数据一起被考虑。感知权限的检索确保用户和智能体只收到他们有权访问的上下文。

Genie App Builder 加快基于角色的应用交付。用自然语言构建的驾驶舱可以提供高管热力图、走廊记分卡、溢价瀑布、资金运力视图、结算时间线、异常队列和带引用的研究面板。业务团队可以与工程师一起改进工作流,而治理仍然锚定在 Databricks 权限和编目数据上。

Agent Bricks 把可重复的分析变成受控能力。市场智能体验证价格和深度。资金智能体评估可部署余额和预付资金。结算智能体监控付款状态。政策智能体收集已批准的监管和内部政策上下文。模型风险智能体质疑计算和假设。Supervisor Agent 监控长时间任务、重试安全操作、路由异常,并在证据或批准缺失时暂停工作流。模型选择,包括已批准的 GPT、Gemini 或 Grok 端点,被视为基于准确性、延迟、隐私、成本和评估结果的受管实施决策。

商业案例通过缩短调查时间、降低闲置预付资金、减少失败结算、加快异常解决、改善血缘、使溢价计算更一致,以及缩小理论收益与已实现收益之间的差距来衡量。本环节提出分阶段推广:一个只读走廊、共同指标定义、带引用的研究、基于角色的驾驶舱、受监督的工作流,然后才是严格受控的行动集成。技术支持判断;它不取代持牌决策者、法律审查、资金权限或独立风险控制。

受众收获:

参与者获得亚洲特定的运营模式、基于角色的价值图、溢价瀑布、研究和证据工作流、可衡量的商业案例,以及在前台和金融服务控制职能中使用 Genie One、Ontology、App Builder、Agent Bricks 和人工控制的分阶段采用计划。

03从 Prime 配送路线到亚洲流动性路线:Genie One 转型蓝图

主题:

从 Prime 配送路线到亚洲流动性路线:Genie One 转型蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从 Amazon Prime 配送司机到量化分析师,演讲者把国际配送承运管理经验转化为新加坡—韩国流动性路线的框架。这一背景把网络运力、调度精度、异常管理和服务恢复,与量化研究、受管数据、智能体 AI 和跨境溢价分析结合起来。

描述:

配送网络和流动性网络共享一个运营事实:看起来最短的路线并不总是可执行的路线。当运力、准入、时机、单据或交接条件失败时,司机无法完成配送。同样,当资本被困住、结算延迟、对冲流动性消失、交易对手限额用尽或本地规则阻止预期的资金移动时,自营交易公司也无法捕获显示出来的跨境溢价。

本环节讲述从 Amazon Prime 配送运营到量化流动性分析的转型故事。承运管理培养出可直接迁移到金融基础设施的直觉:标出每一次交接,区分计划运力和可用运力,在瓶颈处测量延迟,准备替代路线,升级异常,并且在没有送达证明时绝不把工作称为完成。应用到新加坡和韩国,这些原则成为一套技术蓝图,用来证明流动性能否在受控风险边界内移动、结算、对冲并返回。

起点是碎片化的自营公司环境。市场价差在交易工具里,余额在银行门户里,付款状态在运营系统里,政策在 SharePoint 或 Google Drive 里,异常在电子邮件里,限额在风险平台里。分析师手工拼接截图、导出文件、聊天和电子表格。公司能看见溢价,但不能一致地解释其来源、运力、执行路径、法律依据或已实现结果。每次事件都再增加一项手工控制,而知识仍然依赖个别员工。

目标状态是受管的跨境流动性溢价管理工作区。第一层捕获市场、订单簿、融资、外汇、付款、资金、头寸、抵押品、交易对手和运营数据。第二层标准化标识、事件时间、货币惯例、账户所有权、假日和结算状态。第三层计算溢价瀑布:显示价差、可执行深度、交易成本、对冲成本、融资成本、资本锁定成本、结算风险费用、压力平仓和净预期溢价。第四层为交易、资金、风险、运营、合规和管理发布按角色区分的产品。

Genie Ontology 充当路线图。它定义每个概念的含义和权威,包括可用余额、受限余额、付款已提交、结算终局、对冲完成、机会过期和溢价已实现。它把经认证的指标与已批准的程序、政策文件、事件历史和运营通信连接起来。这种上下文有助于防止智能体把账户里看得见的钱,与某个法律实体或策略真正可用的钱混为一谈。

Genie One 成为调查同事。用户可以问韩国溢价为何出现、它是否在成本之后仍然成立、新加坡流动性是否可部署,以及还剩下哪些运营障碍。Deep Research 制定计划、检验多种假设,并在结构化和非结构化来源上提供带引用的答案。本环节展示同一工作流如何支持交易前研究、盘中异常诊断、交易后归因和管理层复核。

Genie App Builder 把蓝图变成可部署的应用。应用呈现路线式走廊视图、溢价瀑布、流动性运力、结算旅程、异常队列、情景控制和证据面板。每个阶段都有状态、负责人、服务目标、新鲜度指标和升级路径。用户可以从管理摘要走到底层来源,而不必再建一张互不相连的电子表格。

Agent Bricks 建立一组有边界的专家。市场智能体验证价格和可执行深度。流动性智能体检查余额、预付资金和资本锁定。外汇智能体评估对冲和基差。结算智能体跟踪银行和网络状态。证据智能体打包引用和血缘。挑战智能体寻找应当拒绝该机会的理由。Supervisor Agent 协调长时间工作、发现失败的依赖、纠正可重试的步骤,并把重大异常路由给人工。

路线图遵循受控发布,而不是一次性大迁移。第一版定义本体,并以只读方式重现一条历史新加坡—韩国走廊。第二版加入实时质量和溢价分解。第三版连接已批准文件和 Deep Research。第四版发布基于角色的应用。第五版引入用于监控和证据收集的受监督智能体。第六版可以连接已批准的运营行动,但只能通过隔离身份、工具允许列表、限额、双重批准、完整日志和紧急停止。除非法律、合规、资金、风险和模型治理明确批准,下单和资金移动仍在自主范围之外。

转型以新的绩效定义收尾。成功不是智能体回答的数量或表面机会的数量。成功是更高的研究吞吐、更少缺少支持的结论、更少闲置资本、更快的结算异常恢复、更强的审计证据、更低的运营损失,以及显示溢价与已实现溢价之间更窄的差距。配送司机的经验变成金融服务的设计原则:优化完整、可证明的旅程,而不是仅仅优化看起来吸引人的第一段。

受众收获:

与会者获得转型叙事、端到端技术蓝图、溢价瀑布设计、本体地图、多智能体运营模式、Supervisor Agent 模式、应用概念、控制清单,以及把碎片化的新加坡—韩国流动性信号转化为受管、有证据支持的决策的分阶段路线图。

04用于亚洲实时市场的统一受管数据平面:基于 Databricks Lakebase 和 Lakehouse 的 LTAP 架构

主题:

用于亚洲实时市场的统一受管数据平面:基于 Databricks Lakebase 和 Lakehouse 的 LTAP 架构

重点:

聚焦于架构

演讲者背景:

前军事工程部队专业人员转型的机构级交易员,现在为国际交易台提供市场流动性深度分析。该演讲者将关键任务工程纪律、市场微观结构知识以及将碎片化的亚洲市场数据转化为受管、对时间敏感的交易情报的实践经验结合在一起。

描述:

亚洲金融市场的运作跨越了一个独特而碎片化的格局,包括交易所、货币、交易日历、结算周期、流动性场所、市场数据惯例和监管管辖区。一个国际交易台可能需要观察香港的订单簿事件,评估其与新加坡或东京流动性的关系,更新盘中风险和资金需求,并在几毫秒内将结果提供给交易员和控制职能部门。传统的架构将联机事务处理 (OLTP) 与联机分析处理 (OLAP) 分开,迫使机构维护运营数据库、分析平台、变更数据捕获 (CDC) 管道、缓存和专用的服务层。这种分离引入了延迟、重复数据、权限不一致、数据血缘断裂以及额外的操作风险。

本环节提出了一种基于 Databricks LTAP(湖仓事务分析处理)的机构架构,以将事务性应用程序和大规模分析更紧密地连接在一个受管的湖存储层中。Lakebase 提供了一个与 Databricks 平台集成的完全托管的 PostgreSQL 运营数据库,支持低延迟应用程序状态、事务性工作流、自动扩展、分支、高可用性以及跨区域灾难恢复模式。Lakehouse 提供了一个实时仓库服务层,用于直接对受管的 Lakehouse 数据进行毫秒级响应、高并发查询。Unity Catalog 在整个架构中建立了统一的访问控制、血缘、发现、审计和策略上下文。

该技术蓝图遵循完整的数据路径。交易所馈送、经纪商数据流、汇率、参考数据、资金余额、头寸、限制和结算事件通过事件驱动的摄取进入系统。重构的 Structured Streaming 层执行持续的标准化、丰富、去重、事件时间处理、有状态计算、数据质量强制执行和流动性特征生成,而不依赖于传统微批处理的延迟假设。Lakebase 支持事务性用例,例如交易员观察列表、警报确认、调查案例、阈值配置、工作流状态和人工审批。Lakehouse 将实时订单簿失衡、点差分解、场所比较、滑点估计、流动性集中度和历史上下文提供给成千上万个并发的仪表板、API、应用程序和 AI 智能体查询。

本环节还解释了工作负载隔离和控制边界。市场数据计算、应用程序事务、历史分析和监管证据在保持逻辑分离的同时,共享受管的定义和血缘。参与者将看到按工作台、管辖区、法人实体、工具和数据敏感度划分的权限模式;用于调查的时间点重建;区域部署和数据驻留注意事项;加密和专用连接;恢复点和恢复时间目标;以及当某个场所、区域或上游馈送不可用时的优雅降级。

参考设计将演示一个覆盖香港、新加坡、日本、韩国和部分东盟市场的亚洲流动性深度应用程序。该应用程序将原始订单簿和交易事件转化为决策级指标,例如可执行深度、点差弹性、队列压力、跨场所分歧、预期市场冲击、流动性调整后的风险敞口以及具有结算意识的机会成本。结果是一个减少不必要数据移动的实用架构,同时保留机构交易环境所需的治理、弹性、可审计性和操作纪律。

受众收获:

参与者将带走一个端到端的 LTAP 参考架构、Lakebase、Structured Streaming、Lakehouse 和 Unity Catalog 之间明确的职责划分、多市场亚洲运营的部署注意事项,以及一个从概念验证进入生产环境而不会妥协市场风险、操作风险或监管要求的控制框架。

05从市场碎片化到决策优势:亚洲金融机构的实时流动性情报

主题:

从市场碎片化到决策优势:亚洲金融机构的实时流动性情报

重点:

聚焦于业务和 FSI

演讲者背景:

前军事工程部队专业人员,现已进入机构级交易领域,目前为国际交易台提供市场流动性深度分析。该演讲者带来了操作弹性、量化市场分析以及关于交易员、资金团队、风险管理人员和技术领导者如何在时间压力下做出决策的实践知识的结合。

描述:

对于在亚洲运营的金融机构而言,实时数据不仅是技术目标,更是执行质量、资产负债表效率、客户服务、监管控制和竞争优势的一部分。流动性分布在不同的国家、场所、货币、工具类型、本地投资者基础和时区。当考虑到市场冲击、外汇转换、对冲成本、资金限制、结算时间、税收、市场准入规则或交易对手限制后,一个可见的价格机会可能会消失。因此,业务挑战不在于收集更多数据,而在于在其经济价值衰减之前将最新的事务和市场事件转化为受管决策。

本提案展示了一种建立在 Databricks LTAP、Lakebase、Lakehouse、Structured Streaming 和 Unity Catalog 基础上的业务主导运营模式。机构无需维护互不关联的 OLTP 应用程序和 OLAP 平台,而是可以设计一个通用的操作环境,在其中事务性操作、流式情报、历史证据和分析模型在统一的治理模型下保持连接。Lakebase 为实时应用程序和工作流状态提供基于 PostgreSQL 的运营基础。Lakehouse 在高并发下提供毫秒级响应的分析视图。Structured Streaming 持续转换市场和运营事件。Unity Catalog 提供一致的定义、权限、血缘和问责制。

本环节以聚焦亚洲的流动性指挥中心为核心示例。交易员检查可执行深度而不是标题价格。资金团队评估盘中现金、抵押品、外汇资金和预付资金要求。风险团队监控集中度、异常点差、陈旧价格、模型漂移和限额消耗。运营团队跟踪分配、确认、结算状态和异常情况。合规和监控团队保留一份证据跟踪,显示哪些数据、规则、模型和审批影响了决策。高级管理层则获得跨区域业务的流动性质量、技术弹性和经济绩效的一致视图。

讨论将技术选择与可衡量的 FSI 成果联系起来。更快的洞察力可以减少逆向选择和滑点。更新的头寸可以提高盘中风险意识。统一的治理可以减少对账工作量和政策不一致。更少的副本和服务系统可以降低操作复杂性。高并发访问可以同时支持交易员、客户、仪表板、API 和 AI 辅助工作流。事务性集成可以缩短从信号到受控操作的路径,同时保留对重大决策的人工审批。

亚洲特定的情景包括交叉上市证券、区域 ETF 流动性、离岸和在岸货币关系、碎片化的数字和传统资产场所、假期日历不匹配、不同的结算惯例以及宏观经济公告发布前后流动性的突然撤出。本提案不将所有亚洲市场视为一个同质区域。相反,它展示了一个通用平台如何保护当地市场规则、数据驻留边界、法人实体控制和特定管辖区的保留策略,同时保持企业范围的定义和监督。

本环节以分阶段的价值案例结束。第一阶段建立受管流式数据和共享流动性指标。第二阶段引入实时服务和面向交易台的应用程序。第三阶段通过 Lakebase 连接事务性工作流、警报、调查和审批。第四阶段扩展到预测性流动性、情景分析和严格受控的 AI 辅助决策支持。每个阶段都与执行质量衡量标准、延迟目标、采用率、控制覆盖范围、弹性测试和运营成本指标相关联,使业务和技术领导者能够基于可证实的成果而不是单纯的平台野心来为转型提供资金。

受众收获:

参与者将获得一份面向从董事会到交易台的 LTAP 采用叙述,一份亚洲特定的流动性用例组合,一个实用的收益框架,以及一个协调前台、资金、风险、运营、合规、数据和技术利益相关者的分阶段运营模式。

06从军事工程纪律到机构流动性情报:亚洲转型故事与技术蓝图

主题:

从军事工程纪律到机构流动性情报:亚洲转型故事与技术蓝图

重点:

转型故事与技术蓝图

演讲者背景:

前军事工程部队专业人员转型的机构级交易员,为国际交易台提供市场流动性深度分析。该演讲者将使命清晰、冗余、可观察性、受控变更和故障恢复等工程原则应用于实时金融数据和交易决策系统的设计中。

描述:

关键任务工程和机构交易拥有共同的严苛现实:信息不完整、条件快速变化、容量有限、多重依赖关系,以及对不受控故障的极低容忍度。本环节讲述了将工程纪律应用于亚洲市场流动性分析的转型故事,然后将这些经验教训转化为可部署的 Databricks 技术蓝图。

故事始于典型的遗留环境。市场馈送通过独立的通道到达。事务性应用程序保留工作流和头寸状态。分析平台接收延迟的副本。交易台的电子表格填补了信息空白。添加了缓存和专用数据库以满足延迟目标。对账作业试图在事后使系统保持一致。随着机构在亚洲市场的扩张,每一个新的场所、货币、实体和监管义务都会增加映射、控制、接口和故障点的数量。该架构可能会生成报告,但难以产生及时、可解释且机构受控的决策。

目标状态使用 LTAP 重新思考 OLTP 和 OLAP 之间的边界。Lakebase 成为完全托管的 PostgreSQL 层,用于处理事务性应用程序工作负载、运营状态、警报、案例和审批。Structured Streaming 构成了交易、报价、订单簿、头寸、资金事件和结算更新的持续处理主干。Lakehouse 为实时分析应用程序提供毫秒级响应和高并发访问,而无需单独的专有服务副本。Unity Catalog 跨环境管理数据集、指标、模型、函数、访问策略、血缘和审计证据。

技术演练涵盖了六个相互连接的平面。摄取平面接收来自交易所、供应商、经纪商、支付和结算系统以及内部平台的数据。流平面验证模式、管理事件时间、解决延迟或重复事件、计算滚动流动性指标并发布受信任的表。事务平面在 Lakebase 中存储用户操作、工作流状态、配置、应用程序元数据和受控干预记录。实时服务平面使用 Lakehouse 来满足要求苛刻的并发和延迟要求的交易台仪表板、API、监控视图和面向客户的体验。治理平面应用 Unity Catalog 控制和血缘。弹性平面定义多区域恢复、重放、幂等性、检查点、背压处理、降级模式操作和服务级别目标。

具体的演示跟踪了跨亚洲的流动性冲击。某一场所突然出现订单簿失衡。Structured Streaming 重新计算深度、点差弹性、交易强度和跨市场分歧。历史的 Lakehouse 数据提供了状态上下文。Lakehouse 将更新的洞察分发给许多并发用户。一个由 Lakebase 支持的应用程序创建一个调查,记录分析师注释,跟踪确认,并在执行任何重大工作流操作之前强制执行审批。Unity Catalog 保留了源数据、衍生指标、模型、权限和最终决策之间的关系。相同的事件稍后可以重建,用于风险审查、向客户解释、模型验证或监管查询。

转型路线图是深思熟虑且面向运营的。发现并对关键数据和决策进行分类。定义通用的流动性语义和所有权。构建一个高价值的市场走廊或资产类别用例。在扩展之前建立可靠性、延迟、血缘和对账测试。仅在经济价值合理的地方引入实时服务。分受控阶段将事务性工作流迁移到 Lakebase 中。进行区域故障转移和恢复演习。使用可重用的数据契约、策略模板和可观察性标准逐个市场进行扩展。这种方法将转型从大型平台迁移转变为一系列受管的业务能力构建。

本环节以整个过程中的领导力经验教训结束。没有控制的速度会产生隐藏的风险。没有可用实时访问的治理会迫使用户回到电子表格。弹性必须经过设计和演练,而不是在部署后写在文档中。一个成功的亚洲数据平台尊重当地差异,同时创造一致的企业语义。最重要的是,只有当交易员、风险管理人员、运营分析师或客户能够做出具有完整证据跟踪的、更快且更有支撑的决策时,技术现代化才变得有价值。

受众收获:

参与者将获得适合高管利益相关者的转型叙述、详细的目标架构、生产准备情况清单、亚洲推广序列,以及将实时市场情报与受管事务操作相连接的蓝图。

07使用 Databricks Lakeflow 设计受管的亚洲外汇套息平台

主题:

使用 Databricks Lakeflow 设计受管的亚洲外汇套息平台

重点:

聚焦于架构

演讲者背景:

前军事战斗工程师转型的机构级交易员,为专注中国市场的交易台提供货币对和套息交易分析。该演讲者将任务规划、冗余、受控执行和行动后纪律应用于机构交易的生产级外汇数据系统的设计中。

描述:

亚洲外汇交易不仅是一个市场问题,也是一个分布式系统问题。专注中国市场的交易台必须整合在岸和离岸人民币市场、区域货币、利率曲线、远期点、定盘日历、央行事件、流动性状况、资金成本、抵押品数据、交易对手限额和运营记录。这些输入以不同的速度和格式到达。它们也受不同的法人实体、市场准入安排、许可条款和数据驻留要求管辖。一个仅仅从即期和远期价格来看极具吸引力的套息机会,在计入对冲成本、交叉货币基差、执行滑点、假期不匹配、资产负债表费用和承压平仓假设后,可能会荡然无存。

本环节提出了一个围绕 Databricks Lakeflow 声明式框架构建的参考架构。Lakeflow Connect 构成数据库、SaaS 应用程序、文件源和流系统的摄取层。其包含 100 多个内置连接器的生态系统可以将交易和风险数据与来自 Salesforce、Workday 和其他运营平台等数据源的企业上下文汇聚在一起。受管的摄取管道使用增量读取和写入、无服务器执行以及 Unity Catalog 集成,从而减少了传统上保持区域数据最新所需的自定义连接器代码和基础设施。

拟议的架构将平台划分为六个受管区域。源区域接收即期、远期、掉期、曲线、基准、宏观经济、头寸、订单、执行、抵押品和运营数据。摄取区域使用受管连接器、变更数据捕获 (CDC)、文件摄取、流接口和数据契约。声明式处理区域将质量期望、依赖关系、转换和恢复行为定义为易于维护的管道,而不是一组脆弱的脚本。受信任数据区域发布标准化的货币对、期限、曲线、假期、定盘价、交易对手和法人实体数据集。服务区域为交易员分析、API、风险仪表板和研究工作负载提供支持。治理区域使用 Unity Catalog 进行权限管理、发现、血缘、可审计性和所有权管理。

详细的数据路径追踪了一个 CNH 套息信号从源头到决策的过程。Lakeflow 摄取即期和远期报价、短期利率曲线、离岸资金指标、订单和成交数据以及批准的市场日历。声明式管道使货币惯例标准化、对齐时间戳、验证买卖价差关系、识别陈旧的观察结果、管理延迟数据并计算远期隐含收益率。然后,精选层计算套息、下滑(roll-down)收益、交叉货币基差、交易成本调整后的回报、波动率调整后的回报、预期回撤、流动性评分和压力平仓成本。交易台应用程序仅消耗受管和经过质量评分的输出,而原始观察结果和转换血缘仍可用于重放和调查。

本环节探讨了在机构环境中应如何控制自动平台升级。Lakeflow Pipelines 可以在无版本模型中运行,其中 Databricks 管理运行时升级。这减少了手动修补,但银行或交易公司仍然需要预览通道测试、回归数据集、数据质量门控、性能基准、回滚过程、依赖控制和正式的生产验收。因此,该设计引入了认证管道,在更广泛采用之前,根据代表性的中国交易台工作负载评估即将到来的更改。

该蓝图还检查了 Unity Catalog 受管表的自动兼容性评估,以及表功能(如行跟踪 (Row Tracking)、检查点 V2 (Checkpoint V2) 和删除向量 (Deletion Vectors))的受控推出。这些功能可以提高增量处理、流式检查点性能以及更新或删除的效率,但必须根据运行时兼容性、共享要求、恢复过程和下游读取器对其进行评估。对于半结构化的 VARIANT 数据,提案包含用于变体粉碎 (variant shredding) 的准备模式,该模式将频繁访问的字段存储在强类型的列式布局中。由于默认启用状态和运行时兼容性可能会随版本而改变,因此平台会显式记录表功能,并在采用之前测试所有消费者。

特定于亚洲的弹性被设计到架构中。管道考虑了交易所和银行假期、不重叠的交易时段、延迟的基准、重复的供应商消息、区域网络中断和流动性突然丧失。恢复目标由数据集的关键性定义。幂等处理、持久检查点、可重放的源历史记录、对账控制和降级模式数据集使交易台能够在数据源不完整时继续安全运行。可以按法人实体、交易台、管辖区、货币和数据集敏感度对权限进行细分。

受众收获:

参与者将带走一个面向生产环境的用于亚洲外汇对和套息分析的 Lakeflow 架构,一条清晰的从摄取到服务的数据路径,用于声明式质量和恢复的模式,一个受控的自动升级框架,以及针对 Unity Catalog 受管表、VARIANT 数据和跨司法管辖区交易信息的实用治理措施。

08使用 Databricks Lakeflow 将碎片化的亚洲外汇数据转化为受管的套息决策

主题:

使用 Databricks Lakeflow 将碎片化的亚洲外汇数据转化为受管的套息决策

重点:

聚焦于业务和 FSI

演讲者背景:

前军事战斗工程师转型的机构级交易员,为专注中国市场的交易台提供货币对和套息交易分析。该演讲者将运营纪律与关于资金、流动性、市场结构以及将表面上的外汇机会转化为机构决策所需控制的实践知识相结合。

描述:

套息交易通常被描述为借入低收益货币并投资于高收益货币。在机构的中国交易台上,实际决策的要求要高得多。交易台必须确定,在考虑远期定价、交叉货币基差、对冲费用、执行成本、波动性、流动性撤出、政策冲击、资本处理、交易对手风险敞口、结算约束以及压力期间的退出成本之后,预期套息收益是否仍然存在。答案取决于来自交易系统和业务系统的新鲜数据,并带有足够的血缘关系以便稍后解释该决策。

本环节提出了一个使用 Databricks Lakeflow 连接市场、风险、资金、财务、运营和控制数据的业务运营模式。Lakeflow Connect 提供了跨企业应用程序、数据库、文件和流媒体源的 100 多个内置连接器的受管摄取。Workday 和 Salesforce 等平台的连接器允许将业务上下文与交易、头寸和市场数据一起进行分析。当所需的平台或专用源不作为受管连接器提供时,社区或自定义连接器模式保留相同的治理和运营模型,而不是迫使交易台陷入未受监控的数据孤岛。

核心用例是亚洲外汇套息决策驾驶舱。交易员查看即期、远期、隐含收益率、基差、流动性、实际和隐含波动率、预期交易成本以及情景调整后的回报。资金团队查看预计的现金流、抵押品消耗、资金集中度和盘中流动性。市场风险团队查看敏感度、回撤、缺口风险、压力损失以及跨货币对的相关敞口。运营部门查看确认、结算说明、失败的交易、定盘事件和假期不匹配。合规和模型风险团队查看每个重要指标背后的数据源、转换、所有者、质量状态和审批历史。

Lakeflow 的声明式方法改变了运营模式。团队定义所需的数据集、质量期望和依赖关系,而平台则管理执行和依赖处理。这减轻了维护孤立摄取脚本的负担,并使工程师和控制职能部门都能看到质量规则。规则可以隔离倒挂的市场、拒绝不可能的远期期限、标记陈旧的曲线、检测缺失的定盘价,或者在所需数据不完整时防止信号到达生产环境。其目的不是使交易判断自动化。而是确保判断基于一致、及时且可解释的信息。

本环节将技术能力映射到可衡量的 FSI 价值。受管连接器缩短了加入区域系统所需的时间。增量摄取减少了不必要的数据移动。声明式处理降低了维护工作量并使控制具有可重复性。Unity Catalog 有助于标准化所有权、访问、血缘和审计证据。在严格测试的支持下,自动升级可以减少平台技术债务。行跟踪、检查点 V2 和删除向量可以支持更有效的变更处理和表维护。在符合运行时和读取器兼容性的前提下,变体粉碎可以改善对半结构化市场或操作有效负载中经常查询的字段的访问。

亚洲的重点是明确具体的,而非泛泛而谈。该提案探讨了在岸人民币 (CNY) 和离岸人民币 (CNH) 的关系、亚洲美元资金、区域利率差异、离岸流动性、央行政策分歧、当地假期、基准时间,以及不同市场准入和结算安排的影响。它还强调,在压力期间区域多元化可能会失败,因为相关性、美元需求和流动性溢价可能会同时发生变化。因此,该驾驶舱比较了正常套息与交易成本调整后套息、波动率调整后套息、流动性调整后套息以及承压退出价值。

本环节最后是一个分阶段的采用案例。第一阶段清点数据源、所有者、权限和关键指标。第二阶段使用 Lakeflow Connect 建立受管的摄取和通用的数据契约。第三阶段引入声明式质量规则和交易台级别的套息分析。第四阶段扩展到资金、风险、运营和控制工作流。第五阶段引入自动升级认证和高级表优化。成功与否通过入职时间、新鲜度、对账断点、失败管道恢复、手动调整率、血缘完整性、用户采用率以及理论套息和实际套息之间的差异来衡量。

受众收获:

参与者将获得一份面向高管到交易台的 Lakeflow 业务案例,一份中国和亚洲外汇用例地图,一个连接前台和控制职能的治理模型,以及一个植根于执行质量、资金效率、运营弹性和可解释性的分阶段价值框架。

09从战斗工程到中国外汇交易:Lakeflow 转型故事与技术蓝图

主题:

从战斗工程到中国外汇交易:Lakeflow 转型故事与技术蓝图

重点:

转型故事与技术蓝图

演讲者背景:

前军事战斗工程师,转行从事机构级交易,目前为专注中国市场的交易台提供货币对和套息交易分析。该演讲者将战斗工程原则(包括路线评估、冗余、障碍清除、受控变更以及压力下的恢复)转化为受管金融数据平台的架构和运营模式。

描述:

战斗工程师不会因为某条路线昨天是安全的就假设它今天是安全的。他们会验证条件、识别依赖关系、准备替代方案、控制更改并保持恢复能力。机构外汇数据平台需要同样的纪律。一个货币对或套息决策可能依赖于数十条数据路由,而一个过时的曲线、缺失的定盘价、损坏的映射或悄无声息的模式更改,都可能使一个看似合理的信号变成未受管理的风险敞口。

本环节讲述了一个从碎片化的中国交易台数据转向受管 Lakeflow 平台的转型故事。初始环境是大家熟悉的:定制的供应商数据源、计划的提取、电子表格调整、单独的风险副本、手动维护的映射以及分布在企业应用程序中的运营数据。每一个新的货币、期限、场所或政策要求都会创建一个新的接口。团队将时间花在修复管道和核对输出上,而不是分析市场。只有在发生事件后才会重建血缘,并且由于没有人能够自信地预测下游影响,升级被推迟。

目标架构使用 Lakeflow 作为摄取、声明式转换和编排的统一方法。Lakeflow Connect 通过受管的、社区或自定义的连接器引入数据库、SaaS 平台、文件和流式源。100 多个内置连接器提供了广泛的覆盖,而 Workday 和 Salesforce 等数据源可以为交易和运营分析添加企业上下文。Unity Catalog 管理凭据、访问权限、目标表、血缘和所有权。声明式管道表达受信任的结果和质量期望,而不是将业务逻辑深埋在独立的作业中。

技术蓝图按作战任务计划进行组织。首先,源侦察记录数据所有者、契约、时间、语义和故障模式。其次,路由构建建立受管连接器、CDC、流摄取和文件接口。第三,障碍控制应用模式强制执行、去重、延迟数据处理、隔离规则和对账。第四,受信任路由发布标准化的外汇对、曲线、远期点、日历、头寸、资金信息和风险因素。第五,决策层计算套息和情景指标。第六,可观察性和恢复提供事件日志、检查点、重放、警报、服务目标和行动后证据。

实时情景追踪一个明显的离岸人民币 (CNH) 套息机会。该平台摄取即期报价、远期点、利率曲线、波动率、市场深度、资金数据和头寸信息。声明式转换标准化报价方向和期限,对齐事件时间,检测陈旧的输入,并计算隐含的套息。后续阶段扣除买卖价差成本、预估滑点、对冲费用和资产负债表费用。压力测试应用波动率冲击、基差走阔、深度降低、结算延迟和不利的政策情景。只有经过质量认证的数据集才会被发布给交易员,并且每个值都保持对其来源和转换的可追溯性。

转型还解决了变更风险。Lakeflow Pipelines 可以通过无版本运营模式接收自动的运行时升级。该蓝图引入了预览环境、代表性重放数据、模式和结果比较、延迟和成本基准、依赖扫描以及生产推广门控。在启用行跟踪、检查点 V2 和删除向量等功能之前,会对 Unity Catalog 受管表进行评估。目标是获得运营改进,同时不允许平台更改变成不受控的交易事件。

半结构化数据具有独立的设计模式。供应商有效负载、参考数据属性、事件消息和操作 API 可以使用 VARIANT 类型保留,同时重要的字段被提升到受管分析模型中。变体粉碎可以将频繁访问的字段存储在类型化列式表示中,以提高查询性能。该蓝图要求对运行时和下游消费者进行兼容性测试、显式记录已启用的表功能,并在采用默认行为更改之前制定迁移计划。

路线图按能力稳步推进,而不是通过单次大爆炸式的迁移。第一个版本建立了一条货币走廊和一个权威的套息计算。第二个版本增加了数据质量执行和交易台仪表板。第三个版本连接了资金和风险。第四个版本用受管的工作流取代了手动异常处理。第五个版本对自动升级和表优化进行认证。第六个版本在其他与中国相关及亚洲的货币对中重复该模式。每个版本都包括弹性演练、对账证据、用户验收、控制部门签字和行动后审查。

转型的经验是,速度和控制并不是对立的。一个治理良好的声明式平台可以提高交付速度,因为数据契约、质量门控、血缘和恢复机制是设计一次并重复使用的。战斗工程思维增加了缺失的运营原则:永远不要只为正常路线进行优化。设计备用路线,测试它,观察它,并确保人们知道何时使用它。

受众收获:

参与者将获得引人入胜的转型叙述、详细的 Lakeflow 技术蓝图、中国外汇套息演示故事情节、自动升级认证模式、VARIANT 和表功能兼容性清单,以及从一个交易台用例扩展到受管的泛亚数据功能的可重复路线图。

10使用 Databricks Unity Gateway 为亚洲客户服务与营销设计受管 AI 控制平面

主题:

使用 Databricks Unity Gateway 为亚洲客户服务与营销设计受管 AI 控制平面

重点:

聚焦于架构

演讲者背景:

从军事炮兵到机构级交易,演讲者为国际交易台提供市场流动性深度分析。该演讲者将火控纪律、权限边界、目标核验、成本意识和行动后复盘,应用于亚洲客户服务与营销运营的受管 AI 架构。

描述:

随着亚洲金融机构在客户服务、营销活动运营、产品支持和内部知识工作流中部署数百个 AI 智能体,首要架构问题从模型选择转向控制。每个智能体都可能产生 token 成本、访问敏感数据、调用工具、跨越法律实体边界,并生成面向客户的内容。如果没有共享控制平面,机构将面临不受控的支出、PII 泄露、政策不一致、审计能力薄弱,以及与多家模型提供商的重复集成。

本环节提出一套使用 Databricks Unity Gateway 和 Unity Catalog 的受管架构,面向高流量后台 AI。Unity Gateway 控制模型、智能体、MCP 服务和工具之间的运行时交互。它为已批准的模型服务、流量管理、服务策略、速率限制、预算、用量跟踪和请求级问责提供中心路由。Unity Catalog 治理底层数据、函数、模型和权限。二者共同区分谁可以访问某项 AI 服务、该服务可以使用哪些信息、可以消耗多少,以及必须保留哪些证据。

架构从一个刻意的边界开始。前台交易台保持去中心化。每个交易台保留自己的私有 Markdown 知识库、研究风格、市场词汇和专有方法。产生 Alpha 的知识不会被自动汇集、嵌入或暴露给另一个交易台。Databricks 被定位为围绕已批准共享能力的可选受管服务边界,而不是强迫交易判断进入的企业知识库。这承认利率交易台、股票交易台、FX 交易台和数字资产交易台可能使用不同的假设、持有期、信号和风险语言。

最契合的场景是中后台。在区域客户支持模式中,香港、新加坡、台湾、日本以及外包的东南亚呼叫中心的智能体检索已批准的 FAQ、产品手册、投诉流程和客户历史。Unity Catalog ABAC 策略使用受管标签应用区域与敏感度规则。行筛选器按市场、法律实体或服务团队限制记录。列掩码在数据到达智能体或用户之前遮蔽卡号、国家标识符、账户详情和其他 PII。最小权限视图只暴露解决案件所必需的属性。

对于大约一百万行以下的知识检索,SQL 向量函数提供库内选项。产品段落和 FAQ 嵌入保留在受管表中,而 vector_cosine_similarity 或 vector_l2_distance 直接在 SQL 引擎中对相关内容排序。这避免了仅仅为了执行相似度计算就把敏感记录导出到单独的 Python 环境。该设计包括类型化向量校验、维度一致性、查询性能测试,以及把更大规模或要求更高的工作负载路由到合适检索服务的阈值。

Time Travel 支持时点政策重建。如果客户在十一月投诉五月购买的产品,支持工作流可以查询购买日当时有效的政策和知识快照。智能体比较历史条款与当前政策,引用正确版本,并准备供人工审查的回复。证据包记录客户上下文、历史快照、检索到的段落、模型版本、提示模板、被掩码的字段以及最终批准。

第二种模式覆盖区域营销。台湾和日本团队可以共享一个分析平台,同时 ABAC 和行筛选器阻止任一团队查看对方的客户级数据。列掩码保护直接标识符。SQL 向量函数通过在数据库内比较已批准的客户特征向量,支持受管的相似人群分析。生成的活动文案被视为草稿,并在发布前经过品牌、适当性、隐私和本地语言审查。

控制平面增加经济护栏。用量表把请求、token、延迟和支出归属到用户、团队、应用或项目。速率限制按服务和主体约束请求或 token。预算设定共享或按用户的阈值,并可以在达到限额时告警或阻断用量。可以为家电支持、移动支持、台湾营销和日本营销分别创建策略。仪表板展示每案单位成本、检索质量、升级率、政策违规和未使用容量。

生产蓝图以私有连接、区域部署、加密、提示注入防御、工具允许列表、输出审核、人工批准、不可变审计证据、事件响应、保留控制和失败即关闭行为收尾。目标不是把每一种智能都集中起来。目标是把共享的、面向客户的 AI 的控制集中起来,因为在这些场景中,安全、成本和一致性最为重要。

受众收获:

参与者将获得 Unity Gateway、Unity Catalog ABAC、行筛选器、列掩码、Time Travel、SQL 向量检索、token 预算、区域隔离和审计证据的参考架构,以及一条实践边界:在治理共享后台 AI 的同时,保留私有交易台知识。

11受管 AI 在亚洲 FSI 何处创造价值:客户支持、区域营销与成本控制

主题:

受管 AI 在亚洲 FSI 何处创造价值:客户支持、区域营销与成本控制

重点:

聚焦于业务和 FSI

演讲者背景:

从军事炮兵到机构级交易,演讲者为国际交易台提供市场流动性深度分析。该演讲者把精确性、去中心化执行、风险纪律和实践市场经验结合起来,区分集中式 AI 治理在何处创造可衡量价值,以及在何处会阻碍前台表现。

描述:

许多 AI 计划从平台优先的雄心开始:集中全部企业知识,连接每一个模型,并把每一名员工置于同一治理框架之下。在亚洲 FSI,当这种策略忽视业务文化时就会失败。交易台保护 Alpha,行动迅速,并发展出彼此不同的方法。他们轻量的私有 Markdown 文件常常编码着不应跨交易台共享的假设、术语和战术。强迫这些材料进入全球平台,可能降低信任、减慢实验,并制造新的保密风险。

本环节提出一种更可信的业务策略:保留去中心化的前台知识,同时把企业 AI 投资集中在客户服务和营销,因为共享控制、可复用内容、一致政策和可衡量的业务量能在这里产生更强回报。Unity Gateway 成为已批准模型、智能体和工具的运行时控制平面。Unity Catalog 为每次交互背后的数据提供权限和政策执行。结果不是为治理而治理,而是一套组合运营模式:只在能改善经济性和风险控制的地方实施集中化。

第一个用例是跨国和外包客户支持。一家金融机构可能通过内部团队和第三方呼叫中心服务香港、新加坡、台湾、日本、韩国和东盟市场。智能体需要客户上下文和历史产品信息,但承包商不应收到原始支付卡数据、国家标识符或不受限制的账户历史。Unity Catalog ABAC 可以按敏感度、国家、法律实体和用户属性应用策略。行筛选器限制一个团队可以访问哪些客户。列掩码在查询时涂改受保护字段,降低 PII 进入提示或模型回复的可能性。

本环节演示一起历史政策争议。客户在十一月联系支持,并声称五月购买的产品带有无条件退款权。当前 FAQ 已经改变,因此存在 AI 助手用今天的条款作答的风险。Time Travel 查询检索交易日当时有效的政策快照。库内向量比较定位最相关的条款,智能体为服务代表准备一份带证据、且感知版本的回复。这可以减少人工档案检索、不一致答复、投诉处理时间和可避免的补救。

第二个用例是区域营销。台湾和日本团队共享公共基础设施,但争夺预算,并在不同的同意、本地化和数据使用要求下运营。ABAC 和行筛选器隔离市场级销售和客户记录,而无需维护全球数据库的单独副本。列掩码抑制标识符。SQL 余弦相似度和 L2 距离可以在受管 SQL 环境内比较已批准的客户特征向量,以产生候选相似人群。活动文案仍须遵守同意规则、适当性检查、品牌审查和人工批准。

Unity Gateway 处理 AI 采用的经济侧面。token 消耗、请求次数、延迟和估计支出可以归属到部门、应用、用户和项目。速率限制保护容量,并防止失控的智能体。共享预算和按用户预算可以在达到阈值时发送告警或阻断后续请求。因此,家电支持团队可以在不同于移动支持团队的预算和服务水平下运营,而区域营销单位获得透明的成本分摊和用量报告。

价值记分卡把技术控制连接到业务结果。客户服务指标包括平均处理时间、一次接触解决率、升级率、投诉返工、政策答复准确度、PII 暴露事件和每宗已解决案件的成本。营销指标包括人群构建时间、审查周期时间、活动转化、退出率、隐私例外和每项已批准活动的成本。平台指标包括 token 成本、被阻断的请求、政策违规、延迟、模型质量和供应商集中度。

分阶段采用计划从低风险的 FAQ 检索和掩码客户摘要开始。随后加入历史政策重建、多语言智能体协助、受管相似人群分析,以及受控内容生成。每个阶段都需要法律、合规、隐私、模型风险、安全和业务负责人签字。机构避免两个极端:让每个团队自行创建不受管的 AI 集成,或者把沉重的全球知识平台强加给那些竞争优势依赖于隐私和自主权的交易台。

受众收获:

与会者将获得亚洲 FSI 价值论证、客户支持和区域营销使用模式、部门级 AI 预算模型、可衡量的 KPI 框架、分阶段推出计划,以及一条务实的治理原则:集中共享的面向客户的控制,同时保留有正当理由的前台自主权和 Alpha 保密性。

12从炮兵火控到受管后台 AI:亚洲 FSI 转型蓝图

主题:

从炮兵火控到受管后台 AI:亚洲 FSI 转型蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从军事炮兵到机构级交易,演讲者为国际交易台提供市场流动性深度分析。该演讲者把火控原则——包括授权、已核验输入、受控射程、弹药核算、协同和行动后证据——转化为亚洲 FSI 运营中受管 AI 的实践蓝图。

描述:

炮兵行动依赖有纪律的控制。一次任务需要已授权的目标、已核验的坐标、明确的射程、弹药核算、通信程序、安全边界和执行证据。企业 AI 在数字规模上面临类似问题。数百个智能体可以发送数千次模型请求、消耗不受限制的 token、检索敏感记录、调用工具,并生成面向客户的决策。如果没有清晰的控制,速度就会变成运营、隐私、行为和财务风险。

本环节讲述从宽泛的 AI 雄心转向有选择的亚洲 FSI 运营模式的转型故事。第一课来自机构交易:去中心化并不总是缺陷。交易台有意维护各自独立的 Markdown 知识库,因为策略、时间范围、词汇和 Alpha 各不相同。一个强迫这些文件进入同一共享库的全球平台,可能损害保密性和采用。因此,转型从把知识分类为交易台私有、受限共享、受监管客户和企业公开这几个域开始。

交易台私有研究仍由每个交易台拥有。默认不进行跨交易台索引。访问是显式的,私有 Markdown 内容不会被用来训练、评估或充实另一个交易台的智能体。企业平台首先聚焦客户支持和营销,因为重复的模型、共享政策、外包、区域数据边界和反复出现的内容,在这里更清楚地需要共同治理。

目标蓝图有六层。服务层包含已批准的客户支持和营销应用。智能体层包含有边界的智能体,具有具名所有者、允许的工具、最大自主权和人工升级规则。Unity Gateway 路由模型和工具流量,执行访问和服务策略,应用速率限制和预算,并记录用量。Unity Catalog 治理表、函数、模型和其他可保护资产。数据层存储客户记录、同意、FAQ、手册、营销活动、政策版本和嵌入。证据层在保留和隐私规则的约束下保存提示、检索到的上下文、模型和政策版本、批准、成本与结果。

一个跨国客户支持情景演示该蓝图。一家外包的东南亚呼叫中心接到台湾客户的案件。检索之前先检查身份和授权。ABAC 评估受管标签和用户属性。行筛选器只暴露被允许的区域和服务范围。列掩码隐藏对任务不必要的卡、身份和账户字段。智能体使用 SQL vector_cosine_similarity 按语义接近度、或使用 vector_l2_distance 按欧氏距离检索 FAQ 和手册段落,并在数据集规模适当的情况下把比较保持在受管 SQL 内部。

该案件随后变成历史政策争议。购买日期标识出正确的政策生效期间。Time Travel 重建适用的 FAQ 和条款。检索针对相应的历史内容和向量数据运行。生成的回复引用历史版本,并解释与当前政策的任何差异。人工批准实质性补救或补偿。完整链路可以复现,供投诉审查、内部审计、法律询问或监管沟通使用。

随后是区域营销情景。台湾和日本团队查询同一个全球销售环境,但通过政策执行收到不同的行。直接标识符保持掩码。已批准的客户特征被转换为向量,库内距离函数识别潜在相似人群分段,而无需把底层客户表导出到单独的 Python 工作流。活动生成智能体只接收被允许的聚合或假名化属性。同意、抑制名单、适当性、本地化和品牌检查在激活之前运行。

成本控制设计借鉴弹药核算。每一次模型请求都可归属。用量跟踪记录 token、请求、延迟、服务和主体。部门标签支持成本分摊。速率限制约束 QPM 和 TPM。预算设定月度阈值、告警和可选阻断。Supervisor 职能检测循环、重复检索、异常的 token 增长、工具失败和政策拒绝,然后停止或升级工作流,而不是允许无限重试。

路线图按受控的火力任务推进。第一阶段盘点智能体、模型、工具、数据类别、成本和所有者。第二阶段建立已批准的模型路由和用量可见性。第三阶段为一个支持市场实施 ABAC、行筛选器和列掩码。第四阶段加入时间感知的政策检索和 SQL 向量函数。第五阶段扩展到多语言区域支持。第六阶段引入受管的营销细分和内容工作流。第七阶段开展红队、故障转移、隐私、成本耗尽和事件响应演练。

收尾的教训是,成功的转型并不要求每一名员工以同样的方式工作。它要求明确的边界、相称的控制和可观察的结果。在保密和速度具有经济正当性的地方,交易台保留自主权。在共享数据、外包用户、PII、模型成本和客户影响要求机构控制的地方,客户服务和营销获得集中治理。

受众收获:

参与者将获得转型叙述、六层架构、知识分类模型、历史政策检索模式、库内向量设计、区域隔离控制、token 核算框架、分阶段亚洲推广,以及一份在交易台自主权与受管的面向客户 AI 之间取得平衡的生产就绪检查清单。

13使用 Databricks Lakeflow Designer 和 Lakeflow Connect 构建受管交易台控制平面

主题:

使用 Databricks Lakeflow Designer 和 Lakeflow Connect 构建受管交易台控制平面

重点:

聚焦于架构

演讲者背景:

从酒店前台经理到交易台主管,演讲者控制交易台风险和异常交易决策以保护资本。该演讲者把一线升级、服务恢复、交易员监督、流动性意识,以及在限额突破、运营差错和承压市场中的果断干预结合起来。

描述:

交易台主管必须在不阻止正当风险承担的前提下保护资本。这一角色需要对订单、成交、头寸、限额、市场价格、资金、估值和控制行动形成完整而及时的视图。在亚洲市场,这一视图因碎片化的场所、货币、假期、结算周期、法律实体、时区和本地市场准入规则而变得复杂。如果警告在头寸已经翻倍、或算法已经重复一笔错误订单之后才到达,那就不是有效控制。

本环节提出一套受管的交易台控制架构,使用 Databricks Lakeflow Connect、Lakeflow Designer、Lakeflow 声明式管道和 Unity Catalog 构建。Lakeflow Connect 从已批准的关系数据库、企业应用、文件和流式源摄取数据。典型输入包括订单管理和执行管理系统、交易所和经纪商消息、市场数据、头寸、交易员授权、限额、估值、抵押品、资金余额、监察警报和案件管理记录。变更数据捕获 (CDC) 和增量摄取使下游控制视图保持最新,同时来源所有权保持明确。

Lakeflow Designer 提供用于编排控制逻辑的可视化画布。风险和数据团队可以映射来源、连接、筛选、质量检查、聚合和输出,同时不把可视化界面当成免除工程纪律的借口。底层生产管道仍然经过版本管理、测试、审查,并在受控环境中晋升。因此,当新的场所、交易台授权、产品或压力指标出现时,可以快速适应,但任何重大风险规则都不会仅仅因为一次未经批准的拖放编辑而改变。

架构分为六层。摄取层捕获不可变的订单、修改、撤销、成交、头寸、价格观察、风险敏感度、限额变更和人工干预。标准化层统一交易员、账户、工具、场所、法律实体、货币、时间戳和生命周期状态。质量层隔离重复项、损坏的标识符、陈旧价格、不可能的数量、缺失的估值和不一致的订单状态。风险层计算损益、回撤、VaR、DV01、Delta、Gamma、Vega、集中度、流动性调整后敞口和限额使用率。干预层分发警告、硬性止损、对冲、减仓、暂停算法和紧急终止开关事件。证据层记录谁观察、批准、质疑并执行了每一项行动。

控制状态模型区分正常、加强监控、警告线、硬性止损和紧急状态。在警告线,工作流要求交易员说明、校验估值和市场数据,并准备减仓情景。在硬性止损,系统阻止未经授权的越跌加仓,并把强制行动路由给指定主管。紧急控制识别胖手指数量、远离已批准参考价的价格、消息速率激增、重复订单和算法循环。紧急终止开关建议必须包含受影响的策略、账户、场所、未完成订单、责任所有者和交易所联系程序。

该设计并不声称仅靠数据血缘就能证明不存在隐藏头寸。相反,它对独立证据进行对账:订单对照成交,成交对照头寸,头寸对照确认,确认对照清算或主经纪商记录,账簿对照法律实体和账户清单。它标记虚拟账户、账外标识符、未经批准的场外工具、未匹配确认、估值覆盖和无法解释的损益。完整性控制和外部对账使隐瞒更加困难,而监察和人工调查判定意图。

Unity Catalog 治理管道资产、表、权限和血缘。从来源到输出的血缘展示风险度量或警报是如何产生的,并在规则变更时支持影响分析。授权把交易台、法律实体、司法管辖区和敏感监察案件分开。审计证据包括规则版本、来源新鲜度、数据质量状态、计算路径、限额所有者、批准链、干预和结果。

亚洲韧性模式覆盖不重叠的交易时段、本地假期、交易所中断、延迟的经纪商馈送、区域网络故障、货币转换和流动性突然撤出。降级模式数据集、陈旧数据提示、替代定价、可重放事件、对账检查点和经过测试的恢复程序,防止部分馈送看起来像是完整的。该架构支持监督和证据;在需要的地方,交易所原生紧急终止开关和经认证的订单控制仍然是最终执行机制。

受众收获:

参与者将获得面向生产的架构,涵盖受管摄取、可视化风险管道、止损状态、异常订单检测、头寸对账、紧急终止开关证据、Unity Catalog 血缘和亚洲特有的韧性,并在分析、监督决策和经认证的交易控制之间划出清晰边界。

14用受管风险数据和果断干预保护亚洲各交易台的资本

主题:

用受管风险数据和果断干预保护亚洲各交易台的资本

重点:

聚焦于业务和 FSI

演讲者背景:

从酒店前台经理到交易台主管,演讲者管理异常交易决策和交易台风险,以保护机构资本。该演讲者把升级纪律、冷静的事件处理、运营问责和面向客户的领导力,应用到跨交易员、风险、合规、运营和技术的高压监督中。

描述:

交易台控制职能的目的不是消除亏损。它要确保亏损保持在公司已批准的风险偏好之内,并且交易员、模型或有缺陷的流程不能把一件可控事件变成威胁资本的失败。在亚洲,监督决策必须考虑区域流动性、本地交易所规则、碎片化结算、货币资金、假期错配,以及压力在市场之间的快速传导。

本环节提出一种由 Databricks Lakeflow Connect、Lakeflow Designer 和 Unity Catalog 支持的业务运营模式。Lakeflow Connect 把订单、成交、头寸、限额、市场数据、敏感度、估值、资金、抵押品、监察警报、确认和运营案件汇集在一起。Lakeflow Designer 让业务控制专家和工程师表达透明的数据流,并在市场、产品或监管变化时调整已批准的监控逻辑。Unity Catalog 提供从来源数据到交易台决策的权限、所有权、血缘和可审计性。

核心产品是交易台资本保护驾驶舱。主管看到日度和月度回撤、损益质量、头寸限额使用率、VaR、DV01、Delta、Gamma、Vega、流动性集中度、资金需求和陈旧数据警告。该视图把真正的风险上升,与估值错误、延迟入账、重复执行或暂时的市场数据扭曲区分开来。每一项重大指标都有所有者、时间戳、质量分数、限额来源和钻取路径。

干预模型是渐进的,但不可协商。突破警告线会触发说明、独立数据校验、减险选项和管理层可见性。突破硬性止损会在公司授权矩阵下触发强制减仓或平仓。未经授权的越跌加仓,通过把警告之后恶化的盯市与增加的敞口结合起来来检测。集中头寸可以触发对冲要求、降低限额或暂停新风险。临时提高限额需要记录目的、期限、批准人,并自动到期。

异常订单控制覆盖过大数量、价格偏离、意外工具、未经批准的场所、重复提交、消息速率尖峰和算法循环。控制驾驶舱协调决策,但经认证的交易前控制和交易所或经纪商紧急终止开关执行保护行动。主管收到一份结构化检查清单,用于撤销未完成订单、停用策略、通知场所、校验剩余头寸,并确认事件已经停止。

运营模式也处理行为风险。隐藏头寸无法通过由单一来源构建的仪表板来控制。公司对账订单、执行、头寸、确认、清算、主经纪商、现金、抵押品和场外记录。例外包括未知账户、虚拟账户偏离、未经批准的衍生品、延迟入账、手工估值覆盖、可疑撤销,以及无法解释的盈利或亏损。潜在的对倒、幌骗、内幕交易或故意隐瞒,会升级给独立的合规和监察团队,而不是由交易条线单独决定。

在闪崩或流动性崩溃期间,主管必须在暂停做市、扩大价差、降低库存、对冲或退出之间做出选择。驾驶舱提供市场深度、价差行为、可执行流动性、场所健康状况、库存、对冲可用性和情景损失。它不取代判断。它使假设和后果可见,记录所选应对,并为行动后复盘保留证据。

本环节把平台投资连接到可衡量的 FSI 结果。度量包括从突破到确认的时间、减险时间、已对账头寸百分比、陈旧数据发生率、误报率、未经批准的限额变更、算法停止延迟、无法解释的损益,以及重复事件。分阶段采用从一个交易台和一个权威头寸视图开始,然后加入限额工作流、异常订单监控、独立对账、压力操作手册和区域扩展。

管理教训是相称的治理。可视化管道加速受控变更,但风险规则仍然需要所有权、测试、批准和回滚。集中血缘改善问责,但要暴露缺失的活动,独立记录是必要的。强有力的控制通过使升级可预测、基于证据且及时,同时保护机构和负责任的交易员。

受众收获:

与会者将获得聚焦亚洲的资本保护运营模式、渐进干预框架、控制驾驶舱设计、对账策略、行为风险升级路径、危机操作手册,以及把 Lakeflow 投资连接到更快行动、更强证据和更低损失严重程度的 KPI 组合。

15从酒店升级到交易紧急终止开关:亚洲风险控制转型蓝图

主题:

从酒店升级到交易紧急终止开关:亚洲风险控制转型蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从酒店前台经理到交易台主管,演讲者通过控制交易台风险和异常交易决策来保护资本。该演讲者把客人升级、班次交接、例外记录、服务恢复和冷静的危机领导力,转化为机构级的监控、干预和证据实践。

描述:

酒店前台和交易台看起来无关,但两者都持续运营,依赖准确的交接,并面对可能迅速升级的例外。在酒店,一个未解决的问题可以扩散到客人、房间、部门和班次。在交易台上,一次未受控的限额突破、隐藏头寸、胖手指订单或算法循环,可以扩散到工具、场所、法律实体和公司资本。领导原则相同:尽早识别例外,确立所有权,在授权范围内行动,并保留可靠记录。

本环节讲述从碎片化监督到受管的亚洲交易控制能力的转型故事。起点环境大家熟悉:订单数据在一个系统里,头寸在另一个系统里,敏感度在电子表格里,限额变更在电子邮件里,经纪商确认稍后才到,干预被记录在聊天里。主管把关键的几分钟花在判断警报反映的是真实风险、坏数据、延迟入账还是损坏的模型。事件之后,团队从不完整的记录中重建决策。

目标蓝图使用 Lakeflow Connect,从关系数据库、企业应用、文件和支持的流建立受管的增量摄取。订单、修改、撤销、成交、头寸、价格、估值、限额、敏感度、抵押品、确认、监察事件和案件记录进入受管表。连接和目标资产通过 Unity Catalog 控制,而来源血缘支持从外部系统一直到下游风险输出的可追溯性。

Lakeflow Designer 成为可视化协同界面。一条管道可以展示原始事件如何变成标准化头寸,头寸如何映射到交易员和法律实体,市场数据如何产生估值,敏感度如何聚合,以及限额状态如何赋值。拖放开发帮助跨职能团队检查并调整流程,而生产晋升仍然需要源代码控制、同行评审、回归测试、职责分离和回滚。视觉上的简单不得掩盖控制的复杂性。

技术蓝图跟随一次事件旅程。一个算法开始以偏离已批准市场参考价的价格发送重复订单。摄取层捕获订单流和独立价格馈送。质量检查核验时间戳、序列、工具、交易员、策略和场所。有状态逻辑检测异常消息速率、重复意图、价格偏离、敞口增长和恶化的损益。风险层计算限额使用率和流动性调整后的退出成本。工作流把交易台从正常提升到警告,然后到紧急状态。

主管收到一份决策包,包含来源新鲜度、未完成订单、已完成成交、剩余头寸、受影响账户、模型损失、对冲可用性和建议行动。如果满足政策条件,授权用户启动经认证的紧急终止开关流程,联系交易所或经纪商,并核验撤销。平台记录确认、决策、批准人、执行证据、剩余风险和恢复步骤。它不会用数据管道替代经场所认证的紧急控制。

第二个情景处理隐瞒敞口。系统把内部订单和成交与清算、主经纪商、确认、现金、抵押品、场外和法律实体记录进行对账。它检测未匹配交易、未知账户、延迟入账、手工标记、异常划转,以及出现在已批准清单之外的头寸。Unity Catalog 血缘证明已知记录如何产生了仪表板;对账控制检验已知记录是否完整。独立合规和监察调查潜在的不当行为。

控制模型也支持止损纪律。警告阈值触发说明和已准备的减仓。硬性止损要求在有文档的授权矩阵下采取行动。警告之后进一步增加风险,会被识别为潜在的未经授权越跌加仓。在波动、流动性恶化或反复控制失败期间,头寸限额可以动态降低。所有临时例外都会自动到期,除非通过受控工作流续期。

亚洲推广从一个流动性充足的交易台和一个市场开始,然后按走廊和产品扩展。第一版建立权威身份、头寸和限额。第二版加入可视化损益和敏感度管道。第三版引入警告和硬性止损工作流。第四版加入独立头寸对账和行为风险证据。第五版整合异常订单监控和经过测试的紧急终止开关操作手册。第六版加入区域韧性、跟随太阳式交接和跨市场压力演练。

转型以酒店的班次连续性教训收尾。当所有权在团队或时区之间消失时,控制就会失败。因此,每一条未解决的警报都有所有者、严重程度、下一步行动、截止时间和接收班次。每一次事件都以对账、客户或市场影响评估、根因分析、控制改进和行动后复盘结束。技术创建共享记录;领导力决定何时质疑、何时干预、何时保护资本。

受众收获:

参与者将获得引人入胜的转型叙述、端到端技术蓝图、异常算法事件旅程、隐藏头寸对账模型、止损工作流、紧急终止开关边界、亚洲推广顺序,以及把碎片化控制变成可问责资本保护的跟随太阳式交接框架。

16使用 Databricks Liquid Clustering 设计自适应的东南亚债券与信用数据平台

主题:

使用 Databricks Liquid Clustering 设计自适应的东南亚债券与信用数据平台

重点:

聚焦于架构

演讲者背景:

从设计学院动画训练到机构级数据分析,演讲者支持东南亚债券和信用市场。该演讲者把视觉叙事、数据构图、发行人和工具分析以及制作纪律结合起来,帮助国际团队解读流动性、利差、评级、契约和市场状态变化。

描述:

东南亚债券和信用分析既是投资问题,也是数据布局问题。分析师持续连接发行人基本面、工具条款、评级、曲线、交易、评估价格、交易商报价、流动性观察、契约、公司行为、ESG 指标和宏观经济数据。查询模式随市场变化。在正常条件下,用户可能按国家、货币、行业、发行人、评级或期限筛选。在压力期间,注意力可以迅速转向母集团、再融资窗口、抵押品、契约敞口、交易商流动性,或具有相似风险特征的工具。

传统的静态分区要求架构师尽早预测访问模式。按国家和日期分区的表可以支持常规区域报告,但当分析师突然跨司法管辖区、货币和期限调查一个发行人集团时,表现会很差。高基数分区键会产生过多小目录,而不均衡的国家或发行人数据量会造成倾斜。ZORDER 可以改善选定列的共置,但随着调查优先级演变,平台仍然需要反复调优。

本环节提出使用 Databricks Liquid Clustering 的参考架构,用于受管的东南亚债券与信用数据平台。平台组织青铜层、已校验层、一致化层、分析层和服务层。来源数据包括交易所和场所记录、托管人、定价供应商、发行人披露、评级、参考数据、国债曲线、FX、头寸、观察名单、限额数据和分析师注释。Unity Catalog 按司法管辖区、法律实体、团队和敏感度控制所有权、权限、血缘和表发现。

Liquid Clustering 在支持的表上取代刚性分区和 ZORDER。架构师定义聚类键,或在适当的地方使用自动聚类,同时 OPTIMIZE 增量地把相关数据分组。聚类键可以随着分析需求演变而改变,而无需立即重写全部历史数据。新写入或随后被优化的数据遵循较新的布局,使表能够逐步适应。文件级统计支持数据跳过,使查询避免读取不太可能包含相关记录的文件。

物理设计因工作负载而异。证券主数据表可以按发行人集团、工具标识符或市场聚类。观察表可以优先考虑工具、观察日期和来源。现金流表可以优先考虑工具和付款日期。契约事件表可以优先考虑发行人集团、事件类型和生效日期。流动性表可以优先考虑工具、场所和事件时间。设计避免把每一个常用筛选字段都当作聚类键。查询历史、倾斜、写入模式、维护成本和测得的文件跳过决定选择。

一个压力情景演示自适应分析。一名房地产行业发行人遭遇评级行动和利差走阔。分析师首先按发行人和证券搜索。然后扩展到担保人、子公司、货币、再融资年份、相似评级,以及新加坡、印度尼西亚、马来西亚、泰国、菲律宾和越南的敞口组合。Liquid Clustering 帮助平台服务这些变化的路径,而无需全面重新设计静态文件夹。整理后的表计算期权调整利差、相对政府债利差、久期、凸性、持有收益、骑乘收益、降级敏感度、预期损失、流动性分数和情景损益。

架构在数据持续到达的同时支持高并发读取。增量摄取全天写入交易、价格、评级和披露。预测性优化或计划的 OPTIMIZE 在经济上合理时维护布局。工作负载隔离把摄取、转换、分析师探索、仪表板和模型作业分开。快照隔离允许读取者在优化重写文件时获得一致结果。监控跟踪被扫描的文件、被跳过的字节、查询延迟、聚类有效性、小文件增长、写放大和优化成本。

本环节也建立生产控制。键变更使用代表性查询通过性能测试。团队比较新旧布局,核验下游兼容性,记录运行时要求,并维护回滚程序。自动选择被观察,而不是被假定为正确。对于受管摄取目标,部署前必须检查支持的聚类配置和连接器限制。

结果是一个更不像固定档案、更像自适应分析武器的数据平台。当东南亚信用状况转变时,分析师可以迅速重新开始调查、改变调查视角,并保留治理,而无需支付反复重建全部历史资产的运营成本。

受众收获:

参与者将获得面向生产的 Liquid Clustering 架构、基于工作负载的键策略、东南亚债券与信用表设计、压力调查数据路径、优化控制,以及在改善并发、治理和数据跳过的同时快速适应变化市场的度量框架。

17用 Databricks Liquid Clustering 把东南亚信用波动转化为更快的决策

主题:

用 Databricks Liquid Clustering 把东南亚信用波动转化为更快的决策

重点:

聚焦于业务和 FSI

演讲者背景:

从设计学院动画训练到机构级数据分析,演讲者分析东南亚债券和信用市场。该演讲者运用视觉序列、发行人研究、数据质量和市场上下文,把碎片化的定价、流动性、评级、契约和组合信息转化为可供决策的机构分析。

描述:

在东南亚信用市场,经济价值在分析师等待数据时衰减。评级行动、再融资担忧、政策意外、大宗商品波动、货币冲击或治理事件,可以在几分钟内改变相关问题。团队可能从一只债券开始,很快就需要每一个相关发行人、担保人、到期墙、货币、交易商报价、组合敞口或可比工具。为昨天的报告优化的静态数据布局,会在速度最重要的时刻拖慢调查。

本环节为 Databricks Liquid Clustering 建立业务论证,把它作为自适应债券与信用情报能力的一部分。Liquid Clustering 不被呈现为交易信号。它是一种数据布局机制,可以在访问模式变化时减少不必要的文件扫描并简化维护。通过在支持的表上取代刚性分区和 ZORDER,它允许团队更新聚类优先级,并通过后续写入和优化逐步重组数据,而不是自动重建全部历史数据集。

核心用例是东南亚信用响应工作区。投资组合经理看到利差变动、发行人集中度、流动性、情景损失和可用对冲。信用分析师看到财务趋势、债务结构、契约、评级、所有权、关联实体和再融资时间表。交易员看到可执行指示、交易商离散度、市场深度、最近成交和估计退出成本。风险团队看到限额使用率、降级迁移、违约假设、错向风险和相关敞口。运营和数据团队看到来源新鲜度、质量例外、血缘和优化状态。

区域背景被有意处理为异质的。新加坡可以作为发行、资金和投资者枢纽,而印度尼西亚、马来西亚、泰国、菲律宾和越南拥有不同的货币、披露实践、本地投资者基础、流动性状况、市场惯例和主权关系。单一的静态国家分区无法代表每一条分析路径。一名发行人可以拥有离岸 USD 债券、本币债务、关联实体的担保,以及跨越多个市场的运营。

Liquid Clustering 在四个方面创造价值。第一,更快的选择性查询可以缩短从事件到初步敞口评估的时间。第二,当市场从国家分析转向发行人、期限、评级或行业分析时,自适应键减少重新设计表布局的工作。第三,更好的数据跳过可以降低重复调查和仪表板的不必要计算。第四,对并发读写的支持帮助研究在新观察到达时继续进行。

一条现场故事线跟随一名区域发行人,其利差在意外披露后走阔。第一反应识别受影响证券并校验价格。第二步映射集团结构、担保、契约和即将到来的到期。第三步定位组合、基金、交易对手和客户敞口。第四步比较评级相近和行业相关的债券。第五步对降级、流动性撤出、FX 变动和再融资情景建模。工作区保留每一项度量背后的来源和时间戳,使决策者能够区分观察到的事实、供应商估计、分析师判断和模型输出。

业务论证必须保持实证。团队为 p50 和 p95 查询延迟、被扫描的文件和字节、分析师等待时间、管道成本、失败的刷新和维护工作建立基线。实施之后,他们按工作负载和表度量改进。他们也监控优化成本和写放大。在表很小、筛选不具选择性,或选择不当的键不能改善跳过的地方,不应宣称收益。

分阶段采用从最大、增长最快的观察表和交易表开始。团队从真实查询历史中选择键,引入 Liquid Clustering,并对照代表性压力情景验证性能。下一阶段在治理和运行时支持适当的地方加入自动聚类。后续阶段把该模式扩展到发行人事件、现金流、契约、估值和组合敞口。每个阶段都包括用户验收、数据质量检查、血缘审查、成本度量和生产回滚。

战略结果是带控制的敏捷。分析师可以随市场变化改变视角,在新证据出现后迅速重新开始调查,并服务许多区域用户,而不把数据布局维护变成反复出现的工程项目。平台通过使受管证据更容易获得来加强决策,而不是承诺更快的数据本身就能保证投资表现。

受众收获:

与会者将获得亚洲 FSI 业务论证、区域信用用例地图、事件响应工作流、可衡量的性能记分卡、分阶段采用计划,以及把自适应数据布局转化为更快研究、更低维护和更有韧性的机构决策的实践指导。

18从动画分镜到自适应信用情报:东南亚 Liquid Clustering 蓝图

主题:

从动画分镜到自适应信用情报:东南亚 Liquid Clustering 蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从设计学院动画训练到机构级数据分析,演讲者支持东南亚债券和信用团队。该演讲者把分镜、视觉层级、场景连续性和迭代制作,转化为面向机构决策者的受管数据建模、自适应表设计和快速市场调查。

描述:

动画从分镜开始。每一帧都有上下文、顺序、重点和连续性,但制作随故事变化而演变。信用分析有类似挑战。一次事件可能从价格变动开始,扩展为发行人调查,分支到担保和子公司,并以组合、流动性或再融资后果结束。为某一个场景设计的固定数据布局,可能使下一个场景的制作变得昂贵。

本环节讲述一名设计学院动画学生成为东南亚债券和信用市场机构级数据分析师的转型故事。创意教训不是装饰。它是信息架构:把注意力引向正确的主体,保持帧与帧之间的连续性,使关系可见,并在不重建全部作品的情况下修改构图。这些原则成为使用 Databricks Liquid Clustering 的自适应信用数据平台的基础。

起点环境依赖静态的日期和国家分区、周期性 ZORDER 作业、复制的分析抽取和针对查询的数据集市。它对计划报告表现尚可,但当市场问题变化时就会吃力。违约担忧可能需要按发行人家族分组。再融资事件可能需要到期年份分析。流动性冲击可能需要工具和场所细节。工程师通过增加分区、重写表或再产生一份抽取来响应,从而增加成本和不一致。

目标架构保留一个受管的分析基础,同时允许物理布局演变。原始来源捕获工具参考数据、发行人层级、招募说明书条款、评级、价格、交易、交易商报价、曲线、FX、公司行为、财务报表、契约、头寸和分析师决策。一致化模型标准化发行人和证券标识符、货币、日期、实体关系和来源权威。Unity Catalog 治理所有权、访问、血缘和区域数据边界。

Liquid Clustering 在选定表上取代刚性分区和 ZORDER 假设。团队基于真实访问模式指定聚类键,或在支持的地方启用自动聚类。随着新数据写入和 OPTIMIZE 运行,相关记录被逐步共置。如果调查模式改变,聚类键可以改变,而无需立即重写全部历史文件。旧数据保持可读,而未来的维护逐渐反映新的构图。

技术演示把一次信用事件当作一连串场景。第一场检测利差走阔并校验最新观察。第二场打开发行人层级并定位担保人和关联实体。第三场重建债务到期、契约、票息、赎回和担保条款。第四场连接头寸、限额和交易对手。第五场比较新加坡、印度尼西亚、马来西亚、泰国、菲律宾和越南的同业。第六场应用降级、违约、回收、FX、流动性和再融资情景。每一场都从针对其选择性筛选优化过的受管表中取数。

蓝图定义一次键选择研讨会。分析师从实际笔记本、仪表板和事件复盘中识别高价值筛选和连接。工程师刻画基数、倾斜、增长、文件大小和并发写入行为。平台团队对照代表性工作负载测试候选键。治理团队核验布局选择不会削弱保留、驻留或访问控制。商定的设计被版本化、基准测试,并在重大市场状态变化后审查。

运营化包括预测性优化或计划的 OPTIMIZE、查询历史监控、数据跳过统计、文件布局健康、运行时兼容性和成本控制。完全重写保留给证据证明其合理的情况。团队区分增量适应和强制重新聚类,并记录由此产生的计算权衡。流式、物化视图、受管摄取、Delta 和 Iceberg 能力对照当前产品支持进行检查,而不是假定它们相同。

迁移路线图按分镜编排。第一帧对当前平台做基准测试。第二帧选择一张高增长的价格表或交易表。第三帧启用 Liquid Clustering 并验证关键查询。第四帧加入信用事件和组合敞口表。第五帧在适当的地方引入自适应或自动键管理。第六帧演练一次区域压力事件,并度量分析师从新问题重新开始分析的速度。第七帧在资产类别之间标准化该模式,而不强迫每一张表采用同一设计。

转型教训是,强大的数据平台不会冻结第一次构图。它保留权威故事,同时允许重点移动。Liquid Clustering 提供物理适应性;受管模型、血缘、测试和分析师判断提供意义。它们共同创造一种可复用的数据武器,用于在东南亚信用市场改变方向时迅速重新开始分析。

受众收获:

参与者将获得转型叙述、目标架构、事件驱动演示、聚类键研讨会、优化和治理检查清单、分阶段迁移分镜,以及把刚性的东南亚信用数据转化为支持快速分析重启的自适应情报的生产蓝图。

19为亚洲自营交易公司用 Databricks Apps 构建受管暗池控制应用

主题:

为亚洲自营交易公司用 Databricks Apps 构建受管暗池控制应用

重点:

聚焦于架构

演讲者背景:

从内部娱乐与媒体制作到自由应用开发,演讲者为自营交易公司和中小企业构建机构级本地 AI 解决方案。该演讲者把视觉制作、应用工程、工作流设计和务实的业务交付结合起来,把受管数据和模型变成可用的决策应用。

描述:

暗池监督不是再做一个仪表板就能解决的。自营交易公司需要一个交互式控制应用,连接客户、交易员、主管、合规、监察、运营、风险和技术,同时不让每个用户看到相同的数据或拥有相同的权限。在亚洲,设计必须处理碎片化场所、本地市场规则、多个法律实体、跨境数据限制、多语言用户、不重叠的交易时段,以及对可疑或异常活动的不同定义。

本环节提出使用 Databricks Apps 的参考架构,把受管的 Lakehouse 数据、分析和 AI 模型转化为运营中的暗池控制应用。应用作为容器化服务运行在 Databricks 无服务器平台上,并连接 Databricks SQL、Unity Catalog 数据、模型服务端点、向量检索、作业和已批准的外部服务。开发者可以根据所需交互模型使用 Streamlit、Gradio、Dash、Flask、FastAPI 或受支持的 JavaScript 框架。

架构避免把数据不必要地导出到单独治理的 Web 技术栈。订单、意向报价、成交、场所事件、参考价格、客户分类、交易员授权、监察警报、头寸、限额和调查记录保留在受管平台资源中。应用通过其配置的身份查询已授权数据,并把已批准的工作流记录写回受控表。这减少了重复副本和基础设施,但并不意味着零延迟。性能仍然取决于 SQL 仓库、模型端点、查询设计、网络路径、并发和应用计算规模。

解决方案分开五种用户体验。客户收到被允许的执行质量摘要和案件状态,而看不到专有场所逻辑或其他客户。交易员查看自己的订单、成交、例外和被允许的流动性分析。主管看到交易台层面的集中度、异常订单规模、价格偏离、限额使用、撤销和未解决警报。合规和监察审查潜在的信息泄露、对倒活动、分层、幌骗、限制名单问题和异常互动模式。运营和技术监控入账中断、应用健康、数据新鲜度、失败作业和服务依赖。

Unity Catalog 提供表、视图、函数、模型和资源权限。应用授权使用服务主体进行受控资源访问,而用户授权可以保留登录用户的身份,以支持细粒度决策。行筛选器和列掩码保护客户身份、账户信息、交易员敏感字段和受司法管辖区限制的记录。独立的目录或模式可以隔离生产、调查和模型开发数据。每一次写回行动都记录用户、时间戳、来源记录、原因、原值、新值、批准状态和下游触发。

分析层计算执行落差、场所成交率、成交后价格偏移、价差捕获、订单成交比、撤销强度、价格影响、信息泄露、集中度,以及相对已批准行为的偏离。对话界面可以通过已批准的向量搜索和 Mosaic AI 服务检索政策、场所手册、既往案件和模型文档。回复必须引用受管来源,区分事实与模型推断,并避免做出自主的执法决策。

情景引擎允许授权用户调整成交量、参与率、价差、波动率、紧急程度、场所可用性和流动性假设。应用调用已批准模型来估计成交概率、预期影响、执行落差、资本占用和压力结果。主管可以比较继续、减少、改道路由、暂停或撤销等情景。重大行动仍受授权矩阵、双重控制和经场所认证的机制约束。

写回模式支持数据纠正和标注。授权分析师可以标记错误的场所映射、把误报警报分类、添加调查结果,或标注训练样本。事务被写入受控 Delta 表或已批准的运营服务,然后触发数据质量检查、模型评估工作流或再训练管道。禁止直接编辑权威交易记录;纠正使用仅追加调整、批准和对账模式。

生产控制包括 CI/CD、依赖锁定、密钥管理、私有连接、审计日志、应用遥测、速率限制、输入校验、提示注入测试、模型监控、韧性测试和灾难恢复。应用可以扩展其计算配置,但容量、并发、成本和启动行为必须对照亚洲开盘高峰进行测试。结果是一个受管控制界面,而不是交易所控制、订单管理系统、独立监察或人工问责的替代品。

主管同时充当教练和制动系统。教练质疑交易员的论点、规模、流动性假设和退出计划。制动执行止损,阻止未经授权的越跌加仓,暂停异常自动化,并在资本受到威胁时要求降低风险。应用支持从教练到警告、硬性止损和紧急行动的递进。跟随太阳式交接在亚洲办公室之间传递严重程度、所有者、下一步行动、来源新鲜度和截止时间。开盘检查校验馈送、限额、模型和场所依赖,而行动后复盘捕获剩余敞口、客户影响、运营中断和经验教训。保全本金始终优先于最大化短期回报。

受众收获:

参与者将获得面向亚洲暗池监督的端到端 Databricks Apps 架构,包括基于角色的体验、Unity Catalog 安全、执行分析、AI 检索、情景模拟、受管写回和生产控制。他们还将获得从教练到硬性止损的工作流,帮助主管质疑决策、执行纪律、协调经认证的干预,并通过可问责的人工判断保护资本。

20把暗池数据转化为亚洲交易员、主管、客户和控制团队的受管决策

主题:

把暗池数据转化为亚洲交易员、主管、客户和控制团队的受管决策

重点:

聚焦于业务和 FSI

演讲者背景:

从内部娱乐与媒体制作到自由应用开发,演讲者为自营交易公司和中小企业交付机构级本地 AI 应用。该演讲者把以受众为中心的设计、快速原型、工作流自动化和金融数据分析结合起来,使复杂的机构控制变得可理解、可运营。

描述:

暗池通过降低可见的市场影响、并允许参与者在公开订单簿之外寻求流动性来创造价值。它也制造监督挑战,涉及信息不对称、执行质量、客户公平、场所行为、利益冲突、监察和碎片化证据。对亚洲自营交易公司而言,这些关切跨越司法管辖区、法律实体、产品、货币、交易时段和监管预期。

本环节提出围绕 Databricks Apps 构建的业务运营模式。团队不必把分析结果导出到单独维护的门户,而可以直接在 Databricks 平台上构建交互式数据和 AI 应用。应用成为跨越客户、交易员、主管、监察、合规、运营、模型风险和技术的共享控制界面,同时权限和底层数据仍通过 Unity Catalog 受管。

客户体验提供已批准的执行质量报告、成交状态、价格基准、案件提交,以及与客户授权相称的解释。它不揭示另一名客户的活动、专有撮合逻辑或敏感流动性来源。交易员体验呈现个人订单、成交、成交后价格偏移、例外、流动性状况和警报。主管体验汇总交易台敞口、异常决策、重复撤销、集中度、限额消耗和未解决调查。

合规和监察获得专门工作流。他们可以把订单与市场状况比较,检测可疑模式,在法律批准的地方审查通信或政策证据,记录处置,并保留调查轨迹。运营对账订单、成交、分配、费用、确认和下游账簿。模型风险团队审查特征定义、验证结果、漂移、误报和版本历史。一个应用不必暴露一个通用屏幕;它在受管资源之上交付特定于角色的界面。

业务价值来自减少交接。今天,一条警报可能经过电子表格、截图、电子邮件、聊天和工单系统。上下文丢失,重复调查开始,决策难以重建。Databricks App 可以把来源数据、计算、政策、证据、评论、批准和结果放在一个受控工作流中。数据录入表单允许授权用户纠正分类或添加标签,而事务性写回和批准规则保护权威记录。

交互式情景分析支持困难决策。交易员或主管可以改变参与率、紧急程度、订单规模、场所集合、价差、波动率或流动性假设,并收到市场影响、成交概率、执行落差和压力损失的更新估计。系统可以建议问题和呈现证据,但不会自主指控交易员、披露客户信息、路由订单或启动紧急终止开关。

亚洲设计承认本地差异。香港、新加坡、日本、韩国、澳大利亚和东盟市场在场所结构、披露、隐私、客户分类、数据驻留、监察预期和市场时间上各不相同。因此,配置把全球控制原则与司法管辖区特定规则分开。多语言界面可以改善采用,但对法律和合规内容而言,受控术语和已批准译文是必要的。

Databricks Apps 可以降低基础设施开销,因为团队不必为每个用例构建单独的应用托管技术栈。无服务器托管、工作区部署、基于 OAuth 的认证、应用身份,以及与 Databricks 服务的集成,缩短了从模型到受管工作流的路径。然而,业务论证必须包括应用计算、SQL 和模型服务成本、运营、测试、支持和高峰容量要求。

成功度量包括从警报到确认的时间、调查周期时间、证据完整的警报百分比、误报处置、对账中断、未经授权的数据访问尝试、应用可用性、用户采用、情景周转时间和每次调查成本。分阶段推出从只读的执行质量和监察视图开始,然后引入案件管理、受管注释、情景分析、模型反馈和经过仔细批准的运营集成。

战略结果不只是一个更快的 Web 应用。它是一个共同的、感知权限的运营环境,帮助每个利益相关方基于同一受管证据行动,同时保留适当的职责分离。这改善决策速度、客户透明度、监督一致性和机构问责,而不会把权威集中到一个不透明的 AI 模型中。

运营原则是生存先于利润最大化。交易台主管既是教练也是制动系统。教练检验投资论点,审查流动性和退出假设,改进规模,并把有纪律的信念与情绪化升级分开。制动角色执行止损、降低头寸、暂缓额外限额、阻止未经授权的越跌加仓、暂停算法,或在资本受到威胁时要求平仓。管理报告区分活动与有效性。目标不是最大化警报或强制干预,而是尽早识别重大风险、减少可避免的损失、改善交易员行为,并高效解决正当案件。复盘按策略、流动性、波动率和授权进行调整,使负责任的风险承担不受惩罚。跟随太阳式交接在亚洲各交易时段之间保留所有权和决策证据。

受众收获:

与会者将获得亚洲 FSI 价值论证、利益相关方运营模式、基于角色的暗池应用设计,以及可衡量的控制框架。他们将理解 Databricks Apps 如何统一教练、警告、硬性止损、调查、模拟和证据工作流,同时保留客户保密、职责分离、司法管辖区控制、人工问责,以及保护本金先于最大化回报的原则。

21从娱乐制作到机构暗池控制:Databricks Apps 转型蓝图

主题:

从娱乐制作到机构暗池控制:Databricks Apps 转型蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从内部娱乐与媒体制作到自由应用开发,演讲者为自营交易公司和中小企业构建机构级本地 AI 应用。该演讲者把制作规划、受众体验、内容管道、快速迭代和发布纪律,转化为面向复杂多利益相关方工作流的受管金融应用。

描述:

娱乐制作把剧本、资产、专业工作、审查和截止时间转化为一次受众体验。机构应用交付需要同样的协同。数据科学家可能产出强模型,分析师可能定义有价值的度量,合规团队可能写出严格的控制,但如果用户必须离开自己的工作流、导出数据或操作另一个治理不善的系统,结果仍然会失败。

本环节讲述从内部娱乐制作转向为自营交易公司和中小企业进行自由应用开发的转型故事,然后把这些教训转化为暗池控制的 Databricks Apps 蓝图。核心教训是,应用是最终的制作层。它必须把正确的证据呈现给正确的受众,保留职责分离,支持快速迭代,并在市场高峰事件期间保持可靠。

起点状态包含笔记本、模型输出、仪表板、下载的 CSV 文件、单独的 Web 服务器、手工配置的虚拟机、独立认证、复制的数据库和碎片化的支持所有权。每一个新的利益相关方都再制造一个界面或抽取。安全团队必须审查额外的网络路径。开发者维护容器、路由、证书、负载均衡和部署脚本。数据纠正通过电子邮件返回,模型标签与原始事件脱节。

目标状态使用 Databricks Apps 作为受管交互层。容器化应用运行在 Databricks 无服务器平台上,获得应用身份,并连接已批准的 SQL 仓库、Unity Catalog 资产、作业、向量搜索和模型服务端点。Streamlit 或 Gradio 可以加速对话和分析界面;Dash 可以支持高度定制的可视化;Flask 或 FastAPI 可以提供受控服务模式。框架选择遵循可用性、并发、API、测试和可维护性要求。

蓝图有七条生产轨道。身份轨道管理单点登录、应用授权、用户授权和服务主体。数据轨道暴露整理后的订单、成交、场所、客户、基准、警报、案件、头寸和限额,而不创建不受管副本。分析轨道提供执行质量和监察度量。AI 轨道连接已批准的检索和模型服务。工作流轨道管理注释、批准、升级和证据。运营轨道覆盖日志、追踪、指标、成本、支持和事件响应。交付轨道提供源代码控制、自动化测试、环境晋升和回滚。

演示跟随一次异常暗池成交。监察模型标记异常规模、撤销行为、价格变动和互动集中度。主管打开应用,看到来源新鲜度、订单历史、市场基准、相关成交、客户分类、头寸影响和模型解释。合规收到带有案件历史和已批准政策检索的单独视图。交易员可以提供上下文,但不能编辑来源成交或关闭调查。每个利益相关方只看到被允许的数据和行动。

情景模块让主管修改订单规模、紧急程度、参与度、价差、波动率和可用流动性。已批准模型估计影响、成交概率、执行落差和潜在资本效应。类似 GPT 的界面可以根据受管程序、场所规则、模型卡和既往已批准案件回答问题。引用、置信度、模型版本和人工审查是必需的,这样对话便利才不会变成不受控的机构判断。

写回工作流闭合生产循环。如果分析师发现错误的证券映射,或把警报标注为已确认问题或误报,应用会创建仅追加的纠正或注释。授权审查者批准变更。数据质量检查运行,依赖表刷新,评估指标更新,再训练只能在模型治理流程下开始。原始记录、变更和批准保持可重建。

部署按版本推进。第一版提供只读的基于角色的视图。第二版加入调查案件和证据。第三版引入情景模拟。第四版加入受控注释和数据质量触发。第五版整合受管 AI 检索。第六版连接模型评估和再训练工作流。第七版在双重批准、允许列表 API、限额和紧急撤销之后,加入选定的运营行动。

转型以一条生产原则结束:便利不得跑在控制前面。直接的平台集成可以减少数据移动和基础设施负担,但延迟、韧性、权限、模型行为和成本仍然需要工程。Databricks Apps 把受管数据和智能包装成可用体验;机构政策和可问责的人决定应用被允许做什么。

交易台主管成为运营故事的中心人物。作为教练,主管改善决策质量,质疑薄弱假设,审查流动性,并培养有纪律的风险承担。作为制动系统,主管在情绪、运营差错、隐藏敞口或自动化威胁资本时介入。跟随太阳式连续性是生产要求:未解决案件在亚洲班次之间移动,带有所有者、严重程度、假设、证据状态、下一步行动和截止时间。开盘检查校验关键馈送、限额、模型和依赖。每一次重大事件之后,团队审查决策质量、系统行为、沟通、剩余敞口和控制改进,把事件变成更安全的发布和更强的教练机会。

受众收获:

参与者将获得转型叙述、七轨道架构、异常成交演示、从教练到硬性止损的旅程、受管 AI 模式、注释工作流和分阶段发布路线图。蓝图展示交互式应用如何加强交易员纪律、加速调查、保留证据,并赋能主管保护机构资本,同时不替代经认证的控制、独立合规或可问责的人工判断。

22为亚洲市场现场交易机器人构建 LTAP 控制平面

主题:

为亚洲市场现场交易机器人构建 LTAP 控制平面

重点:

聚焦于架构

演讲者背景:

从音乐制作公司和现场品牌键盘表演到自营公司 DevOps 现场工程,演讲者领导现场交易机器人部署。该演讲者把实时同步、有纪律的排练、生产可靠性、交易所连接、事件响应和基础设施自动化结合起来,为亚洲市场构建机构级交易系统。

描述:

现场交易机器人是一套运营系统,而不仅仅是一个算法。它必须接收市场数据、评估策略状态、提交和撤销订单、持久化配置、跟踪头寸、遵守限额、暴露健康状况,并支持立即的人工干预。在亚洲,同一台机器人可能面对不同的交易所协议、托管设施、交易日历、最小报价单位、限流、拍卖规则、货币、网络路径和监管控制。在实验室表现良好的系统,当开盘流量、部分连接、陈旧参考数据或不受控的重试循环遇到真实资本时,可能失败。

本环节提出机构级架构,使用 Databricks LTAP(湖仓事务分析处理)、Lakebase Postgres、Lakehouse Real-Time 和 Unity Catalog。LTAP 被当作架构而不是单一功能。它通过统一的存储和治理模型,把事务性工作负载和分析工作负载拉得更近,减少传统上为保持应用状态与分析对齐所需的单独 CDC、复制和服务系统。可用性与实现因云、区域和产品成熟度而不同,因此蓝图明确界定生产路径和回退路径。

Lakebase 提供应用开发者熟悉的运营 Postgres 接口。它存储机器人配置、策略部署记录、订单意图、工作流状态、确认、操作员行动、事件案件和已批准的控制参数。其计算层和存储层是分离的:无状态 Postgres 计算与 safekeeper、pageserver 和持久的云对象存储协同工作。这支持自动扩展、分支、只读副本、恢复和缩放到零的模式,而不迫使机器人团队发明专有的运营数据库接口。

架构不把交易所执行循环放在远程分析查询后面。对延迟关键的市场数据处理、交易前检查、订单路由和紧急终止开关,仍保留在现场或经认证的托管基础设施中。Lakebase 通过受控的异步接口接收持久的运营状态和监督事件。如果云连接中断,机器人必须在安全的降级模式下继续。本地限额、消息限流、序列检查、重复保护、断连即撤,以及场所原生紧急控制,在没有 Databricks 时仍然可以执行。

对于分析访问,LTAP 能力可以把 Postgres 变更作为 Delta 历史提供,而无需单独管理的外部 CDC 工具。当某项能力处于预览或不可用时,设计使用有文档的受管管道和对账流程。目标不是声称所有数据移动都消失。目标是去掉可避免的副本,同时为每一条权威流证明完整性、顺序、延迟、重放和恢复。

Lakehouse Real-Time 在受管的 Delta Lake 和 Apache Iceberg 表之上提供无服务器、低延迟、高并发的分析服务层。它由 Reyden 引擎驱动,面向需要亚秒级响应的运营分析、定制应用、仪表板和智能体工作负载。它向主管、风险、运营和工程提供机器人健康、交易敞口、执行质量、场所行为、订单成交比、延迟分位数、被拒绝订单、库存、成交后价格偏移和控制突破,而不再创建另一个专有服务存储。

端到端蓝图使用六个平面。边缘平面承载交易所网关、本地市场数据、机器人进程和经认证的控制。事务平面在 Lakebase 中持久化运营状态。分析平面在开放表中存储事件历史和派生度量。实时服务平面使用 Lakehouse//RT 进行高并发读取。治理平面使用 Unity Catalog 提供权限、发现和血缘。韧性平面覆盖缓冲、幂等、序列恢复、对账、区域故障转移、时钟同步和灾难演练。

一次现场事件跟随一个算法,它在场所确认延迟之后开始重复订单。边缘控制检测异常消息速率并启动本地制动。Lakebase 记录机器人状态、操作员确认和事件工作流。分析表重建市场状况、请求与响应序列、敞口和剩余订单。Lakehouse//RT 向数百名利益相关方分发当前的、感知权限的视图。团队可以判断原因是交易所延迟、策略逻辑、重复重试、陈旧配置还是网络行为。

生产就绪要求确定性的部署制品、已签名配置、基础设施即代码、硬件和内核基线、交易所认证、金丝雀发布、重放测试、混沌演练、容量基线、恢复目标和完整的审计证据。现场工程负责人把每一次发布都当作现场演出:乐器调好,通道测过,时序同步,回退排练过,并有一位可问责的指挥被授权停止演出。

受众收获:

参与者将获得聚焦亚洲的 LTAP 参考架构,涵盖现场机器人边界、Lakebase 事务状态、Delta 事件历史、Lakehouse//RT 分析、Unity Catalog 治理,以及有韧性的边缘到云集成。他们将理解何处可以去掉管道、何处对账仍然强制,以及如何在故障期间保留本地紧急终止开关、确定性恢复和资本保护。

23用 LTAP 和实时分析降低亚洲交易机器人的运营风险

主题:

用 LTAP 和实时分析降低亚洲交易机器人的运营风险

重点:

聚焦于业务和 FSI

演讲者背景:

从音乐制作公司和现场品牌键盘表演到自营公司 DevOps 现场工程,演讲者领导现场交易机器人搭建。该演讲者把制作时序、信号纪律、基础设施自动化、市场连接和事件领导力,带到可用性、控制和资本保护同等重要的机构级部署中。

描述:

交易机器人创造速度、一致性和规模,但它们也把运营风险压缩到毫秒。重复订单、陈旧配置、损坏的市场数据序列、时钟漂移、网络环路或不受控重试,可以在人理解事件之前耗尽限额。对亚洲自营公司而言,挑战被碎片化交易所、不同的认证程序、本地托管提供商、跨境支持、市场假期、货币敞口和跟随太阳式运营成倍放大。

本环节解释 Databricks LTAP、Lakebase Postgres 和 Lakehouse Real-Time 作为现场交易机器人周围机构数据基础的业务论证。目标不是把执行引擎搬进 Lakehouse。目标是减少运营应用与分析控制职能之间碎片化的数据栈,缩短从机器人事件到受管洞察的时间,并保留足够的证据以便监督、恢复和学习。

运营模式把执行权威与分析可见性分开。机器人和经认证的交易前控制留在场所附近。Lakebase 管理面向应用的状态,例如部署版本、策略配置、操作员批准、事件状态、维护窗口、控制证明和工作流行动。事务事件和变更通过可用的 LTAP 能力或受管回退管道流入受管分析历史。Lakehouse//RT 以高并发向交易台主管、风险、合规、运营、工程和高级领导层提供当前分析。

每个利益相关方收到不同的决策视图。交易员看到机器人状态、未完成订单、成交、库存、已批准参数和被允许的控制。交易台主管看到汇总敞口、回撤、限额使用、集中度、异常行为和未解决事件。风险看到 VaR、敏感度、清算假设、流动性调整后敞口和压力结果。运营看到连接、入账、对账、清算和结算中断。工程看到延迟、错误率、序列缺口、资源利用、发布状态和依赖健康。合规看到监察证据和已批准的变更历史。

首要业务收益是更快、支持更充分的干预。当算法正在产生风险时,主管不应等待落后数分钟的复制仓库。实时分析层可以把新鲜的受管度量分发给许多用户,而无需维护另一套专用服务系统。然而,平台永远不替代本地紧急终止开关。云或分析不可用,不得阻止订单撤销、限流执行、降低风险或安全关机。

一个实践情景跟随一台机器人度过波动的亚洲开盘。消息延迟上升,成交变为部分成交,报价深度消失,策略增加重试。本地控制层检测消息速率突破并停止新订单。Lakebase 记录确认并指派事件。分析环境结合事件序列、市场状况、头寸、限额、部署版本和基础设施遥测。利益相关方决定是恢复、缩小规模、放宽控制、回滚软件,还是在该时段停用策略。

财务论证通过避免的损失和运营效率来衡量,而不是仅仅通过查询速度。指标包括检测时间、确认时间、停止时间、剩余敞口、对账完整性、重复订单率、失败部署率、平均恢复时间、手工数据副本数量、基础设施成本、审计证据完整性和重复事件。性能度量包括新鲜度、p95 和 p99 查询延迟、并发、事件积压和恢复吞吐。

亚洲推广从一台机器人、一个场所和一个权威事件模型开始。第一阶段盘点系统、控制、身份、时钟和数据所有权。第二阶段在 Lakebase 中捕获部署和事件状态。第三阶段产生受管分析历史和独立对账。第四阶段引入 Lakehouse//RT 仪表板,用于高并发运营分析。第五阶段跨场所扩展并引入区域灾难恢复。第六阶段支持经过仔细治理的 AI 助手,用于事件分诊、操作手册检索和证据组装,绝不用于自主订单决策。

领导教训来自现场音乐制作。当观众到来之前,时序、监控、交接和回退路径已经排练过,演出才会成功。交易机器人值得同样的纪律,因为观众是资本。LTAP 简化数据架构,但机构安全仍然取决于清晰的权威、独立控制、经过测试的故障转移,以及在条件超出设计时准备好停止系统的人。

受众收获:

与会者将获得 LTAP 的亚洲 FSI 业务论证、利益相关方运营模式、机器人事件决策工作流、可衡量的风险与价值记分卡,以及分阶段部署路线图。他们将学习 Lakebase 和 Lakehouse//RT 如何改善运营可见性,同时把执行控制留在本地、对账权威记录,并把资本生存置于平台雄心之前。

24从现场键盘同步到机构交易机器人:LTAP 转型蓝图

主题:

从现场键盘同步到机构交易机器人:LTAP 转型蓝图

重点:

转型故事与技术蓝图

演讲者背景:

从音乐制作公司和现场品牌键盘表演到自营公司 DevOps 现场工程,演讲者领导现场交易机器人部署。该演讲者把同步、声音检查、冗余通道、提示纪律和现场事件恢复,转化为面向亚洲交易所和高压交易运营的机构级自动化。

描述:

现场键盘表演依赖时序、可靠信号、排练过的转换、舞台监控,以及设备故障时的立即恢复。现场交易机器人在同样严苛的条件下运行,区别在于每一次错过的提示或不受控循环都可能影响资本。系统必须与场所保持同步,保留状态,遵守限额,传达健康状况,并安全失败,同时各地团队确切理解发生了什么。

本环节讲述从音乐制作公司和现场品牌键盘工作,转向领导自营公司现场交易机器人 DevOps 现场工程团队的转型故事。它把制作习惯转化为技术蓝图:声音检查变成开盘就绪;节奏同步变成时钟和序列控制;冗余信号路径变成有韧性的连接;舞台监听变成可观察性;曲目单变成部署配置;切断声音的权威变成经认证的紧急终止开关。

起点架构在自营交易中很常见。每台机器人都有本地数据库、配置文件、日志收集器、监控仪表板、部署脚本和复制的分析副本。运营团队维护 CDC 流程、消息队列、缓存和仓库加载。事件发生时,时间戳不一致,配置历史不完整,副本滞后,调查者手工拼接证据。架构在边缘很快,但在其他地方都是碎片化的。

目标状态使用 LTAP 缩小事务状态与分析证据之间的差距。Lakebase 提供与熟悉的驱动和框架兼容的受管 Postgres 环境。其无状态计算与涉及 safekeeper、pageserver 和云对象存储的持久存储分离。它可以支持机器人管理应用、工作流状态、配置批准、事件案件和操作员行动,同时提供自动扩展、分支、只读副本、恢复和高可用能力。

蓝图纠正一个危险的误解:统一存储并不意味着把硬实时执行循环放在云中。交易所时段、市场数据解码、策略计算、交易前检查、订单路由和紧急控制仍留在现场或托管设施。本地日志在断连期间缓冲事件。每条消息携带稳定标识符、序列、事件时间、处理时间、策略版本和场所时段。重连使用幂等重放和对账,而不是盲目重试。

随着受支持的 LTAP 能力成熟,运营变更可以变成受管 Delta 历史,而无需外部运营的 CDC 技术栈。Lakebase Change Data Feed 可以从 Postgres WAL 把插入、更新和删除捕获到受管 Delta 历史。因为发布状态和区域支持各不相同,转型包括兼容性门控和回退摄取模式。在完整性、顺序、延迟、模式演化和恢复于压力下得到证明之前,不移除任何组件。

Lakehouse Real-Time 增加分析性能层。它以高并发、亚秒级目标查询受管 Delta 和 Iceberg 表,并由 Reyden 引擎驱动。主管、风险、运营、工程、仪表板、应用和受控智能体可以检查当前机器人行为,而无需另一份专有服务副本。Unity Catalog 在分析资产之间维持一致的访问和治理。

演示跟随新加坡、香港、东京、首尔或其他受支持区域的部署日。团队核验交易所时段、网络路由、时钟、证书、参考数据、账户映射、头寸限额、断连即撤和回滚包。一台金丝雀机器人以降低的限额启动。遥测确认延迟、序列完整性、订单确认和头寸对账。只有在签字验收之后,团队才晋升完整部署。

在该时段,一次应用变更导致重复的订单重试。现场制动阻止新风险,并通过经认证的通道发送撤销。Lakebase 记录部署、操作员行动和事件状态。Delta 历史保留事件序列。Lakehouse//RT 提供代码版本、配置、市场状况、订单、成交、头寸、限额和基础设施遥测的统一视图。团队识别根因、回滚、对账剩余敞口,并决定条件是否证明受控重启是合理的。

迁移像排练一样推进。第一版标准化身份、时钟、模式和事件契约。第二版引入不可变的部署和控制证据。第三版把工作流状态放入 Lakebase。第四版验证从运营到分析的历史。第五版引入 Lakehouse//RT 用于高并发监督。第六版演练断连、区域故障、积压重放、损坏的配置和场所中断。第七版使用可复用自动化和本地认证按市场扩展。

最后的教训是,架构上的优雅不能替代运营纪律。LTAP 可以去掉冗余的同步层、缩短分析延迟并统一治理,但它不能决定机器人是否应该交易。机构级自动化需要排练过的人、明确的权威、本地安全控制、独立对账,以及在技术缺陷变成资本事件之前停止演出的勇气。

受众收获:

参与者将获得转型叙述、从边缘到 Lakehouse 的蓝图、部署日演示、事件恢复旅程、LTAP 兼容性策略和分阶段亚洲推广。他们将理解音乐制作纪律如何转化为同步的事件处理、有韧性的连接、受管运营历史、高并发分析、经认证的紧急终止开关,以及更安全的机构交易机器人运营。

25从 WAL 提交追踪到页面重建:面向亚洲 FSI 的 Lakebase 可靠性与可观察性

主题:

从 WAL 提交追踪到页面重建:面向亚洲 FSI 的 Lakebase 可靠性与可观察性

重点:

分布式系统可靠性与高级可观察性

演讲者背景:

机构平台工程负责人,专长于分布式 Postgres、操作系统可观察性、网络可靠性和受监管金融基础设施。该演讲者为亚洲交易、风险和运营团队设计有韧性的数据服务,把底层存储、数据包和恢复行为转化为生产系统的可衡量控制。

描述:

亚洲金融机构需要在压力下仍然可解释的数据库,而不是仅仅在基准测试中很快的数据库。交易应用可能在提交订单、更新限额或持久化调查状态的同时,基础设施组件跨越可用区、云对象存储、无状态计算、安全边界和多个运营团队。当延迟上升时,工程师必须判断延迟起源于应用代码、Postgres 执行、锁争用、WAL 确认、网络路由、pageserver 重建、缓存行为、对象存储还是下游分析。

本环节对 Lakebase 架构进行面向可靠性的拆解。传统 Postgres 把计算、WAL 和数据文件放在同一台机器附近。Lakebase 把无状态 Postgres 计算与由 safekeeper、pageserver 和云对象存储组成的分布式存储层分开。safekeeper 在已提交事务被确认之前持久记录 WAL,而 pageserver 支持读取并把持久状态写入受管对象存储。这种分离实现自动扩展、缩放到零、只读副本、写时复制分支和快速故障转移等能力,但它也改变了工程师必须观察的信号。

演练从 INSERT 或 UPDATE 开始。计算节点生成 WAL 并发送给 safekeeper。可靠性分析跟随提交延迟、LSN 进展、法定人数确认、连接状态、重传和故障边界。然后追踪 pageserver 如何消费 WAL 并使数据库页面可供计算使用。当计算发生缓存未命中时,读取路径可能需要对应于特定 LSN 的页面。本环节解释概念上的重建路径,而不把未文档化的实现细节、算法、介质类型或内部协议当作契约性的产品行为。

可观察性组织为四层。应用遥测记录请求身份、策略或服务、事务边界、重试、超时类别和业务影响。Postgres 遥测记录计划、会话历史、等待事件、规范化语句统计、DDL 变更、数据库计数器和日志。主机和运行时遥测覆盖 CPU、内存、连接压力、缓存有效性、死锁、行操作和工作集行为。网络遥测度量 DNS、TLS、连接建立、丢包、重传、RTT、路由变化和跨可用区依赖。

Lakebase 可观察性系统表可以在 system.lakebase 模式中暴露查询计划、活动会话历史、等待事件、模式变更、数据库和计算健康以及 Postgres 日志。内置指标和活动视图补充这一遥测。本环节演示如何把应用追踪与 Postgres 会话、计划、等待事件和基础设施区间关联起来,然后把发现附着到服务水平目标和事件时间线。因为当前遥测保留和预览状态可能限制历史覆盖,受监管机构应把所需证据导出到已批准的长期监控和保留系统。

高级网络部分使用受控的数据包元数据,而不是不受限制的载荷捕获。团队建立允许列表流、私有端点、感知身份的访问、出站限制、防火墙策略和零信任分段。在组织政策和平台支持允许的地方,eBPF 或等效的操作系统插桩可以观察套接字延迟、重传、连接抖动、调度延迟和系统调用。当载荷检查可能暴露凭据、订单、客户信息或受监管通信时,它被最小化、令牌化或禁止。

一次贴近现实的亚洲事件在区域时段同时开盘时开始。连接数上升,一次应用部署引入糟糕的查询计划,一次路由变化增加网络 RTT。数据库仍然可用,但 p99 事务延迟突破目标。团队关联应用跨度、会话历史、等待、计划变化、CPU 压力、缓存行为和网络证据。它区分存储持久性与计算可用性,扩展受影响的计算,回滚应用,核验 LSN 进展,并确认已提交事务保持完整。

混沌工程验证恢复,而不是制造不受控的失败。实验首先在分支或隔离环境中使用合成或掩码工作负载运行。情景包括计算重启、可用区受损、连接耗尽、丢包、依赖超时、陈旧 DNS、对象存储限流和延迟的下游消费者。护栏定义爆炸半径、中止条件、交易日历排除、客户影响限制、独立监控和具名恢复所有者。

对于多集群金融环境,蓝图建立黄金信号、追踪传播、标准化标签、同步时钟、操作手册自动化和区域所有权。恢复测试度量 RTO、RPO、事务歧义、重连行为、积压重放和证据完整性。即时分支支持类似生产的诊断,而无需复制整个数据库,但访问、掩码、保留和测试数据控制仍然强制。

核心教训是,只有当团队理解新的故障域时,存储分离才会改善韧性。机构可靠性来自把业务事务与数据库、存储、计算和网络证据关联起来,然后反复证明自动恢复既保持正确性也保持可用性。

受众收获:

参与者将获得底层 Lakebase 可靠性模型、可观察性分类、追踪关联方法、零信任网络模式和受控混沌工程计划。他们将学习如何诊断提交和读取路径延迟,区分计算故障与持久存储风险,跨亚洲区域验证恢复,并在不暴露敏感交易或客户数据的情况下保留审计证据。

26在 Lakebase 和 Lakehouse 上构建跨越亚洲的高吞吐金融事件流

主题:

在 Lakebase 和 Lakehouse 上构建跨越亚洲的高吞吐金融事件流

重点:

高吞吐事件流架构

演讲者背景:

机构事件平台架构师,专长于 Postgres WAL、流语义、有状态处理和高流量金融数据。该演讲者为亚洲交易、支付、风险和监察工作负载设计受管事件系统,在区域基础设施之间平衡吞吐、延迟、可重放性、确定性恢复和运营控制。

描述:

金融事件流很难,因为速度和正确性不可分割。一家亚洲机构可能同时从许多市场摄取订单、成交、价格、支付、头寸、保证金变化、监察信号和客户互动。平台必须在处理倾斜、模式演化、迟到数据、消费者失败、流量突发和司法管辖区边界的同时,保留身份、顺序、血缘和重放。如果测量排除了网络传输、持久确认、状态访问或下游对账,亚毫秒的宣称就没有意义。

本环节对围绕 Lakebase、Lakebase Change Data Feed、Delta Lake、Apache Iceberg 和有状态流处理的高吞吐事件流进行架构拆解。Lakebase 为运营应用提供事务性 Postgres 界面。其分离的计算和存储架构使用无状态计算,配合 safekeeper、pageserver 和云对象存储。原生 Change Data Feed 可以从 Postgres WAL 把插入、更新和删除捕获到 Unity Catalog 受管的 Delta 历史,包括变更类型、LSN、事务 ID 和时间戳。

本提案仔细区分 LTAP 架构与当前可用功能。LTAP 旨在减少传统上用于同步运营系统和分析系统的外部 CDC、复制和转换技术栈。当前 Lakebase CDF 是一项带有已文档化批处理行为的公开预览能力,因此不应被表述为普遍的零延迟路径。关键消费者必须验证新鲜度、完整性、模式处理、支持的类型、区域可用性和失败行为。当要求超出功能范围时,受管流式或消息路径仍然合适。

事件契约从稳定的业务标识符和显式语义开始。每条记录携带来源、实体、事件类型、事件时间、摄取时间、序列、事务身份、模式版本、纠正状态、法律实体、司法管辖区和敏感度类别。订单和成交保留场所和时段标识符。支付保留幂等键。头寸事件标识权威账簿和估值上下文。契约定义更新是替换、增量、撤销还是补偿事件。

恰好一次处理被当作端到端结果,而不是消息 broker 的口号。来源可能重新投递,网络可能重试,消费者可能重启,写入端可能部分提交。蓝图结合不可变事件身份、幂等生产者、去重窗口、持久检查点、事务性写入端操作、单调序列检查,以及对照权威记录的对账。当副作用不能参与同一事务时,发件箱、收件箱或补偿控制模式使歧义可见。

分区和路由跟随业务争用。单一全局分区保留顺序但破坏规模。随机分布可以扩展,但可能打破实体顺序。因此,设计按账户、订单、工具、支付、组合或其他权威域路由,然后通过加盐、分层路由或工作负载隔离管理热点键。消费者组使用测得的处理时间、批大小、拉取行为、检查点开销、状态增长和下游容量来调优,而不是仅仅使用最大并行度。

有状态处理为敞口、流动性、欺诈、市场影响或客户行为维护窗口。快照和检查点必须在负载下保持持久,而不阻塞管道。本环节覆盖增量状态、水位线、迟到事件政策、保留、压缩、状态存储规模、检查点验证和恢复测试。一次有效的恢复测试重放已知区间,并证明头寸、现金、限额、警报和聚合与独立系统一致。

一个亚洲开盘情景演示该架构。一波成交和价格到达,同时一个工具变成热点键。消费者滞后上升,检查点时长扩大,下游风险表限流写入。自适应路由隔离该工具,背压保护系统,优先通道保留限额和紧急终止开关事件。操作者看到吞吐、事件时间滞后、处理延迟、状态大小、重试、重复率、检查点年龄、网络传输和估计成本。

延迟模型分开生产者时间、网络时间、持久摄取时间、队列时间、处理时间、状态访问、写入端提交和服务时间。对于有界的内存阶段,亚毫秒处理可能实现,但区域端到端持久延迟必须使用现实的分位数和失败条件来报告。时钟同步、硬件放置、压缩、序列化和跨区域路由被明确测试。

混沌测试终止消费者、在隔离环境中损坏检查点、延迟分区、耗尽连接、注入重复、重排消息并限流写入端。成功不仅意味着自动重启,还意味着确定性结果、有界的积压恢复、保留的授权和完整的事件轨迹。Unity Catalog 治理由此产生的 Delta 历史和派生表,而独立对账确认没有任何权威事件消失在一个成功的仪表板后面。

结果是一种把吞吐当作受控金融能力的流架构。它按域扩展,通过对账证明投递语义,并对组件延迟、分析新鲜度和业务级终局性之间的差别保持诚实。

受众收获:

与会者将获得事件契约模板、路由和分区框架、恰好一次控制模型、有状态检查点策略、延迟预算,以及面向亚洲 FSI 的混沌测试计划。他们将理解 Lakebase CDF 和受管 Lakehouse 表如何融入高吞吐管道,而不夸大新鲜度、忽视重复,或牺牲重放、对账和财务正确性。

27用 Lakebase、Lakehouse 数据和分布式检索优化大规模金融 AI 推理

主题:

用 Lakebase、Lakehouse 数据和分布式检索优化大规模金融 AI 推理

重点:

优化大规模 AI 推理基础设施

演讲者背景:

机构 AI 基础设施架构师,专长于模型服务、分布式检索、Postgres 应用状态和受管金融数据。该演讲者为亚洲银行、保险公司、交易公司和金融科技公司设计高并发推理平台,把内存效率、延迟工程、韧性、隐私和模型风险控制结合起来。

描述:

金融服务中的大规模生成式 AI 基础设施必须优化的不只是每秒 token 数。它必须保护客户和交易数据、执行授权、维护证据、控制成本、在提供商或区域故障中存活,并在市场事件或服务高峰期间交付可预测的延迟。在亚洲,多语言提示、本地数据驻留规则、跨境支持团队和不均衡的区域容量,使推理架构成为一项机构风险决策。

本环节提出使用受管 Lakehouse 数据、Lakebase Postgres、模型服务基础设施和分布式检索的技术蓝图。Lakebase 存储面向应用的状态,例如会话、用户偏好、智能体检查点、批准、工具状态、作业所有权和请求元数据。受管 Delta 或 Iceberg 表保留已批准的知识、特征、评估集、交互历史和证据。检索服务和 SQL 端点只暴露对请求用户、法律实体、地理和目的已授权的数据。

推理平面分解为准入控制、提示构造、检索、模型执行、工具调用、输出校验和证据捕获。每个阶段都有延迟和成本预算。请求按交互性、紧急程度、上下文大小、模型要求、司法管辖区和数据敏感度分类。交互式客户或交易员助手获得严格超时和有界工具链。研究和文档分析任务使用异步队列、持久状态和进度报告,而不是占用稀缺的交互容量。

内存管理决定可用吞吐。本环节考察模型权重、KV cache、激活、分配器碎片、主机内存、GPU 内存、传输开销和上下文增长。技术包括经过验证的量化、张量或流水线并行、分页注意力、前缀复用、上下文截断、语义压缩、缓存驱逐和特定于工作负载的模型路由。每一项优化都按准确性、数值稳定性、可解释性和受支持硬件评估,而不是仅仅为了基准性能而采用。

连续批处理合并兼容请求,使加速器在新工作进入活动批次时保持利用。调度器在吞吐与首 token 时间、token 间延迟、截止时间、上下文长度和公平性之间取得平衡。除非系统支持分块预填充、抢占或独立通道,长提示可能阻塞短请求。容量控制包括最大 token 数、并发限制、背压、断路器、队列年龄,以及关键操作的优先级类别。

检索被当作分布式数据系统。一次查询可能需要词法搜索、向量相似度、结构化筛选、图关系、重排序和权限检查。架构按地理、业务域、文档权威或租户分区,而副本支持读取负载和区域韧性。元数据筛选在向量搜索之前或同时执行,使未授权候选不会泄漏进提示。索引新鲜度、嵌入版本、文档版本、删除传播和来源引用是可观察维度。

Lakebase 支持低延迟应用状态,并可以为面向查找的模式服务同步的 Lakehouse 数据。对于大型分析或检索工作负载,计算按查询形态选择,而不是强迫所有请求经过 Postgres。系统可以在同一治理模型下使用向量搜索、Lakehouse Real-Time、SQL 仓库、缓存或专用检索组件。这避免了一个虚假承诺:单一数据库引擎对每一种运营、分析和语义工作负载都是最优的。

一个亚洲交易助手情景说明该设计。数百名用户在波动事件期间提问。检索需求在政策、市场评论、头寸、限额和事件操作手册之间激增。准入控制保护关键请求。感知权限的路由使交易台和司法管辖区保持隔离。缓存的公共上下文被复用,而私有头寸上下文按用户获取。连续批处理改善模型利用,长时间研究任务转到异步工作者。

可观察性把用户体验连接到基础设施。指标包括首 token 时间、token 间延迟、端到端 p50、p95 和 p99、队列年龄、每秒 token 数、批次占用、缓存命中率、检索召回、重排序延迟、工具时长、GPU 内存、被拒绝请求、每任务成本、引用覆盖和政策拒绝。追踪保留模型版本、提示模板、检索来源、工具调用、输出检查和批准,而不保留被禁止的敏感内容。

混沌实验移除模型副本、饱和检索分片、延迟嵌入服务、使凭据过期、损坏缓存或隔离一个区域。恢复路由到已批准的替代方案,降级非关键功能,并在 Lakebase 中保留请求状态。测试确认故障转移不会绕过地理、模型或数据权限。评估门控比较量化、路由、回退或检索变更前后的质量。

最终架构把 AI 推理当作受监管的分布式服务。性能来自把模型、内存、批处理、检索和状态存储与工作负载匹配。机构信任来自感知权限的数据访问、可复现评估、可观察决策、有界自主权,以及在亚洲各区域安全失败的经过测试的能力。

受众收获:

参与者将获得推理参考架构、GPU 内存模型、连续批处理调度框架、分布式检索设计、可观察性记分卡,以及面向亚洲 FSI 的混沌测试计划。他们将学习如何在延迟、吞吐、成本、准确性、隐私、区域韧性和模型治理之间取得平衡,同时使用 Lakebase 保存持久的应用和智能体状态。

28为跨越香港和新加坡的智能体 FSI 系统构建法律实体隔离

主题:

为跨越香港和新加坡的智能体 FSI 系统构建法律实体隔离

重点:

分布式系统可靠性与高级可观察性

演讲者背景:

机构数据与 AI 平台架构师,专长于法律实体隔离、分布式系统可靠性、可观察性和零信任控制。该演讲者为亚洲银行、交易公司和保险公司设计受管智能体平台,把监管边界转化为可执行的身份、运行时策略、网络控制、证据和恢复程序。

描述:

一家国际银行可以把香港和新加坡数据存放在同一个受管 Lakehouse 上,但 Entity HK 和 Entity SG 在法律上仍然分立。共享基础设施不能变成共享授权。分析香港流动性的智能体不得检索新加坡客户记录,不得通过元数据推断新加坡头寸,也不得在故障转移、调试、缓存或工具执行期间绕过限制。因此,在亚洲 FSI,可靠性意味着在正常运行和系统故障期间都保持法律边界。

本环节提出面向感知法律实体的智能体的分布式控制架构,使用 Unity Catalog、受管标签、ABAC 策略、行筛选器、列掩码、服务主体、Genie Agents、Genie Ontology 和已批准的 Agent Bricks 模式。三级命名空间提供组织基础。机构可以把实体分到目录或模式中,而共享表携带显式的司法管辖区、法律实体、保密、驻留和目的标签。设计不依赖命名本身。对象权限建立基础授权,动态策略再按身份、组成员身份、标签和请求上下文增加限制。

身份平面为每个已部署的智能体实例或有边界的智能体服务注册专用服务主体。香港流动性智能体只属于已批准的香港组;新加坡实例只属于新加坡组。开发、测试、生产、检索、工具执行和部署自动化使用各自独立的身份。禁止模拟人类身份。凭据是短生命周期的、轮换的,并且未经明确批准不得跨越工作区或区域。

在查询时,Unity Catalog 评估适用的 ABAC 策略,并把有效的行筛选器和列掩码发送给 Databricks Runtime。运行时查询规划器在表扫描上执行这些限制。因此,香港主体只能收到法律实体策略允许的行,而交易对手账户、客户姓名、标识符和商业敏感字段按受管标签和授权角色被掩码。当无法核验执行时,策略遵循失败即关闭的设计。

本提案仔细区分平台行为与架构简称。不存在一个应被当作契约的、单独文档化的产品组件,名叫“Entitlement Interceptor”。可执行的模式是 Unity Catalog 策略评估,随后由 Databricks Runtime 执行。同样,物理文件跳过可能改善性能,但安全保证来自策略执行,而不是假定未授权文件从未被存储基础设施接触。

Genie Ontology 增加业务含义,但从不扩大访问。它把法律实体、分行流动性、交易对手集中度、受限客户和跨境敞口等术语映射到经认证的指标和权威来源。本体片段感知权限,使香港智能体只能使用其身份可以访问的上下文。特定于实体的词汇、指标定义和权威来源规则,防止一个汇总的“APAC 流动性”问题悄悄混合不兼容的账簿。

可观察性持续证明边界。每一次请求都记录智能体身份、调用者、法律实体、模型、智能体版本、SQL 语句或工具、被访问的表、策略决策、行数、被掩码的列、延迟、拒绝和响应处置。分布式追踪连接用户请求、智能体规划、检索、SQL 执行、模型推断和工具调用,而不记录被禁止的 PII。网络遥测核验私有路径、已批准出站、DNS、TLS、路由变化和跨区域依赖。

一个失败情景在香港和新加坡市场同时承压期间测试权限漂移。一次部署错误地把新加坡组分配给 HK 服务主体。预防性控制阻止生产晋升,因为授权图与已批准清单不同。第二个实验禁用一个策略依赖;失败即关闭行为拒绝访问。第三个实验造成区域故障转移;恢复环境必须在接受流量之前复现身份、标签、授权、掩码和策略版本。

Clean Rooms 处理受管协作,而不是自动的内部聚合。无信任清洁室可以让已批准各方在共享资产上运行相互批准的笔记本,而无需直接访问彼此的原始数据。如果集团级统计需要阈值、输出检查、聚合限制或差分隐私,这些保障必须在已批准工作负载中明确实现并验证。不应把 Clean Rooms 描述为自动给每一个结果添加差分隐私噪声。

混沌工程验证身份服务中断、陈旧的组成员身份、缺失标签、策略函数失败、网络分区、缓存泄漏和区域恢复。成功要求正确拒绝、有界恢复、不可变证据,以及没有跨实体披露。结果是一个系统,其可观察性不仅解释智能体是否作答,还解释它为何在法律上被允许作答。

受众收获:

参与者将获得面向亚洲 FSI 智能体的法律实体隔离架构,涵盖专用身份、Unity Catalog ABAC、行筛选器、列掩码、Genie Ontology、Clean Rooms、零信任网络、授权可观察性和混沌测试。他们将学习如何在部署、查询执行、缓存、工具使用和区域故障转移期间保持 HK 与 SG 的分离。

29在不跨越实体边界的情况下流式传输亚洲范围内合法授权的金融事件

主题:

在不跨越实体边界的情况下流式传输亚洲范围内合法授权的金融事件

重点:

高吞吐事件流架构

演讲者背景:

机构流架构师,专长于高吞吐金融事件、感知身份的路由、有状态处理和法律实体控制。该演讲者为亚洲银行、交易、支付和监察工作负载设计事件平台,平衡吞吐、顺序、恰好一次结果、驻留、可重放性和独立监管证据。

描述:

高吞吐事件平台可以保留消息顺序,但如果香港和新加坡记录进入错误的消费者、检查点、状态存储、死信队列或重放环境,仍然会造成监管违规。因此,没有恰好授权的处理,恰好一次处理就是不完整的。每一个阶段都必须在维持开盘流量的同时,保留法律实体、司法管辖区、敏感度、目的、所有权和被允许的消费者上下文。

本环节提出把路由和状态绑定到 Unity Catalog 治理的事件流架构。订单、成交、支付、头寸、风险变化、客户互动和监察事件携带稳定的业务标识符,以及实体、司法管辖区、事件时间、摄取时间、来源序列、事务 ID、模式版本、保密性、纠正状态和保留类别。契约拒绝缺少权威法律实体归属的事件,而不是把它们放进共享的未知桶。

物理拓扑跟随监管边界。Entity HK 和 Entity SG 在需要的地方获得各自的入口凭据、路由命名空间、加密范围、消费者组、检查点、状态存储、隔离位置和重放权限。只有在政策、威胁建模、驻留分析和运营控制支持的地方,才允许共享基础设施。全局主题可能改善利用率,但按实体键的路由、访问控制和独立对账必须证明,一个消费者不能枚举或处理另一个实体的分区。

生产者身份是显式的。Agent Bricks、应用和平台服务使用分配到已批准法律实体组的专用服务主体。香港智能体不能仅仅通过设置字段值就发布新加坡事件。网关控制比较已认证主体、来源系统、账户、工作区和载荷实体。无效组合被拒绝并记录。模式注册表把实体和司法管辖区字段当作强制控制属性,不能通过向后兼容的演化移除。

恰好一次结果结合不可变事件身份、幂等生产、单调序列检查、去重、持久检查点、事务性写入端和对账。重复的香港订单必须在香港权威域内被抑制,而不是对照一个会泄漏另一个实体存在的全局键。当外部副作用不能加入事务时,发件箱、收件箱和补偿控制暴露歧义并保留证据。

有状态处理器计算盘中流动性、敞口、欺诈、市场影响和运营风险。状态在账户、工具或支付等业务键之前按法律实体分区。快照包括策略版本、模式版本、代码哈希、水位线、来源偏移、实体、加密范围和数据位置。恢复程序核验 HK 快照不能附着到 SG 消费者,即使在灾难恢复或紧急容量扩展期间也是如此。

Unity Catalog 治理 Delta 历史和派生表。ABAC 策略可以附着在目录、模式或表范围,并动态匹配受管标签。行筛选器和列掩码在查询时限制法律实体记录和敏感列。这些保护补充基础对象权限,并不替代流级别授权。Genie Ontology 为实体流动性、可用余额、集团敞口和客户保密提供一致的业务定义,但仍然受调用者权限约束。

一个开盘情景在香港和新加坡之间驱动不均衡负载。一个 HK 工具变成热点键,同时新加坡支付量激增。分层路由先隔离每个实体,然后按工具、账户或支付分配工作。优先通道保留限额、紧急终止开关事件、制裁冻结和结算例外。背压保持在实体本地,使一个司法管辖区不能耗尽另一个的消费者容量或延迟关键控制。

延迟测量分开生产者、网络、持久摄取、队列、处理、状态访问、写入端、治理和服务时间。亚毫秒性能对有界组件可能可信,但区域端到端持久性和授权执行必须用 p50、p95、p99、失败条件和时钟质量来报告。优化不能绕过身份评估、加密、审计或策略执行。

对于已批准的集团级分析,清洁室或受管聚合服务可以合并被允许的输出,而不暴露原始实体记录。笔记本批准、输出控制、最小队列阈值、查询允许列表和结果审查是显式的。差分隐私是可选的设计保障,而不是假定的平台默认。系统记录参数、在使用时的隐私预算和批准证据。

混沌测试重排消息、重复事件、损坏隔离的检查点、撤销组成员身份、移除标签、使一个区域失败并重放积压。验收标准是确定性的财务输出加上保留的实体分离。独立的从来源到头寸和从来源到现金的对账确认,没有任何事件在一个健康的消费者仪表板后面丢失、重复或被重新分配。

受众收获:

与会者将获得感知身份的事件契约、法律实体路由模型、恰好授权处理框架、状态和检查点隔离策略、延迟预算和混沌计划。他们将学习如何扩展 HK 和 SG 工作负载,同时防止通过生产者、消费者、重放、死信队列、派生表和灾难恢复发生跨实体泄漏。

30扩展跨越香港和新加坡的感知权限 FSI 智能体推理

主题:

扩展跨越香港和新加坡的感知权限 FSI 智能体推理

重点:

优化大规模 AI 推理基础设施

演讲者背景:

机构 AI 基础设施架构师,专长于高并发推理、分布式检索、感知身份的智能体和受管金融数据。该演讲者为亚洲银行、保险公司和交易公司设计安全平台,把 GPU 效率、低延迟检索、法律实体隔离、韧性、隐私、成本控制和模型风险治理结合起来。

描述:

大规模金融 AI 推理并不会仅仅因为模型端点是私有的就安全。一次请求可能跨越检索索引、SQL 引擎、缓存、提示存储、工具服务器、模型提供商、追踪和区域故障转移系统。如果任何组件丢失调用者的法律实体上下文,HK 智能体就可能检索 SG 客户信息,或从缓存键、计数、时序或错误中推断另一分行的活动。

本环节提出面向 Entity HK 和 Entity SG 的、用于 Agent Bricks 和基于 Genie 的体验的感知权限推理架构。每个已部署智能体获得专用服务主体、有界工具、已批准模型、实体组、区域配置和成本预算。在需要最终用户授权的地方,人类用户保留自己的身份。智能体身份从不悄悄替代用户身份;有效授权模型定义权限是取交集、委托,还是由服务拥有。

Unity Catalog 提供受管数据基础。三级命名空间组织资产,对象权限建立基础访问。受管标签标记司法管辖区、实体、驻留、PII、保密性、目的和权威状态。ABAC 策略动态应用行筛选器和列掩码。因此,香港检索查询只收到被允许的行,而客户姓名、账户、交易对手标识符和商业秘密按角色和目的被掩码。

策略执行被精确描述。Unity Catalog 评估策略范围、主体、组成员身份和标签。Databricks Runtime 在查询执行期间执行有效的筛选或掩码。架构不依赖未文档化的“entitlement interceptor”,也不声称 Photon 文件裁剪就是法律控制。查询优化可以减少读取,但安全保证来自受管权限和运行时执行的策略。

Genie Ontology 为智能体提供经认证指标、域、权威来源和业务规则的业务感知地图。HK 和 SG 可以共享集团级术语,同时保留特定于实体的定义。“可用流动性”这样的术语可能使用不同的来源系统、截止时间、货币或监管扣除。感知权限的本体上下文防止智能体用调用者无法访问的 SG 来源来解析 HK 问题。

推理路径包含准入控制、身份解析、策略上下文、提示构造、检索、重排序、模型执行、工具调用、输出校验和证据捕获。每个阶段都携带实体和司法管辖区上下文。请求分类分开交互协助、长时间研究、客户支持、风险分析和受监管决策支持。有界工具链、token 限制、超时、断路器和人工批准,防止智能体通过反复规划扩大自己的范围。

GPU 优化仍然重要。本环节覆盖权重放置、KV cache、上下文增长、分配器碎片、量化、分页注意力、前缀复用、张量并行、模型路由和连续批处理。只有在隔离保证得到保留时才对批次分组。缓存键包括权威上下文、模型、提示策略、数据版本和实体。私有检索上下文绝不会仅仅因为提示在语义上相似就跨法律实体复用。

分布式检索使用感知实体的分区、副本和区域放置。元数据筛选和权限在向量搜索之前或同时评估,使未授权候选永远不会成为模型上下文。索引新鲜度、嵌入版本、删除传播、文档权威、引用和驻留是可观察的。共享的公共内容可以全局缓存;私有头寸、客户和交易上下文保持实体范围。

一次波动事件从香港和新加坡的交易与风险团队产生数百个并发请求。准入控制为关键风险查询预留容量。连续批处理改善加速器利用,而公平性防止一个实体耗尽容量。长时间研究转到带有持久状态的异步工作者。如果一个 SG 检索分片失败,路由只选择已批准的 SG 替代方案;它从不为了保持可用性而回退到 HK 数据。

对于集团级宏观统计,Clean Rooms 可以提供隔离的无信任协作环境,已批准笔记本在共享资产上运行,而无需直接访问原始数据。仅聚合代码、输出审查、阈值控制和可选差分隐私必须被设计并批准。平台不应声称每一个清洁室查询都会自动获得差分隐私噪声。

可观察性记录主体、用户、实体、模型、检索来源、策略决策、掩码应用、缓存范围、工具调用、token、延迟、成本、引用、拒绝和批准。追踪避免被禁止的提示内容,同时保留可复现性。红队和混沌演练尝试跨实体提示注入、缓存投毒、困惑副手式工具使用、陈旧授权、区域丢失和模型回退。

最终架构只在已核验的法律边界内优化吞吐。成功意味着可预测的延迟和高利用率,同时没有跨实体检索、推断、缓存或故障转移。机构级 AI 要求每一个答案都可以归属到已授权身份、被允许来源、已批准模型、有文档的政策和可审查的决策路径。

受众收获:

参与者将获得感知权限的推理架构、智能体身份模型、Unity Catalog 策略模式、Genie Ontology 设计、实体安全的批处理与缓存策略、分布式检索蓝图和红队计划。他们将学习如何扩展 HK-SG AI 工作负载,同时保留驻留、保密、人工批准、模型治理、可观察性和安全的区域故障转移。

31面向碎片化亚洲市场的跨境流动性智能体可靠性工程

主题:

面向碎片化亚洲市场的跨境流动性智能体可靠性工程

重点:

分布式系统可靠性与高级可观察性

演讲者背景:

机构平台工程负责人,专长于分布式系统、智能体可观察性、跨境流动性控制和生产变更管理。该演讲者为亚洲交易、资金、风险和运营团队设计有韧性的金融基础设施,把底层遥测和网络行为与受管的人工决策连接起来。

描述:

亚洲跨境流动性管理是一个受法律、市场和运营边界约束的分布式系统问题。一项流动性决策可能依赖于 FX 价格、结算状态、现金余额、资金容量、本地假期、资本管制、交易对手限额、支付通路,以及跨越香港、新加坡、日本、韩国和东盟市场的数据驻留规则。一个陈旧来源、模式变更、网络延迟或重复指令,可以把一个有效的路由想法变成资本、结算或合规事件。

本环节提出围绕有边界的专家智能体、Databricks 治理和共享语义上下文层构建的可靠性架构。Agent Bricks 被用作小型、特定目的智能体的架构模式,而不是一个不受限制的自主系统。一个智能体监控货币走廊和基差变动。另一个观察已批准清算或支付网络的结算延迟。第三个为一个法律实体校验头寸和限额。监督工作流协调它们的证据,但不能悄悄扩大它们的权限或运营权威。

Genie Ontology 通过受管语义、域、指标定义、权威来源和推断的组织知识提供业务感知上下文。它把碎片化的本地概念转化为一致术语,例如可用流动性、被困现金、结算终局余额、可执行溢价、受限货币和压力退出成本。本体不替代法律解释,也不变成不受限制的全球知识图谱。它保持感知权限,本地规则必须由可问责的法律、合规、资金和数据所有者认证。

请求路径被端到端追踪。市场事件通过受管来源进入,更新分析度量,触发有边界的智能体,检索本体上下文,评估假设,调用已批准工具,并产生建议路线。分布式追踪关联事件时间、摄取时间、来源新鲜度、智能体身份、模型和提示版本、检索来源、SQL 语句、工具调用、策略决策、延迟、token 使用、置信度和最终人工处置。Unity Catalog 血缘捕获来源表、转换、模型、函数和消费资产之间受支持的关系,而应用日志保留普通数据血缘不会自动表示的智能体推理证据。

底层可观察性在应用、运行时、操作系统、存储和网络层之间隔离瓶颈。团队监控 CPU 调度、内存压力、连接池、DNS、TLS、重传、路由变化、队列年龄、消费者滞后、工具延迟、模型延迟和陈旧数据持续时间。在平台支持和政策允许的地方,eBPF 或等效插桩可以检查套接字和系统调用行为。当数据包载荷捕获可能暴露订单、凭据、客户信息或受监管通信时,它被最小化或禁止。

零信任路由意味着每个智能体都有专用服务身份、有界出站、允许列表工具、特定于实体的数据访问、短生命周期凭据和显式网络目的地。集群和区域之间的通信经过认证、加密、记录,并且默认拒绝。新加坡结算智能体不能仅仅因为存在一条路由就调用香港执行工具。故障转移环境必须在接受生产流量之前重新建立身份、权限、策略版本和区域限制。

呈现给人工交易或资金主管的证据面板包括建议走廊、可用容量、预期溢价、FX 转换成本、结算窗口、滑点、交易对手敞口、法律实体约束、来源引用、陈旧数据警告、替代路线和压力结果。智能体不能移动重大资金或执行盲目结算。主管通过授权矩阵和双重控制流程批准、修改、拒绝或升级该提议。

变更管理使用三道门。第一,类型、模式、幂等和兼容性测试核验遥测、计算、指令和写回不能悄悄破坏类型或制造重复的经济效应。第二,类似生产的影子分支接收被允许的只读或脱敏流量。影子输出与生产在数据一致性、延迟、策略执行和优雅降级方面进行比较。比较以现实精度度量;“微秒级”只在时钟、传输和工作负载证明其合理的地方被当作经过测试的工程目标。第三,金丝雀部署在更广泛晋升之前限制实体、走廊、容量和工具。

混沌实验引入模式漂移、陈旧价格、延迟的结算馈送、模型超时、网络分区、队列积压、丢失的身份服务、不可用的检索和区域故障转移。护栏定义爆炸半径、中止阈值、市场日历排除和具名恢复所有者。成功意味着正确拒绝或降级、没有重复指令、有界恢复、保留的血缘和完整证据。

本环节以任务就绪记分卡收尾,覆盖新鲜度、p95 和 p99 延迟、路由可用性、策略拒绝、模式违规、重复效应率、对账完整性、恢复时间、智能体准确度、人工覆盖,以及已实现与预期流动性成本的对比。当系统在市场压力期间保持法律有界、财务正确、可观察且可安全控制时,可靠性才得到证明。

受众收获:

参与者将获得跨境智能体可靠性架构、语义控制模型、端到端追踪设计、零信任路由模式、证据面板规格、影子测试协议和混沌计划。他们将学习如何在碎片化亚洲市场部署流动性智能体的同时,保留人工权威、法律实体边界、幂等、可观察性和优雅降级。

32用恰好一次控制在亚洲流式传输跨境流动性情报

主题:

用恰好一次控制在亚洲流式传输跨境流动性情报

重点:

高吞吐事件流架构

演讲者背景:

机构流架构师,专长于高吞吐市场、资金、结算和风险事件。该演讲者为亚洲金融机构设计可靠平台,把感知身份的路由、有状态处理、恰好一次结果、模式治理、重放、低延迟分析和人工控制的流动性决策结合起来。

描述:

跨境流动性智能体的可信程度只等于其下方事件流的可信程度。亚洲市场以不同速度和不同终局性产生价格、订单、成交、余额、支付确认、抵押品移动、资金利率、FX 管制、结算通知和运营例外。把这些事件流入一个快速平台并不会使它们变得可比。架构必须保留来源权威、法律实体、司法管辖区、事件顺序、纠正历史和业务含义。

本环节提出面向有边界流动性智能体和基于 Genie 的语义解释的高吞吐事件架构。每个来源事件携带稳定标识符、来源系统、法律实体、司法管辖区、货币、走廊、事件时间、摄取时间、序列、事务 ID、模式版本、终局状态、敏感度类别和纠正指示。没有权威实体或货币归属的事件被隔离,而不是被放入全局“未知”流。

路由分层发生。第一键分开法律实体和监管域。第二键分开工作负载类别,例如市场数据、现金余额、结算、限额或合规。第三键使用账户、货币对、支付、工具或走廊等业务键。这在避免单一全局分区的同时保留必要的顺序。热点键通过分层路由、受控加盐或专用通道被隔离。关键的限额、制裁和紧急终止开关事件优先于研究充实。

恰好一次语义被定义为财务结果。消息 broker 或流引擎可能重新投递,消费者可能重启,写入端可能部分提交。平台结合不可变事件身份、幂等生产者、单调序列检查、去重窗口、持久检查点、事务性写入、发件箱或收件箱模式,以及对照权威账簿、现金和结算系统的对账。智能体提议也获得幂等键,使重试不能制造重复批准、划转或限额变更。

有状态处理器持续计算可用流动性、基差、现金阶梯、结算敞口、资金集中度、走廊容量和压力缓冲。它们的快照包含来源偏移、水位线、代码哈希、模式版本、本体版本、策略版本、法律实体和加密范围。检查点被增量持久化并在负载下验证。恢复测试重放已知区间,并证明现金、头寸、限额、警报和派生度量与独立系统匹配。

Genie Ontology 在事件契约之上提供语义契约。它定义“可用余额”是否包含待结算、走廊是否受限、哪个日历控制截止时间,以及哪个来源对每个实体是权威的。专门智能体使用这一感知权限的上下文来一致地解释事件。本体变更被版本化并测试,因为语义修改即使在物理模式不变时也可能改变路由建议。

一个市场压力情景演示该管道。USD 资金收紧,一种东盟货币走阔,结算网络报告延迟。市场事件激增,同时余额馈送变陈旧。背压保护平台,陈旧数据政策降低受影响走廊的置信度,实体本地优先通道保留限额和结算事件。智能体更新假设,但不能提议依赖不可用终局余额的路线。主管收到带有证据和不确定性的最佳被允许替代方案。

消费者组使用测得的拉取大小、批时长、处理时间、状态访问、检查点开销、写入端容量和恢复吞吐来调优。最大并行度不是目标。目标是带有确定性结果的有界事件时间滞后。亚毫秒性能对狭窄的内存阶段可能有效,但端到端区域延迟必须包括网络传输、持久摄取、状态处理、治理、模型推断和服务。

生产变更协议从模式兼容性、类型安全、确定性重放和幂等测试开始。双运行环境随后接收已批准的只读或令牌化生产流量。生产和影子分支比较输出、延迟分布、策略决策、状态增长、重复抑制和恢复行为。差异被分类为预期的模型演化、数据时序、非确定性或缺陷。晋升需要签字验收,而不仅仅是一条变绿的部署管道。

混沌测试注入重复、重排消息、延迟分区、损坏隔离的检查点、改变模式、限流写入端、撤销权限、使消费者失败并中断一个区域。平台必须恢复,而不把数据移入错误的司法管辖区、丢失权威事件或触发重复的经济效应。Unity Catalog 治理分析历史并捕获受支持的血缘,而事件级审计记录保留从来源到决策的证据。

结果是一个把碎片化事件转化为及时、受管流动性情报的流平台。它不承诺速度会消除不确定性。它使不确定性、终局性、滞后和权威变得显式,使有边界的智能体和人工主管能够行动,而不把新鲜信号与已结算、可部署的资本混淆。

受众收获:

与会者将获得流动性事件契约、分层路由模型、恰好一次财务控制框架、状态和检查点策略、语义版本模式、延迟预算、双运行协议和混沌计划。他们将学习如何扩展亚洲市场流,同时保留实体边界、确定性重放、可信的智能体提议、对账和人工批准。

33用 Genie Ontology 扩展跨越亚洲的跨境流动性智能体推理

主题:

用 Genie Ontology 扩展跨越亚洲的跨境流动性智能体推理

重点:

优化大规模 AI 推理基础设施

演讲者背景:

机构 AI 基础设施架构师,专长于高并发推理、分布式检索、智能体工作流和受管金融数据。该演讲者为亚洲银行和交易公司设计平台,把 GPU 效率、语义控制、法律实体隔离、低延迟分析、韧性、证据和模型风险治理结合起来。

描述:

跨境流动性智能体需要的不只是一个强大的语言模型。它们必须在波动期间服务许多用户的同时,结合市场数据、资金余额、结算状态、本地监管、资金成本、交易对手限额和人工权威。在亚洲,同一个术语可能因司法管辖区、实体、货币、截止时间或结算通路而具有不同含义。当吞吐改善但语义和法律边界消失时,大规模推理就会失败。

本环节提出结合有边界专家智能体、Genie Ontology、Unity Catalog、受管检索和人工控制工作流的推理架构。一个智能体监控货币走廊。另一个评估结算延迟。另一个检查法律实体头寸和限额。Supervisor Agent 组装证据并检测矛盾,但它不能给自己授予工具、检索不可访问的数据,或执行重大资产移动。

Genie Ontology 使用受管语义、域、指标视图、权威来源规则和推断的组织上下文提供业务感知上下文层。它把碎片化的本地概念映射为经认证术语,例如可执行流动性、被困现金、终局结算、受限余额、FX 转换溢价和压力调整后容量。上下文仍受 Unity Catalog 权限约束。智能体不能使用从它无权访问的资产派生的本体片段。

推理路径分解为准入控制、身份解析、语义规划、检索、SQL 或分析执行、重排序、模型推断、工具调用、输出校验、证据组装和人工处置。每个阶段都携带法律实体、司法管辖区、货币走廊、目的、模型、智能体版本、本体版本和策略上下文。交互问题获得严格的延迟和工具预算。长时间研究转到带有持久检查点和进度报告的异步工作者。

GPU 内存管理决定可实现的容量。本环节考察模型权重、KV cache、激活、分配器碎片、上下文增长、主机到设备的传输,以及并发工具等待。经过验证的技术包括量化、分页注意力、前缀复用、上下文压缩、张量并行、模型路由和缓存驱逐。在优化进入生产之前,先度量财务准确性、引用质量、数值行为和多语言表现。

连续批处理在平衡吞吐、首 token 时间、token 间延迟、截止时间和公平性的同时对兼容请求分组。权威上下文是兼容性的一部分。私有 HK 和 SG 检索上下文绝不会仅仅因为提示相似就被合并或复用。缓存键包括实体、司法管辖区、用户或服务身份、本体版本、数据版本、提示策略和模型版本。共享的公共上下文可以全局复用;头寸、余额、客户和结算证据保持在范围内。

分布式检索按实体、地理、域和权威分区。元数据筛选和权限在语义搜索之前或同时应用,使未授权候选永远不会进入提示。检索可观察性覆盖索引新鲜度、嵌入版本、文档版本、删除传播、来源权威、驻留、引用覆盖和被拒绝的候选。结构化财务计算使用经认证的 SQL 或函数,而不是让模型发明算术。

在亚洲流动性冲击期间,数百名用户询问走廊状态和替代方案。准入控制为资金、风险和事件查询预留容量。连续批处理改善利用,而公平性防止一个市场耗尽共享加速器。智能体检索当前余额、结算状态、已批准的监管上下文和压力度量。证据面板展示路线选项、假设、预期溢价、滑点、陈旧来源、未解决冲突,以及每个来源为何被允许。

人在回路中的边界是显式的。智能体可以调查、比较假设并提出建议。它们不能直接结算重大资金、绕过限额,或在没有已批准工作流的情况下调用关键资产划转。人工主管审查证据、选择路线、应用限额并接受问责。双重批准、工具允许列表、交易限额、紧急撤销和不可变审计记录保护最终行动。

部署使用自动化就绪协议。类型、模式、语义、幂等和权限测试首先运行。影子分支接收被允许的只读流量,并把答案、计算、引用、延迟、成本和策略决策与生产比较。压力测试加入高并发、陈旧来源、模型超时、检索降级、模式漂移和模拟的流动性冲击。金丝雀发布限制用户、实体、走廊、工具和名义敞口。

可观察性把用户体验连接到基础设施和治理。指标包括首 token 时间、总延迟、队列年龄、每秒 token 数、批次占用、GPU 内存、缓存命中率、检索召回、工具延迟、来源新鲜度、本体冲突、策略拒绝、人工覆盖、每次调查成本,以及已实现与预期路由结果的对比。追踪保留可复现性,而不保留被禁止的提示内容。

最终设计把推理当作受监管的分布式服务。只有当每一项建议在资本跨越亚洲边界之前都保持感知权限、语义一致、技术上可观察、财务上有界,并且可由授权人员审查时,规模才有价值。

受众收获:

参与者将获得智能体推理架构、Genie Ontology 语义模型、实体安全的批处理与缓存策略、分布式检索蓝图、GPU 优化框架、证据面板设计和影子发布协议。他们将学习如何扩展亚洲流动性情报,同时保留权限、语义一致性、人工控制、可审计性、韧性和安全的跨境运营。

没有讲台阶级

人人都是演讲者

姓名和头衔被刻意隐去。权威来自于证据、操作经验以及接受他人挑战的意愿。

贡献者 / NETWORKS-01

跨境系统从业者

将网络运营思维带入流动性、结算渠道和溢价分析中。专注于将碎片化的信息转化为可解释的工作区,同时不放弃治理。

贡献者 / RESILIENCE-02

机构市场从业者

将使命清晰度、冗余、可观察性和故障恢复应用于亚洲流动性情报、实时数据路径和生产级外汇决策系统。

登船协议

信任即是场地。

只有当每位客人都保护这个房间时,私人房间才能发挥作用。这些条件并非装饰。它们创造了心理和操作上的安全感,这是讨论真实的金融服务经验所必需的。

仅限 18 岁以上客人
禁止吸烟
禁止饮酒
禁止携带武器
禁止拍照
禁止录像
免费入场
需要邀请
动物友好:老虎、狗和猫*
性别友好的着装
禁止露出纹身
禁止政治游戏、甩锅
行动后记录

活动回顾

我们记录持久的经验教训,但不记录在场的人员。

一个受管的、实时的 FSI 社区听起来是什么样的

维港上最强烈的共识很简单:速度只有在决策仍然可解释时才有用。在流动性、外汇套息、流架构和智能体研究方面,贡献者们回到了相同的运营原则。数据新鲜度、通用语义、权限、血缘和人工问责制必须共同推进。

会议展示了为什么不能将亚洲市场视为一个统一的整体。场所、货币、日历、资金路线、流动性行为和结算惯例都会改变明显机会的经济效益。决策级平台必须保护这些本地差异,同时为机构提供整个路线的受管视图。

该小组还挑战了在创新与控制之间必须二选一的错误观念。声明式数据管道、共享治理、应用程序状态、实时服务和专家智能体可以缩短从事件到洞察的距离。控制设计决定了这种速度是成为机构优势还是仅仅变为更快的非确定性。

在发布的回顾中,所有人员身份都被删除了。说明性案例仅将著名的国际公司名称用作虚构示例。任何归属、机密细节或可识别的运营上下文都不会离开这艘船。

HK / FSI

社区贴纸

献给那些为交流做出贡献的人的实物印记。

ALT / 01

替代资产:数字纪念币

具有纪念意义的数字社区收藏品。没有任何货币价值、回报或投资效用的承诺。

开放渠道

常见问答

客人在申请邀请前应了解的事项。

为什么没有演讲者姓名或头衔?
每个人都在不断分享真实的专业知识。我们希望贡献的质量能撑起整个房间,我们希望每位参与者都能成为提高标准的人。专业背景可能会被宽泛地描述,但个人身份和公司头衔在这里不是权威的来源。
为什么活动仅限受邀者参加?
这种形式能保持专家核心圈的专注,并为金融服务讨论保留一个受信任的环境。该社区仍然向能够建设性地做出贡献的人开放。如果您想参与,请在 LinkedIn 上联系该组,并说明您希望带来什么经验或问题。
你们会发布视频吗?
不会。该活动旨在为从业者提供一个安全的场所来讨论真实的金融服务情况。船上不允许拍照、录像和录音。
你们会发布回顾文章吗?
会。回顾文章会删除所有人员的身份并泛化敏感细节。著名的国际公司名称可能仅作为虚构的示例组织使用,以便在不识别参与者或雇主的情况下保留学习价值。
我应该穿什么?
欢迎穿着交易员夹克、巴隆衫、商务装、军装或老派休闲装。穿最能代表您的衣服。明确欢迎性别友好的着装。
免费入场包括什么?
受邀客人无需入场费。容量受船只和安全要求的限制。登船前需要已确认的邀请。
谁举办此活动?
社区日由香港 Databricks FSI 用户组举办。它由社区创建,为社区服务。这是一个由社区主导的项目,其领导层不包括现任 Databricks 员工。我们欢迎与 Databricks 员工和合作伙伴进行建设性的合作,但该项目将保持由社区独立主导,不会作为 Databricks 官方活动进行展示或扩展。
社区提交

分享您的活动反馈。

请对社区日的每个部分进行 1 到 5 的评分,然后添加可选评论。您的答复通过活动反馈端点提交。

1 代表最低评分。5 代表最高评分。

整体活动
欢迎与开场
活动服务与体验
总结与闭幕

提交操作将在新的浏览器标签页中打开响应端点。请勿输入机密、个人、客户、交易或受监管的信息。