物化视图刷新是 OceanBase 4.3 的重头特性。刷新的主战场在存储层的 storage/mview,但有一类信息光靠存储层自己知道没用——「这张 MV 正在刷、刷到哪个快照、目标要同步到哪个 GTS 位点」。这些元信息必须让 RootService 也看得见,否则 RS 无法判断嵌套 MV 的下层是否就位,也就无法决定上层能不能开始刷。OceanBase 选的做法是把这类状态做成事务的一等多数据源(Multi Data Source,简称 MDS),跟着 redo 一起落盘。本文解析这条通道的实现——三个类、两百来行代码,把「写入、注册、回放、清理」四个环节串了起来。
OceanBase源码解读:物化视图刷新工具箱 ObMViewRefreshHelper
物化视图的刷新不是一次简单的 INSERT ... SELECT。以增量刷新为例,它要先在某个一致性快照上算出基表的变更集、再把这批变更以幂等方式写进物化视图表、顺便把已经消费掉的物化视图日志(MLog)清掉,过程中还不能被同租户里另一个并发的刷新任务插一脚。这些动作分散在刷新主流程的各个角落,实现上被抽成了一组静态函数,集中在 src/storage/mview/ob_mview_refresh_helper.cpp 里,也就是本文要拆的 ObMViewRefreshHelper。
OceanBase源码解读:物化视图刷新统计采集 ob_mview_refresh_stats_collect
物化视图刷新跑完了,效果怎么样?刷新前基表变了多少行、刷新花了多久、每条内部 SQL 执行了几次——这些问题的答案都藏在 OceanBase 的刷新统计表里。本文要读的 ob_mview_refresh_stats_collect.cpp(约 480 行)就是统计的”采集层”,它与此前解读过的清理执行器(ob_mview_refresh_stats_purge)一收一放,构成 4.3 物化视图统计体系的闭环。文件核心是两个类:ObMViewRefreshStatsCollection 负责单个物化视图的统计采集,ObMViewRefreshStatsCollector 负责整次 REFRESH 调用(可能一次刷多个 MV)的运行级汇总,最终把数据落到 __all_mview_refresh_stats、__all_mview_refresh_change_stats、__all_mview_refresh_stmt_stats、__all_mview_refresh_run_stats 四张内部表。
OceanBase源码解读:物化视图维护任务 ob_mview_maintenance_task
OceanBase 4.3 引入物化视图(Materialized View)后,系统里多了一类需要长期”养护”的对象:用户的 MV 可能被反复创建删除,而它的元数据记录、刷新统计、自动刷新作业分散在多张系统表里。如果某个 MV 被删除后残留了元数据(孤儿 MV),这些脏记录会越积越多。本文解读的 ob_mview_maintenance_task.cpp(位于 rootserver/mview 目录,共 370 行)就是负责这件事的后台任务——ObMViewMaintenanceTask。它是物化视图体系里的”守门员”:每分钟巡检一轮,分批扫描全租户物化视图,找出表结构已删但元数据还在的孤儿 MV,把刷新统计、DBMS Scheduler 刷新作业和元数据记录一并清掉。整个任务采用”定时器 + 状态机”的写法,每 10 秒醒一次、每次只做一小步,天然支持断点续传,是读懂 OceanBase 后台任务设计风格的绝佳样本。
OceanBase源码解读:物化视图日志修剪任务 ob_mview_trim_mlog_task
物化视图日志(MLog)是 OceanBase 4.3 MV 快速刷新体系的基石:基表每次 DML 都会往 MLog 里追加一条变更记录,供 MV 做增量刷新。但 MLog 的结构不是一成不变的——随着 MV 增删、列被修改、刷新方式演进,MLog 里会逐渐积累”没人引用”的冗余列,甚至整个 MLog 都可能变成无主之物。本篇解读的 ob_mview_trim_mlog_task.cpp(483 行)就是解决这个问题的后台任务:ObMViewTrimMLogTask,一个跑在 RootService 里、周期性执行的”MLog 瘦身师”。它对每个 MLog 做一次审计:没有 MV 还需要就整体删除;仍有 MV 依赖但存在冗余列,就按引用列集合重建一个更瘦的新 MLog 替换旧的,从源头降低 DML 的日志写放大。
OceanBase源码解读:物化视图刷新统计清理执行器 ob_mview_refresh_stats_purge
物化视图的刷新统计是一份「会自己长大」的数据:每一次刷新、每一次重试、每一条刷新语句都会往内部表里写记录。如果不做清理,这些诊断类数据会无限膨胀,最终拖慢整个租户的元数据访问。OceanBase 4.3 把清理逻辑收敛到一个只有 88 行的工具文件 storage/mview/ob_mview_refresh_stats_purge.cpp 里,类名 ObMViewRefreshStatsPurgeUtil,全静态方法,只有一个入口 purge_refresh_stats。代码虽短,但它同时要处理三件事:三张明细表的级联删除、聚合行的引用计数维护、以及为上层定时任务提供准确的「清理配额」语义。本文按「四表模型 → 核心数据结构 → 五阶段流程 → 两个设计细节」的顺序拆开看。
继续阅读OceanBase源码解读:物化视图刷新统计清理执行器 ob_mview_refresh_stats_purge
OceanBase源码解读:物化视图日志清理器 ob_mlog_purge
物化视图的快速刷新(FAST REFRESH)依赖一张”变更日志表”——MLog(materialized view log)。基表每发生一次 DML,MLog 就追加一行带旧值/新值的变更记录。只写不删,这张表迟早会吃掉整个租户的存储空间,所以必须有人负责回收。OceanBase 4.3 里承担这个职责的是 storage/mview/ob_mlog_purge.cpp 中的 ObMLogPurger。这篇文章拆解它的三段式流程,以及最核心的那个问题:一次到底能删到哪个位点。
OceanBase源码解读:物化视图刷新统计清理任务
物化视图(Materialized View)每次刷新都会在系统表 __all_mview_refresh_stats 里记录一条刷新统计:刷新耗时、刷新 SCN、成功与否等。这些统计是运维观测的重要依据,但如果只写不删,长期运行下来这张表会无限膨胀。OceanBase 4.3 为此引入了一个专门的后台任务——ObMViewRefreshStatsMaintenanceTask,它按用户为每个物化视图设置的保留期(retention_period),周期性地清理过期的刷新统计记录。本文解读它的实现文件 rootserver/mview/ob_mview_refresh_stats_maintenance_task.cpp,重点看两个设计亮点:一是”单拍自续”的定时器调度模式,二是游标驱动的分批限流清理。
OceanBase源码解读:物化视图快照推进任务 ob_mview_push_snapshot_task
在 OceanBase 4.3 的物化视图(MV)体系里,”大版本刷新”(major refresh mv)是一种重量级操作:它不是在事务里实时计算刷新,而是依赖存储层的多版本快照,把刷新推迟到一次 Major Compaction 中批量完成。这就带来一个关键问题——刷新期间所依赖的最低快照版本(min_refresh_scn)必须被系统”保住”,否则事务的多版本数据一旦被回收,刷新就会读到不完整的数据。本文要解读的 ob_mview_push_snapshot_task.cpp(209 行)正是解决这个问题的组件:一个由 RootService 定时驱动的”快照推进任务” ObMViewPushSnapshotTask,它周期性地把所有大版本刷新物化视图所需的最小快照 SCN 推送到快照表,为刷新链路兜底。
OceanBase源码解读:物化视图刷新信息缓存任务 ob_mview_update_cache_task
在 OceanBase 4.3 的物化视图(Materialized View)体系里,有一类 MV 的刷新节奏被绑定在基表的合并/冻结节拍上,也就是 REFRESH_MODE = MAJOR_COMPACTION。合并线程推进 major freeze 时,必须反复回答一个问题:这些 MV 里的数据是否已经刷到当前版本?这个判定处在极热路径上,如果每次都去扫一遍元数据表 __all_mview,代价完全不可接受。于是就有了本文要解读的 ob_mview_update_cache_task.cpp——一个专职”抄表”的后台任务:它每 5 秒把 __all_mview 里每个 MV 的 LAST_REFRESH_SCN 抄进内存哈希表,让热路径只查内存。整个文件不到 200 行,却是理解 OceanBase「持久化元数据 + 内存旁路缓存」这套读写分离设计的好样本。