OceanBase源码解读:物化视图刷新统计清理执行器 ObMViewStatsPurgeRefreshStatsExecutor

物化视图每次刷新都会在内部统计表 __all_mview_refresh_stats 里记一条记录:刷新耗时、扫描行数、增量行数等。日子久了这张表越长越大,所以 OceanBase 4.3 提供手动清理命令 PURGE MATERIALIZED VIEW REFRESH STATS,按保留时长批量删掉历史统计。本文解读的 ob_mview_stats_purge_refresh_stats_executor.cpp(191 行)就是这条命令的执行器入口,位于 storage/mview/cmd 命令执行层目录,向上对接 SQL 执行计划,向下调用清理工具类 ObMViewRefreshStatsPurgeUtil。整个文件的核心是三件事:解析参数、决定清理范围、分批事务删除。

继续阅读OceanBase源码解读:物化视图刷新统计清理执行器 ObMViewStatsPurgeRefreshStatsExecutor

OceanBase源码解读:物化视图日志清理执行器 ObMViewPurgeLogExecutor

物化视图的快速刷新依赖物化视图日志(MLOG)——它记录基表的增量变更,刷新完成后旧日志就要清掉。除了后台定时清理,OceanBase 还允许用户通过 PURGE_LOG 命令手动控制清理水位。本文解读这条命令在存储层的执行器 ObMViewPurgeLogExecutor,位于 storage/mview/cmd/ 目录,全文只有 121 行,是 cmd 命令层中最小的一个,却完整展示了这一族 Executor 的标准结构:前置检查、名字解析、版本门禁、参数组装、转发给真正干活的底层模块。清理动作本身由 storage/mview/ob_mlog_purge.cpp 的 ObMLogPurger 完成,执行器只做”薄适配”。

继续阅读OceanBase源码解读:物化视图日志清理执行器 ObMViewPurgeLogExecutor

OceanBase源码解读:物化视图命令层公共工具箱 ObMViewExecutorUtil

DBMS_MVIEW.REFRESH('mv1,mv2','f') 这行 PL/SQL 调用最终要落到物化视图的刷新引擎上,中间隔着一层不起眼却极关键的东西:参数拆解与校验。用户手里传来的是任意精度的 NUMBER、逗号分隔的字符串、单个字符的刷新模式、随手写的大小写混合的表名,而引擎要的是干净的 int64_t、ObString 切片、枚举和已在 schema 里对得上的标识符。ObMViewExecutorUtil 就是这层”翻译+门禁”的集合体——它没有任何成员变量,全部函数 static,像一把瑞士军刀插在命令层每个 Executor 的入口处。这篇就来拆这把刀上的十把刀片,以及它们背后那些踩过坑才写出来的约束。

继续阅读OceanBase源码解读:物化视图命令层公共工具箱 ObMViewExecutorUtil

OceanBase源码解读:物化视图手动刷新执行器 ObMViewRefreshExecutor

在 OceanBase 4.3 中,物化视图的手动刷新通过 DBMS_MVIEW.REFRESH('mv1', 'F') 触发。命令从 SQL 层进来后落到 ObMViewRefreshExecutor(src/storage/mview/cmd/ob_mview_refresh_executor.cpp,818 行)。它是物化视图子系统的“命令层”:解析参数、编排流程、控制事务、采集统计,真正算差量写数据的活交给 ObMViewRefresher。本文拆解它的结构与四条执行路径。

继续阅读OceanBase源码解读:物化视图手动刷新执行器 ObMViewRefreshExecutor

OceanBase源码解读:物化视图定时调度作业工具 ObMViewSchedJobUtils

物化视图最有用的能力之一是「定时自动刷新」:用户建 MV 时写一句 NEXT sysdate+1,之后每天后台自动刷一次。但 OceanBase 并没有为 MV 单独造一套定时框架,而是复用了通用的 DBMS_SCHEDULER 调度设施。今天解读的 ob_mview_sched_job_utils.cpp(723 行)就是这两个世界之间的桥梁——ObMViewSchedJobUtils 全部由静态函数组成,负责「把 MV 的时间参数翻译成调度作业、再把作业的生命周期与 MV 的增删改同步起来」,真正到点执行则交给 dbms_scheduler 的作业执行器。

继续阅读OceanBase源码解读:物化视图定时调度作业工具 ObMViewSchedJobUtils

OceanBase源码解读:新物化视图合并水位 ObMajorMVMergeInfo

物化视图的增量刷新有个隐藏前提:刷新器必须知道”我依赖的基表数据,在哪个版本上是完整且一致的”。在 OceanBase 4.3 的新物化视图(New MV)实现里,这个前提被抽象成一个挂在日志流(LS)上的三元水位结构 —— ObMajorMVMergeInfo。它同时承担三件事:记录 major 合并推进到哪、把”MDS 日志已写”和”数据已对齐”区分开、以及在加副本时充当准入闸门。本文解读 src/storage/mview/ob_major_mv_merge_info.cpp,看这三件事是怎么在一个 400 行文件里闭环的。

继续阅读OceanBase源码解读:新物化视图合并水位 ObMajorMVMergeInfo

OceanBase源码解读:物化视图MDS操作登记与重放 ob_mview_mds

物化视图刷新是 OceanBase 4.3 的重头特性。刷新的主战场在存储层的 storage/mview,但有一类信息光靠存储层自己知道没用——「这张 MV 正在刷、刷到哪个快照、目标要同步到哪个 GTS 位点」。这些元信息必须让 RootService 也看得见,否则 RS 无法判断嵌套 MV 的下层是否就位,也就无法决定上层能不能开始刷。OceanBase 选的做法是把这类状态做成事务的一等多数据源(Multi Data Source,简称 MDS),跟着 redo 一起落盘。本文解析这条通道的实现——三个类、两百来行代码,把「写入、注册、回放、清理」四个环节串了起来。

继续阅读OceanBase源码解读:物化视图MDS操作登记与重放 ob_mview_mds

OceanBase源码解读:物化视图刷新工具箱 ObMViewRefreshHelper

物化视图的刷新不是一次简单的 INSERT ... SELECT。以增量刷新为例,它要先在某个一致性快照上算出基表的变更集、再把这批变更以幂等方式写进物化视图表、顺便把已经消费掉的物化视图日志(MLog)清掉,过程中还不能被同租户里另一个并发的刷新任务插一脚。这些动作分散在刷新主流程的各个角落,实现上被抽成了一组静态函数,集中在 src/storage/mview/ob_mview_refresh_helper.cpp 里,也就是本文要拆的 ObMViewRefreshHelper。

继续阅读OceanBase源码解读:物化视图刷新工具箱 ObMViewRefreshHelper

OceanBase源码解读:物化视图刷新统计采集 ob_mview_refresh_stats_collect

物化视图刷新跑完了,效果怎么样?刷新前基表变了多少行、刷新花了多久、每条内部 SQL 执行了几次——这些问题的答案都藏在 OceanBase 的刷新统计表里。本文要读的 ob_mview_refresh_stats_collect.cpp(约 480 行)就是统计的”采集层”,它与此前解读过的清理执行器(ob_mview_refresh_stats_purge)一收一放,构成 4.3 物化视图统计体系的闭环。文件核心是两个类:ObMViewRefreshStatsCollection 负责单个物化视图的统计采集,ObMViewRefreshStatsCollector 负责整次 REFRESH 调用(可能一次刷多个 MV)的运行级汇总,最终把数据落到 __all_mview_refresh_stats、__all_mview_refresh_change_stats、__all_mview_refresh_stmt_stats、__all_mview_refresh_run_stats 四张内部表。

继续阅读OceanBase源码解读:物化视图刷新统计采集 ob_mview_refresh_stats_collect

OceanBase源码解读:物化视图维护任务 ob_mview_maintenance_task

OceanBase 4.3 引入物化视图(Materialized View)后,系统里多了一类需要长期”养护”的对象:用户的 MV 可能被反复创建删除,而它的元数据记录、刷新统计、自动刷新作业分散在多张系统表里。如果某个 MV 被删除后残留了元数据(孤儿 MV),这些脏记录会越积越多。本文解读的 ob_mview_maintenance_task.cpp(位于 rootserver/mview 目录,共 370 行)就是负责这件事的后台任务——ObMViewMaintenanceTask。它是物化视图体系里的”守门员”:每分钟巡检一轮,分批扫描全租户物化视图,找出表结构已删但元数据还在的孤儿 MV,把刷新统计、DBMS Scheduler 刷新作业和元数据记录一并清掉。整个任务采用”定时器 + 状态机”的写法,每 10 秒醒一次、每次只做一小步,天然支持断点续传,是读懂 OceanBase 后台任务设计风格的绝佳样本。

继续阅读OceanBase源码解读:物化视图维护任务 ob_mview_maintenance_task