评论 AB 实验每日监测

目标函数: 提升收到 bot 评论用户的活跃、留存、互动与创作意愿。报告包含描述性日监测与本周 PSM 匹配验证。

描述窗: 2026-02-26 ~ 2026-03-25 | 本周窗: 2026-03-23 ~ 2026-03-25 | 行为数据最新日期: 2026-03-26

本周匹配样本对
282
D1活跃率(实验组)
60.28%
D1活跃率(对照组)
47.52%
D1活跃Lift
26.87%

每日触达活跃 vs 其他活跃

对象: 非 bot、非 internal 用户。指标: 当日触达且活跃用户数、当日其他活跃用户数。

触达活跃占比(%)

指标定义: touched_active_users / active_non_bot_users。

本周 PSM 每日验证

方法: 倾向得分 + 同日分层最近邻匹配(无放回)。

index_datematched_pairsd1_active_treatd1_active_controld1_active_liftd3_active_treatd3_active_controld7_active_treatd7_active_control
2026-03-239470.21%52.13%34.69%74.47%63.83%NANA
2026-03-248467.86%57.14%18.75%NANANANA
2026-03-2510445.19%35.58%27.03%NANANANA

匹配平衡性 (SMD)

绝对值越接近 0 越好;用于观察匹配前后样本可比性改善。

featurepre_match_smdpost_match_smd
pre7_active_days-0.220-0.119
pre7_comments0.023-0.031
pre7_posts0.179-0.000
pre7_received_human0.019-0.071
account_age_days-0.2050.101

描述性日级明细

用于每日巡检触达覆盖与活跃盘子大小。

stat_datetouched_userstouched_active_usersactive_non_bot_usersother_active_userstouched_share_in_active
2026-02-26152122798778651.53%
2026-02-2712997766675691.27%
2026-02-2811790731972291.23%
2026-03-01148122695268301.75%
2026-03-0211486715570691.20%
2026-03-039780678767071.18%
2026-03-048260557755171.08%
2026-03-057154447244181.21%
2026-03-066452494848961.05%
2026-03-079877643363561.20%
2026-03-0811691648263911.40%
2026-03-099966468346171.41%
2026-03-106450415741071.20%
2026-03-116855416441091.32%
2026-03-128264434042761.47%
2026-03-1310080531852381.50%
2026-03-1412398701269141.40%
2026-03-15137101685067491.47%
2026-03-169563563055671.12%
2026-03-176542563055880.75%
2026-03-188663475046871.33%
2026-03-197756481547591.16%
2026-03-209772563255601.28%
2026-03-2112390741373231.21%
2026-03-2213594716170671.31%
2026-03-239459589558361.00%
2026-03-248464595858941.07%
2026-03-2510480503949591.59%

每日 AB 分组执行

清单文件: /Users/rating/workspace/neta-bi-runtime/task/20260127_AI评论策略整合/history/20260326_comment_ab_bot_participation_daily/data/csv/daily_ab_assignment_plan_20260325.csv

规则: 触达用户强制进入实验组,其余用户按 propensity decile 随机平衡至实验/对照。

作者:Codex | 模型:GPT-5.3-codex | 部署时间(UTC):2026-03-26T10:43:20Z