Compare commits
4 Commits
c9dee14291
...
dc48f48b6c
| Author | SHA1 | Date |
|---|---|---|
|
|
dc48f48b6c | |
|
|
1cad2b37d7 | |
|
|
bf289f799f | |
|
|
a889275e05 |
|
|
@ -0,0 +1,40 @@
|
|||
---
|
||||
name: pms-incident-review
|
||||
description: 定位PMS及信号依赖的运行故障、重复返工或恢复验收,追溯业务约束并验证跨链路修复。普通文案、正常研究迭代和无故障的新功能不触发。
|
||||
---
|
||||
|
||||
# 故障修复与恢复验收
|
||||
|
||||
授权和角色边界沿用根规则及本次会话。本技能不新增审批,也不授权上游写操作。先从[开发入口](../../../docs/开发入口.md)找到当前接续;历史镜像和过去的待办不代表今天的状态。
|
||||
|
||||
## 定义要恢复的业务能力
|
||||
|
||||
先用一句可验证的话说明受损能力和正确边界。例如“有效关注股应进入正式告警计算,但不因此取得建仓资格”,不能只写“补数据”或“服务恢复”。
|
||||
|
||||
区分当前用户决定、既定规则和实现事实。涉及预算、暂停、退出时,列出一项必须阻止的动作和一项仍应允许的动作,防止修复无意改变交易规则。有明确授权的正常动作不重复索要许可。
|
||||
|
||||
## 找到最早失效处及其影响
|
||||
|
||||
按需记录生产者、原始表或键、转换和缓存、最终消费者与输出。对每一项区分证券范围、数据时刻、计算时刻、有效日期、版本和单位。先从独立的应覆盖名单核对,再查实际输出,不能从“已有消息的股票”反推检查全集。
|
||||
|
||||
信号链路分别核对:进入监测、输入新鲜、历史资格与有效窗口、实际计算、触发或未触发、正式发布、消费应用。零条消息本身不能证明已计算。某一路无法计算,不得被其他来源的正常消息抵消。
|
||||
|
||||
保存最小可复查证据,保留检查机器和时点。找不到原始写入任务或生产日志时明确缺口,不把“表停更”直接归因为采集器故障。缓存文件存在不等于实际加载,源恢复不等于缓存和消费者恢复。
|
||||
|
||||
[业务证据核验工具](../../../docs/业务证据核验工具.md)可只读导出ITD历史准备、逐路核对并检查任务嵌套失败。该工具不核验实时信号全链路,不能据其READY给出全面恢复结论。
|
||||
|
||||
## 修复和验证共同约束
|
||||
|
||||
用`rg`追同一读数、状态或动作的全部调用方,包括旧入口、备用报价、缓存投影、页面和异步收取;不按文件改了多少判断范围完整。
|
||||
|
||||
按本次风险从[历史反例索引](references/failure-patterns.md)选择测试,不要求每次全跑所有场景。外部I/O可以用桩,实际入口、JSON编码、状态迁移和最终写入参数应保留。先证明反例能识别原故障,再验证修复后的正常路径、拒绝路径和恢复路径。已有合适回归直接复用,不复制测试凑数量。
|
||||
|
||||
对返回值检查到业务子结果;`ok=False`、非空errors、invalid或零影响行必须解释,调度成功不抵消它们。任务无报错但没有预期输出,仍属于未取得完成证据。
|
||||
|
||||
## 交付与复盘
|
||||
|
||||
部署时转用[pms-release](../pms-release/SKILL.md),QMT联调时转用[pms-qmt-diagnose](../pms-qmt-diagnose/SKILL.md),不为完成检查调用有副作用的tick或制造委托。
|
||||
|
||||
交付写清:直接触发原因、为什么原保护没拦住、为什么原验收没发现、预防措施对应的反例,以及仍缺的证据。区分代码修复、运行生效、自然场景判收。未判收项留下具体触发事件、读取位置和通过条件;不自动创建长期调度。
|
||||
|
||||
复盘中将功能需求变更、主动探索、候选阶段发现、上线后缺陷、实现偏离既定规则分别记账。cherry-pick、发布记录和回退预案不按故障次数重复计算。只把稳定且可验证的共性约束放入规则;机器能检查的优先落工具,不把运维责任转成交给交易员阅读的常驻说明。
|
||||
|
|
@ -0,0 +1,4 @@
|
|||
interface:
|
||||
display_name: "PMS故障修复复盘"
|
||||
short_description: "从业务约束追溯信号和交易故障,核对完整链路并防止重复返工"
|
||||
default_prompt: "使用 $pms-incident-review 定位本次故障,验证恢复边界,并将可预防的共因沉淀为回归或规则。"
|
||||
|
|
@ -0,0 +1,14 @@
|
|||
# 按改动选择历史反例
|
||||
|
||||
本索引用于确定验证边界,不表示以下历史问题今天仍存在。完整因果分析见[月度复盘](../../../../docs/月度故障与返工根因复盘_2026-11-18.md)。测试通过也不替代自然判收。
|
||||
|
||||
| 改动触及 | 必须回答的边界问题 | 已有反例入口 |
|
||||
| --- | --- | --- |
|
||||
| 数据源、名单、计算缓存 | 某一路为0时其他来源能否掩盖?缺席证券是否仍在分母?文件被实际读取规则接受吗? | `scripts/test_business_evidence.py`;11月12日关注漏入告警池、11月16日资金分钟历史不足 |
|
||||
| API、数据库输出、调度 | 实际调用入口和包装、Decimal/日期进入真实编码是否通过?嵌套失败是否被顶层吞掉? | `test_proposal_trader_view.py`、`test_execution_basis_decimal.py`、`test_batch57_units.py`、`test_business_evidence.py` |
|
||||
| 委托、库存、预算 | 已成交未入账、撤单未确认、跨日和改参后,是否重复使用数量或预算?失败后意图还在吗? | `test_batch45_units.py`、`test_batch52_units.py`、`test_grid_execution.py`、`test_buy_budget.py`、`test_user_stop.py` |
|
||||
| 技术读数或择时缓存 | 新旧调用方是否同口径?源数据更新或不可用恢复后能否重新计算?旧证据能否因刷新时间变新? | `test_proposal_trader_view.py`、`test_signal_recovery.py`、`test_timing_fusion.py`;11月16日代码审查的未修反例 |
|
||||
| 资金或盈亏 | 可用余额是否已含回笼?负净成本、零值、费用未知是否保留真实含义? | `test_batch47_units.py`、`test_signal_recovery.py`、`test_cost_precision.py` |
|
||||
| 页面判断与操作 | 同股列表与详情是否同一当前结论?信息变化与规则变化是否混淆?用户知道下一步且能完成吗? | 前端目录三道护栏及真实响应浏览器回放;11月5日接口包装、11月12日“当时未取得”返工 |
|
||||
|
||||
测试文件均位于仓库`scripts/`,通过`unit_test_guard.py`运行。新故障只按实际影响补缺口,不将表中所有检查强制套给无关改动。
|
||||
|
|
@ -27,6 +27,7 @@ docker run --rm --network none --cpus 1 --memory 512m --read-only --tmpfs /tmp:r
|
|||
- 策略参数经ParamStore读写。版本、快照、目标数量与在手轮次需匹配;盘中改规则不倒填08:50冻结,不用旧版本快照执行新策略。接入档位遵循用户最新决定,不额外设置观察天数。
|
||||
- 核验实际镜像、启动时间、配置、页面健康、自然调度和实际回执。交易链路还须检查连续确认、缺口、最新资金、在途、待入账及策略合计对账,不能只看容器运行或ONLINE。需要定位异常时再读[pms-qmt-diagnose](../pms-qmt-diagnose/SKILL.md)。
|
||||
- 不注入虚假信号或测试委托制造验收。分开记录隔离回放、本地浏览器复现、真机实际发生与未判收;未出现自然切换就如实保留待办。
|
||||
- 数据和任务链路按本次修复涉及的来源、证券及最终产出逐项判收,读取嵌套业务结果,不能用Celery成功或其他来源消息代替。可用[业务证据核验工具](../../../docs/业务证据核验工具.md)检查导出证据;历史准备通过不代表实时计算和消费通过。尚缺自然场景时在当前接续写出待观察的具体事件、读取位置及通过条件;不因此自动创建长期观察任务。
|
||||
|
||||
## 回退与交付
|
||||
|
||||
|
|
|
|||
|
|
@ -23,6 +23,12 @@
|
|||
3. 按影响范围验证。单测必须隔离配置、禁止联网;部署前用候选镜像完成断网回归。页面改动跑三道护栏,布局与交互另做浏览器验收。纯文档修改检查内容和链接即可。
|
||||
4. 在开发机修改,经Git提交后部署,提交说明用简短中文。交付说明改动、验证机器、实际结果和未完成事项。重要节点追加`DEVLOG.md`;当前状态写接续记录,注明核验时间。历史回执不等于当前健康,本地通过不等于真机判收。
|
||||
|
||||
## 故障修复与防止返工
|
||||
|
||||
- 修复前先写清违反的业务约束、规则来源和适用范围。错误实现不能成为新规则;补一个限制时,同时核对原来允许的动作仍然可达。
|
||||
- 数据、信号或异步链路按应覆盖名单逐路判收,区分输入新鲜、具备计算资格、已计算未触发、无法计算、发布和消费。顶层成功、总消息数、其他来源正常不能替代本路证据。
|
||||
- 修复须沿实际入口到最终保存或动作检查同一业务的其他调用方、缓存和版本,并以旧故障反例验证预防措施。线上故障定位、重复返工或恢复验收使用[pms-incident-review](.agents/skills/pms-incident-review/SKILL.md);不要求普通文案和研究试验走完整故障流程。
|
||||
|
||||
## 授权边界
|
||||
|
||||
- 按当前任务及会话已有授权推进,不因旧文档或技能重复索要许可。当前155模拟PMS的必要服务器、容器、数据库操作及PMS重启已获授权;不扩展为宿主机重启、新的破坏性清账或其他系统的写操作。
|
||||
|
|
|
|||
33
DEVLOG.md
33
DEVLOG.md
|
|
@ -1,5 +1,26 @@
|
|||
# 开发节点记录(三系统量化交易)
|
||||
|
||||
|
||||
## 2026年11月18日 资金逐股缺口修复与188定向发布
|
||||
|
||||
按用户要求修复原始历史恢复后仍存在的资金提醒不可用。09:36定位688356.SH在214 Redis的09:35原始快照缺席,前后分钟存在;旧读取器假定每分钟完整且同股唯一。ITD补丁78b5027、测试角色分离ed98c29已提交推送,09:54:34仅重建告警、API和资金快照三个消费者。131只实时可用、14只优先股四路资金正常计算,155提示为空,其余48容器未变。
|
||||
|
||||
继续按消费者判收发现资金快照全量分支仍调用读取器缺失的distinct_codes,09:59自然日志证实;补齐沪深名单及真实全量调度回归,提交1a45b6c,10:03:44仅重建capital_snapshot,其余50容器未变。10:08自然全量5226只完成落表;5217行可用,9行真实原始字段异常保留不可用且均在告警池外。当前最后核验时间、镜像、备份和证据见[发布接续](docs/资金逐股缺口修复与发布_2026-11-18.md)。
|
||||
|
||||
开发机最终1049项配置隔离禁网全量通过;188告警候选1045项、查询974项、最终快照978项均在断网无业务配置容器中通过。旧版逐股反例5失败3错误,旧全量调度接口反例1失败3错误。保留角色实际基线、源码挂载和私有配置,没有通过改阈值、补零或隐藏提示让验收通过。候选测试误打包被回归拦截并纠正,按候选返修记录,不当成生产回滚。
|
||||
|
||||
155只读核验连续确认、资金、持仓及现金对账正常,无缺口、待入账、孤儿或在途;未重建PMS,未访问188真实PMS,未触发测试信号、交易任务或改原始数据。月度规则、Skill、核验工具和本次回归共同保留在独立已提交分支,未修改主研究工作树。原始历史写入停更直接原因及复盘中的其他独立问题仍保留待办。
|
||||
|
||||
## 2026年11月18日 月度故障共因复盘与预防工具
|
||||
|
||||
按用户要求回看10月18日至今PMS及ITD、bionic、选股桥的422条本地提交记录,按问题族区分Bug、实施偏离、正常需求变化、候选返修和相同补丁重复提交。结论和具体因果链见[月度复盘](docs/月度故障与返工根因复盘_2026-11-18.md),没有把回退预案统计为生产回滚。
|
||||
|
||||
09:09在188上游只读确认三股`judge.stock_flow_data`末日已到11月17日;09:15对当时14只分钟准备名单用实际缓存校验入口重建,三路历史准备均14/14。日资金主文件为空但单票准备缓存有效,不能误报整路失败;盘前准备通过不代替盘中告警和消费。证据保存在`docs/evidence/*20261118.json`。
|
||||
|
||||
新增三条根规则、真实边界测试规则、`pms-incident-review`技能及只读采集/自动核验工具,补充发布技能的逐路和嵌套业务判收。21例工具回归已接入全量入口;最终版本开发机90组隔离禁网全量通过,包含工具21例专项,Skill格式通过。11月16日两组原始失败反例均被判FAILED;恢复快照通过;仅内存注入一股资金不足即被拦截。
|
||||
|
||||
本轮仅开发机规则、技能、文档和运维工具变更;未发布应用、改参数、补数据、触发业务任务或建立定时观察。188真实PMS未访问。独立分支`codex/recurrence-prevention-20261118`保留其他工作树修改;具体未完成运行项及关闭条件见复盘末节。
|
||||
|
||||
## 2026年11月16日14:18 技术读数保存修复发布155
|
||||
|
||||
按用户明确授权推送既有整改文档,进一步核验发现13:54自然提议任务的内部保存错误。代码`28abddf`已推送,并于14:14:45仅重建155 web与worker;交易规则与参数不变。开发机专项21项、全量88组,155候选web 88组、worker 87组断网回归通过。排空与再核对完成后切换,其他28容器和唯一WS不变,私有配置、环境和挂载保留。
|
||||
|
|
@ -3231,3 +3252,15 @@ a44c994于10:53:29仅发布155的web,镜像pms:proposal-copy-a44c994。开发
|
|||
撤下历史准备常驻说明,内部监测保留,实际异常只提示提醒能力影响。确认11月12日已发现实时输入陈旧而未完成源恢复;历史资金三只抽查停止于10月14日,原先仅说明样本不足不完整。详细边界、责任与发布见docs/资金监测漏检复盘与交易员提示整改_2026-11-16.md。
|
||||
|
||||
16:31:16仅更新155web为`pms:trader-alert-4814f9a-web`,本地及候选89组断网全量通过,1440/390隔离浏览器通过。16:32其余29容器不变,对账数量现金差0,连续确认1899278,无缺口、待入账、孤儿或在途。实际快照不再显示历史说明,内部0/15资金强度基线保留为未恢复。188本轮未写入或重建,原实时修复保持;没有修改交易规则或制造自然告警。
|
||||
|
||||
## 2026-11-16 系统全面只读检查
|
||||
|
||||
16:46至16:58在155模拟PMS及本次明确授权的188上游ITD、bionic完成只读采样。155唯一WS、回报与数量现金对账当前正常,连续确认1899537推进至1899586,无缺口、待入账、孤儿或在途。发现129只监控股票的历史资金全停10月14日,独立资金强度0/129可计算;技术旧映射与新日线方向不一致,部分业务路径仍使用旧映射;PMS15只关注持仓分钟行情只有178至186条,而ITD已补齐;五次持仓评析补读超时藏在成功任务的子结果中;208信号Redis时钟落后约270.34秒。保留自然告警尚未盘中判收及早间worker日志缺失的边界。
|
||||
|
||||
开发机完成9项断网监控反例、1项不可用缓存反例,既有资金健康9项测试通过。当前21份研判不可用记录核实为18份无方向、3份WAIT,均无有效BUY,不能误报模型故障。仅新增检查文档、证据及入口;未改业务代码、运行参数、数据或容器,未访问188真实PMS。问题尚未修复,优先级及验收口径见[全面检查与整改接续](docs/系统全面检查与整改接续_2026-11-16.md)。
|
||||
|
||||
## 2026-11-17 问题链路与数据位置细化
|
||||
|
||||
08:58至08:59沿用已授权范围,只读核对188 ITD和155模拟PMS。历史分钟资金明确位于192.168.18.75:27017的judge.stock_flow_data,三只抽样仍无10月14日之后日期。今天07:30基线文件虽已刷新,mf_minute仍0行;三只历史准备窗口已从13日降至12日,继续等待30日资格。当前seasonality的mysql配置仍通过Mongo读取分钟资金,未走Parquet;抽查近期Parquet目录均无文件。原始历史写入任务及未更新原因尚未定位,不能把下游重新构建当成修复。
|
||||
|
||||
技术pms_tech_daily和PMS_TECH_STATE_MAP日期已由今早06:30任务对齐至20261116,更新昨天问题的当前状态;仍保留两套消费入口及健康汇总缺陷。208 Redis时钟复测慢约270.56秒。各问题已明确接口、表、键、文件、消费者及待定位环节,见[细化记录](docs/系统问题链路与数据位置细化_2026-11-17.md)。只修改文档和证据,未改参数、补数、部署或访问188真实PMS。
|
||||
|
|
|
|||
|
|
@ -0,0 +1,82 @@
|
|||
{
|
||||
"method": "offline original code-probe replay and explicitly labelled fault injection; no production writes",
|
||||
"snapshot_file": "itd_preparation_verified_20261118.json",
|
||||
"snapshot_sha256": "2d118404915436f52553f192c60e507b55016049e21136aa37308679d1b18ccb",
|
||||
"original_code_probes": {
|
||||
"fusion_nested_failure": {
|
||||
"status": "FAILED",
|
||||
"failure_paths": [
|
||||
"$.timing_fusion.invalid",
|
||||
"$.timing_fusion.source_errors"
|
||||
],
|
||||
"limit": "无显式失败不等于业务完成;仍须核对预期输出、覆盖与自然回执。"
|
||||
},
|
||||
"all_sources_failed": {
|
||||
"status": "FAILED",
|
||||
"failure_paths": [
|
||||
"$.sources.alerts",
|
||||
"$.sources.intraday",
|
||||
"$.sources.metrics",
|
||||
"$.sources.mr",
|
||||
"$.sources.sell_actions"
|
||||
],
|
||||
"limit": "无显式失败不等于业务完成;仍须核对预期输出、覆盖与自然回执。"
|
||||
}
|
||||
},
|
||||
"actual_preparation_snapshot": {
|
||||
"status": "READY",
|
||||
"scope": "historical_preparation_only",
|
||||
"day": "2026-11-18",
|
||||
"issues": [],
|
||||
"lanes": {
|
||||
"minute_archive": {
|
||||
"expected": 14,
|
||||
"ready": 14,
|
||||
"unready": {}
|
||||
},
|
||||
"minute_fund": {
|
||||
"expected": 14,
|
||||
"ready": 14,
|
||||
"unready": {}
|
||||
},
|
||||
"daily_fund": {
|
||||
"expected": 14,
|
||||
"ready": 14,
|
||||
"unready": {}
|
||||
}
|
||||
},
|
||||
"limit": "只读重建的历史准备资格;未验证进程内存、当日实时输入、实际计算、发布和消费。"
|
||||
},
|
||||
"fault_injection_only": {
|
||||
"change": "one code history days 34 -> 13 and effective moneyflow minutes 240 -> 0; other lanes unchanged",
|
||||
"verdict": {
|
||||
"status": "INCOMPLETE",
|
||||
"scope": "historical_preparation_only",
|
||||
"day": "2026-11-18",
|
||||
"issues": [],
|
||||
"lanes": {
|
||||
"minute_archive": {
|
||||
"expected": 14,
|
||||
"ready": 14,
|
||||
"unready": {}
|
||||
},
|
||||
"minute_fund": {
|
||||
"expected": 14,
|
||||
"ready": 13,
|
||||
"unready": {
|
||||
"300133.SZ": [
|
||||
"history_days_below_30",
|
||||
"effective_money_flow_minutes_below_200"
|
||||
]
|
||||
}
|
||||
},
|
||||
"daily_fund": {
|
||||
"expected": 14,
|
||||
"ready": 14,
|
||||
"unready": {}
|
||||
}
|
||||
},
|
||||
"limit": "只读重建的历史准备资格;未验证进程内存、当日实时输入、实际计算、发布和消费。"
|
||||
}
|
||||
}
|
||||
}
|
||||
|
|
@ -0,0 +1,32 @@
|
|||
{
|
||||
"at": "2026-11-18T09:09:28.146670+08:00",
|
||||
"method": "read-only docker exec intraday_alerts; Mongo projection code,data.date max_time_ms=3000; three HS samples only",
|
||||
"host": "tlaipro",
|
||||
"container": "intraday_alerts",
|
||||
"image": "intraday_timing:funds-alerts-f5a02b7",
|
||||
"source": "192.168.18.75:27017/judge.stock_flow_data",
|
||||
"samples": {
|
||||
"300133.SZ": {
|
||||
"documents": 1,
|
||||
"dates": 112,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-11-17",
|
||||
"new_dates_after_oct14": 24
|
||||
},
|
||||
"002979.SZ": {
|
||||
"documents": 1,
|
||||
"dates": 112,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-11-17",
|
||||
"new_dates_after_oct14": 24
|
||||
},
|
||||
"601126.SH": {
|
||||
"documents": 1,
|
||||
"dates": 112,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-11-17",
|
||||
"new_dates_after_oct14": 24
|
||||
}
|
||||
},
|
||||
"limitation": "raw dates only; no claim all monitored stocks or intraday publication verified; writer root cause not established"
|
||||
}
|
||||
|
|
@ -0,0 +1,687 @@
|
|||
{
|
||||
"scope": "188 ITD only; 155 simulated PMS read-only; no synthetic signals or orders",
|
||||
"baseline_qualification": {
|
||||
"at": "2026-11-18T10:04:21.390160+08:00",
|
||||
"evaluated_minute": "2026-11-18T10:02:00+08:00",
|
||||
"expected_count": 131,
|
||||
"scope": "read_only_actual_cache_validation_not_live_memory",
|
||||
"ready_counts": {
|
||||
"capital_baseline_ready": 131,
|
||||
"money_flow_baseline_ready": 131
|
||||
},
|
||||
"unready": {},
|
||||
"accepted_prepared_count": 131,
|
||||
"live_priority_source_counts": {
|
||||
"money_flow_in_intensity": 14,
|
||||
"money_flow_out_intensity": 14,
|
||||
"capital_accumulation": 14,
|
||||
"capital_distribution": 14
|
||||
},
|
||||
"live_priority_count": 14,
|
||||
"live_publication_ready": true,
|
||||
"live_errors": []
|
||||
},
|
||||
"pms_health": {
|
||||
"at": "2026-11-18T09:57:03.677556+08:00",
|
||||
"prefix": "",
|
||||
"scope": "pms-sim-155",
|
||||
"ws": {
|
||||
"conn_state": "ONLINE",
|
||||
"last_seq": 1939027,
|
||||
"acked_seq": 1939027,
|
||||
"resync_flag": 0,
|
||||
"heartbeat_at": "2026-11-18 09:57:02",
|
||||
"last_error": "",
|
||||
"stat": {
|
||||
"rx": 297031,
|
||||
"tx": 541372,
|
||||
"trades": 11,
|
||||
"rejects": 0,
|
||||
"reconnects": 2,
|
||||
"dropped": 0,
|
||||
"last_rx_at": "09:56:57",
|
||||
"last_tx_at": "09:56:58",
|
||||
"hs_server_seq": 1738206,
|
||||
"hs_last_seq": 1738206,
|
||||
"snap_positions_at": "09:56:46",
|
||||
"snap_positions_n": 3,
|
||||
"snap_funds_at": "09:56:46",
|
||||
"seq_hwm": 1939027,
|
||||
"peer_skew_ms": 5,
|
||||
"ooo": 0,
|
||||
"pending_gap": 0,
|
||||
"funds_update_at": "09:33:18",
|
||||
"funds_update_n": 11,
|
||||
"position_update_at": "09:47:45",
|
||||
"position_update_n": 6,
|
||||
"last_close": "TimeoutError: timed out during handshake",
|
||||
"peer_skew_min": -128,
|
||||
"peer_skew_max": 2721
|
||||
}
|
||||
},
|
||||
"funds": {
|
||||
"seq": 1939024,
|
||||
"received_at": "2026-11-18 09:56:47",
|
||||
"age_sec": 16.5
|
||||
},
|
||||
"pending": 0,
|
||||
"orphan": 0,
|
||||
"open_orders": 0,
|
||||
"reconciliation": {
|
||||
"ok": true,
|
||||
"diffs": [],
|
||||
"fixes": [],
|
||||
"errors": [],
|
||||
"severity": "OK",
|
||||
"source": "ws",
|
||||
"note": "策略数量之和核对账户;不猜测差异归属,不自动把差异并入任何策略"
|
||||
},
|
||||
"cash_difference": 0.0,
|
||||
"http_health": 200
|
||||
},
|
||||
"pms_fund_health": {
|
||||
"at": "2026-11-18T10:11:02.749558+08:00",
|
||||
"focus": [
|
||||
"002979.SZ",
|
||||
"300133.SZ",
|
||||
"300182.SZ",
|
||||
"300244.SZ",
|
||||
"300291.SZ",
|
||||
"300364.SZ",
|
||||
"301052.SZ",
|
||||
"601126.SH",
|
||||
"603259.SH",
|
||||
"603533.SH",
|
||||
"688185.SH",
|
||||
"688356.SH",
|
||||
"688485.SH",
|
||||
"688625.SH"
|
||||
],
|
||||
"focus_error": null,
|
||||
"fund_health": {
|
||||
"at": "2026-11-18T10:11:00.047424+08:00",
|
||||
"as_of": "2026-11-18T10:10:00+08:00",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"count": 131,
|
||||
"available": 131,
|
||||
"priority": {
|
||||
"601126.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:09:57+08:00",
|
||||
"age_seconds": 60.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"688625.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:09:58+08:00",
|
||||
"age_seconds": 60.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"300182.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:06+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"688485.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:09:56+08:00",
|
||||
"age_seconds": 60.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"603259.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:07+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"688356.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:00+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"300133.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:06+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"688185.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:09:59+08:00",
|
||||
"age_seconds": 60.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"002979.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:06+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"300291.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:03+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"300364.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:06+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"301052.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:06+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"300244.SZ": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:03+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
},
|
||||
"603533.SH": {
|
||||
"state": "available",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:10:00+08:00",
|
||||
"observed_at": "2026-11-18T10:10:08+08:00",
|
||||
"age_seconds": 0.0,
|
||||
"capital_baseline_ready": true,
|
||||
"capital_baseline_samples": 20,
|
||||
"money_flow_baseline_ready": true,
|
||||
"money_flow_baseline_samples": 20
|
||||
}
|
||||
}
|
||||
},
|
||||
"warning": "",
|
||||
"missing_in_priority": []
|
||||
},
|
||||
"page_data_path": {
|
||||
"at": "2026-11-18T10:01:37.989000+08:00",
|
||||
"fund_warning": "",
|
||||
"focus": {
|
||||
"count": 14,
|
||||
"error": null,
|
||||
"truncated": false
|
||||
},
|
||||
"natural_fund_alerts": [
|
||||
{
|
||||
"id": "1794967230465-0",
|
||||
"ts_code": "603881.SH",
|
||||
"source": "money_flow_in_intensity",
|
||||
"direction": "看涨",
|
||||
"cat": "money_flow",
|
||||
"cat_label": "资金流强度",
|
||||
"level": "INFO",
|
||||
"value": 2.1038,
|
||||
"time": "09:59",
|
||||
"age_min": 2,
|
||||
"stale": false
|
||||
},
|
||||
{
|
||||
"id": "1794967230464-0",
|
||||
"ts_code": "600111.SH",
|
||||
"source": "capital_distribution",
|
||||
"direction": "看跌",
|
||||
"cat": "capital",
|
||||
"cat_label": "资金分布",
|
||||
"level": "DANGER",
|
||||
"value": -14.23,
|
||||
"time": "09:59",
|
||||
"age_min": 2,
|
||||
"stale": false
|
||||
},
|
||||
{
|
||||
"id": "1794967110355-0",
|
||||
"ts_code": "600111.SH",
|
||||
"source": "capital_distribution",
|
||||
"direction": "看跌",
|
||||
"cat": "capital",
|
||||
"cat_label": "资金分布",
|
||||
"level": "WARNING",
|
||||
"value": -15.34,
|
||||
"time": "09:57",
|
||||
"age_min": 4,
|
||||
"stale": false
|
||||
},
|
||||
{
|
||||
"id": "1794966630348-0",
|
||||
"ts_code": "301395.SZ",
|
||||
"source": "money_flow_out_intensity",
|
||||
"direction": "看跌",
|
||||
"cat": "money_flow",
|
||||
"cat_label": "资金流强度",
|
||||
"level": "WARNING",
|
||||
"value": -3.0634,
|
||||
"time": "09:49",
|
||||
"age_min": 12,
|
||||
"stale": false
|
||||
},
|
||||
{
|
||||
"id": "1794966390340-0",
|
||||
"ts_code": "301395.SZ",
|
||||
"source": "money_flow_out_intensity",
|
||||
"direction": "看跌",
|
||||
"cat": "money_flow",
|
||||
"cat_label": "资金流强度",
|
||||
"level": "INFO",
|
||||
"value": -2.4335,
|
||||
"time": "09:45",
|
||||
"age_min": 16,
|
||||
"stale": false
|
||||
}
|
||||
]
|
||||
},
|
||||
"scanner_deployment": {
|
||||
"at": "2026-11-18T10:10:50.439186+08:00",
|
||||
"targets": [
|
||||
{
|
||||
"name": "capital_snapshot",
|
||||
"image": "sha256:ac2b8766bb59c82a279f5c8abbe45b5f215d1d34ce47e35970e52f4dc01330cd",
|
||||
"tag": "intraday_timing:funds-snapshot-query-1a45b6c",
|
||||
"started": "2026-11-18T02:03:44.859687945Z",
|
||||
"health": "healthy",
|
||||
"restarts": 0,
|
||||
"source_matches": true,
|
||||
"env_and_other_mounts_unchanged": true
|
||||
}
|
||||
],
|
||||
"unchanged_containers": 50,
|
||||
"original_root_head_and_env_unchanged": true,
|
||||
"commit": "1a45b6cc297e70017a60ed47671f12dd36d527eb"
|
||||
},
|
||||
"full_scanner_before": "2026-11-18 09:59:00 M-CAP minute tick failed ('RedisMoneyFlowRealtimeAdapter' object has no attribute 'distinct_codes')",
|
||||
"tests": {
|
||||
"final_local": 1049,
|
||||
"alerts_candidate": 1045,
|
||||
"api_candidate": 974,
|
||||
"scanner_candidate": 978,
|
||||
"old_snapshot_failures": 5,
|
||||
"old_snapshot_errors": 3,
|
||||
"old_scanner_failures": 1,
|
||||
"old_scanner_errors": 3
|
||||
},
|
||||
"initial_deployment": {
|
||||
"at": "2026-11-18T09:55:09.403840+08:00",
|
||||
"targets": [
|
||||
{
|
||||
"name": "intraday_alerts",
|
||||
"image": "sha256:c8631e43989667808113582a780baf9323aea2a89c994f0dd648599eb3ed0f21",
|
||||
"tag": "intraday_timing:funds-snapshot-alerts-ed98c29",
|
||||
"started": "2026-11-18T01:54:34.309413368Z",
|
||||
"health": "healthy",
|
||||
"restarts": 0,
|
||||
"source_matches": true,
|
||||
"env_and_other_mounts_unchanged": true
|
||||
},
|
||||
{
|
||||
"name": "intraday_api",
|
||||
"image": "sha256:2bfe7b66ee1edaed4179ef0af2c72f03890eb128f594c6f074ce9070d80a03af",
|
||||
"tag": "intraday_timing:funds-snapshot-query-ed98c29",
|
||||
"started": "2026-11-18T01:54:34.307722279Z",
|
||||
"health": "healthy",
|
||||
"restarts": 0,
|
||||
"source_matches": true,
|
||||
"env_and_other_mounts_unchanged": true
|
||||
},
|
||||
{
|
||||
"name": "capital_snapshot",
|
||||
"image": "sha256:2bfe7b66ee1edaed4179ef0af2c72f03890eb128f594c6f074ce9070d80a03af",
|
||||
"tag": "intraday_timing:funds-snapshot-query-ed98c29",
|
||||
"started": "2026-11-18T01:54:34.310265598Z",
|
||||
"health": "healthy",
|
||||
"restarts": 0,
|
||||
"source_matches": true,
|
||||
"env_and_other_mounts_unchanged": true
|
||||
}
|
||||
],
|
||||
"unchanged_containers": 48,
|
||||
"original_root_head_and_env_unchanged": true,
|
||||
"commit": "ed98c2921e01c9e5d77ad30aeb878db11afb8981"
|
||||
},
|
||||
"natural_full_scan": {
|
||||
"at": "2026-11-18T10:09:38.856665+08:00",
|
||||
"snapshots": {
|
||||
"688356.SH": {
|
||||
"ts_code": "688356.SH",
|
||||
"trade_date": "2026-11-18",
|
||||
"ratio_minute": "10:07",
|
||||
"main_net_ratio": 2.39,
|
||||
"mid_net_ratio": 6.43,
|
||||
"small_net_ratio": -8.8,
|
||||
"divergence": 4.760000000000002,
|
||||
"purified_volume": -1.2737802509238219,
|
||||
"direction": "neutral",
|
||||
"level": "NORMAL",
|
||||
"available": 1,
|
||||
"reason": null,
|
||||
"calc_time": "10:08",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
"002979.SZ": {
|
||||
"ts_code": "002979.SZ",
|
||||
"trade_date": "2026-11-18",
|
||||
"ratio_minute": "10:07",
|
||||
"main_net_ratio": -5.83,
|
||||
"mid_net_ratio": 6.15,
|
||||
"small_net_ratio": -0.32,
|
||||
"divergence": -11.66,
|
||||
"purified_volume": -2.560799664039922,
|
||||
"direction": "neutral",
|
||||
"level": "NORMAL",
|
||||
"available": 1,
|
||||
"reason": null,
|
||||
"calc_time": "10:08",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
"601126.SH": {
|
||||
"ts_code": "601126.SH",
|
||||
"trade_date": "2026-11-18",
|
||||
"ratio_minute": "10:08",
|
||||
"main_net_ratio": 4.97,
|
||||
"mid_net_ratio": 1.01,
|
||||
"small_net_ratio": -5.98,
|
||||
"divergence": 9.940000000000001,
|
||||
"purified_volume": -2.3147016901094424,
|
||||
"direction": "neutral",
|
||||
"level": "NORMAL",
|
||||
"available": 1,
|
||||
"reason": null,
|
||||
"calc_time": "10:09",
|
||||
"updated_at": "2026-11-18 10:09:00"
|
||||
},
|
||||
"603259.SH": {
|
||||
"ts_code": "603259.SH",
|
||||
"trade_date": "2026-11-18",
|
||||
"ratio_minute": "10:07",
|
||||
"main_net_ratio": -7.18,
|
||||
"mid_net_ratio": -0.09,
|
||||
"small_net_ratio": 7.27,
|
||||
"divergence": -14.36,
|
||||
"purified_volume": 0.15712119061254376,
|
||||
"direction": "neutral",
|
||||
"level": "NORMAL",
|
||||
"available": 1,
|
||||
"reason": null,
|
||||
"calc_time": "10:08",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
}
|
||||
},
|
||||
"scan_stats": {
|
||||
"stats": [
|
||||
{
|
||||
"scan_kind": "hot",
|
||||
"started_at": "2026-11-18T10:09:00",
|
||||
"pool_size": 15,
|
||||
"workers": 12,
|
||||
"wall_ms": 424,
|
||||
"p50_ms": 234.27899926900864,
|
||||
"p95_ms": 361.95363476872444,
|
||||
"max_ms": 363.9172986149788,
|
||||
"ok_cnt": 15,
|
||||
"err_cnt": 0
|
||||
},
|
||||
{
|
||||
"scan_kind": "full",
|
||||
"started_at": "2026-11-18T10:08:01",
|
||||
"pool_size": 5226,
|
||||
"workers": 12,
|
||||
"wall_ms": 54026,
|
||||
"p50_ms": 95.72233259677887,
|
||||
"p95_ms": 316.547192633152,
|
||||
"max_ms": 489.8930490016937,
|
||||
"ok_cnt": 5226,
|
||||
"err_cnt": 0
|
||||
},
|
||||
{
|
||||
"scan_kind": "hot",
|
||||
"started_at": "2026-11-18T10:07:00",
|
||||
"pool_size": 15,
|
||||
"workers": 12,
|
||||
"wall_ms": 313,
|
||||
"p50_ms": 142.33030378818512,
|
||||
"p95_ms": 296.5499833226204,
|
||||
"max_ms": 297.61963337659836,
|
||||
"ok_cnt": 15,
|
||||
"err_cnt": 0
|
||||
},
|
||||
{
|
||||
"scan_kind": "hot",
|
||||
"started_at": "2026-11-18T10:06:00",
|
||||
"pool_size": 15,
|
||||
"workers": 12,
|
||||
"wall_ms": 154,
|
||||
"p50_ms": 63.540227711200714,
|
||||
"p95_ms": 97.71370142698288,
|
||||
"max_ms": 139.2327845096588,
|
||||
"ok_cnt": 15,
|
||||
"err_cnt": 0
|
||||
},
|
||||
{
|
||||
"scan_kind": "hot",
|
||||
"started_at": "2026-11-18T10:05:00",
|
||||
"pool_size": 15,
|
||||
"workers": 12,
|
||||
"wall_ms": 247,
|
||||
"p50_ms": 147.48717844486237,
|
||||
"p95_ms": 228.79484295845032,
|
||||
"max_ms": 230.9478484094143,
|
||||
"ok_cnt": 15,
|
||||
"err_cnt": 0
|
||||
}
|
||||
]
|
||||
},
|
||||
"recent_snapshot_states": [
|
||||
{
|
||||
"available": 1,
|
||||
"reason": null,
|
||||
"n": 5217
|
||||
},
|
||||
{
|
||||
"available": 0,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"n": 9
|
||||
}
|
||||
],
|
||||
"unavailable_recent": [
|
||||
{
|
||||
"ts_code": "000635.SZ",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "002717.SZ",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "301661.SZ",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "600185.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "605255.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "688121.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "688496.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "688798.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
},
|
||||
{
|
||||
"ts_code": "688845.SH",
|
||||
"ratio_minute": null,
|
||||
"reason": "DATA_NOT_READY",
|
||||
"updated_at": "2026-11-18 10:08:01"
|
||||
}
|
||||
],
|
||||
"unavailable_input_now": {
|
||||
"000635.SZ": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T10:07:39+08:00",
|
||||
"age_seconds": 60.0
|
||||
},
|
||||
"002717.SZ": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T10:07:48+08:00",
|
||||
"age_seconds": 60.0
|
||||
},
|
||||
"301661.SZ": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:00:00+08:00",
|
||||
"age_seconds": 7680.0
|
||||
},
|
||||
"600185.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:30:29+08:00",
|
||||
"age_seconds": 5880.0
|
||||
},
|
||||
"605255.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:30:27+08:00",
|
||||
"age_seconds": 5880.0
|
||||
},
|
||||
"688121.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:30:22+08:00",
|
||||
"age_seconds": 5880.0
|
||||
},
|
||||
"688496.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:30:10+08:00",
|
||||
"age_seconds": 5880.0
|
||||
},
|
||||
"688798.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:30:26+08:00",
|
||||
"age_seconds": 5880.0
|
||||
},
|
||||
"688845.SH": {
|
||||
"state": "invalid_fields",
|
||||
"source": "redis_stock_flow_realtime",
|
||||
"snapshot_at": "2026-11-18T10:08:00+08:00",
|
||||
"observed_at": "2026-11-18T08:00:00+08:00",
|
||||
"age_seconds": 7680.0
|
||||
}
|
||||
}
|
||||
},
|
||||
"nonready_outside_alert_pool": [
|
||||
"000635.SZ",
|
||||
"002717.SZ",
|
||||
"301661.SZ",
|
||||
"600185.SH",
|
||||
"605255.SH",
|
||||
"688121.SH",
|
||||
"688496.SH",
|
||||
"688798.SH",
|
||||
"688845.SH"
|
||||
]
|
||||
}
|
||||
File diff suppressed because one or more lines are too long
File diff suppressed because one or more lines are too long
File diff suppressed because it is too large
Load Diff
|
|
@ -0,0 +1,14 @@
|
|||
{
|
||||
"machine": "development macOS",
|
||||
"python": "3.12",
|
||||
"isolation": "scripts/unit_test_guard.py; config cleared, empty cwd, sockets blocked",
|
||||
"full_suites": 90,
|
||||
"full_result": "ALL SUITES PASS",
|
||||
"full_log_sha256": "7831816009073221e9ff8fa68bd2d494ef0212490298b7e92b5a80873e97c4ba",
|
||||
"final_tool_tests": 21,
|
||||
"final_tool_result": "OK",
|
||||
"skill_validation": "Skill is valid!",
|
||||
"documentation_links": "8 affected rule/skill/entry/report files checked; no missing local links",
|
||||
"runtime_collector": "188 intraday_alerts read-only, 2026-11-18T09:27:40.257085+08:00; collection_errors empty; three historical lanes 14/14",
|
||||
"note": "No app runtime changes, deployment or scheduled automation"
|
||||
}
|
||||
File diff suppressed because it is too large
Load Diff
|
|
@ -0,0 +1,110 @@
|
|||
{
|
||||
"technical_early_empty_page": {
|
||||
"status": "OK",
|
||||
"total": 1,
|
||||
"matched": 2,
|
||||
"pages": 2
|
||||
},
|
||||
"technical_cross_version_page": {
|
||||
"status": "OK",
|
||||
"returned_dates": [
|
||||
20261113,
|
||||
20261113
|
||||
],
|
||||
"returned_versions": [
|
||||
"v1",
|
||||
"v1"
|
||||
]
|
||||
},
|
||||
"technical_map_failure": {
|
||||
"ok": true,
|
||||
"pull": {
|
||||
"ok": true
|
||||
},
|
||||
"map": {
|
||||
"ok": false,
|
||||
"error": "映射失败"
|
||||
}
|
||||
},
|
||||
"stale_quote": {
|
||||
"get_price": 20.0,
|
||||
"day_snapshot": {
|
||||
"price": 20.0,
|
||||
"open": 19.0,
|
||||
"high": 20.0,
|
||||
"low": 19.0,
|
||||
"vwap": 20.0,
|
||||
"day_chg_from_open": 0.05263157894736836,
|
||||
"bar_time": "2026-10-01 10:00:00",
|
||||
"bars": 1
|
||||
}
|
||||
},
|
||||
"sparse_minute_span": {
|
||||
"vol": 200.0,
|
||||
"minutes": 240,
|
||||
"frac": 1.0,
|
||||
"from": "09:30",
|
||||
"to": "15:00",
|
||||
"bars": 2
|
||||
},
|
||||
"mr_no_timestamp_contract": {
|
||||
"key": "mtf:mr:intraday:board",
|
||||
"watch": [
|
||||
{
|
||||
"ts_code": "600000.SH",
|
||||
"score": 0.9
|
||||
}
|
||||
],
|
||||
"avoid": [
|
||||
{
|
||||
"ts_code": "000001.SZ",
|
||||
"score": 0.1
|
||||
}
|
||||
]
|
||||
},
|
||||
"technical_no_usable_readings_status": {
|
||||
"enabled": true,
|
||||
"base_set": true,
|
||||
"data_date": 20261113,
|
||||
"rows_today": 1,
|
||||
"map": {
|
||||
"at": "2026-11-16T16:55:10.239633",
|
||||
"data_date": 20261113,
|
||||
"states": 1,
|
||||
"fresh": true,
|
||||
"note": null,
|
||||
"error": null,
|
||||
"stale": null
|
||||
},
|
||||
"error": null
|
||||
},
|
||||
"fusion_nested_failure": {
|
||||
"ok": true,
|
||||
"read": 0,
|
||||
"exits": [],
|
||||
"proposals": [],
|
||||
"recorded": 0,
|
||||
"ignored": 0,
|
||||
"errors": [],
|
||||
"dry_run": true,
|
||||
"timing_fusion": {
|
||||
"enabled": true,
|
||||
"accepted": 0,
|
||||
"invalid": 3,
|
||||
"source_errors": [
|
||||
"main_fund unavailable"
|
||||
],
|
||||
"actions": []
|
||||
}
|
||||
},
|
||||
"all_sources_failed": {
|
||||
"top_ok": true,
|
||||
"sources": {
|
||||
"intraday": false,
|
||||
"alerts": false,
|
||||
"metrics": false,
|
||||
"sell_actions": false,
|
||||
"mr": false
|
||||
}
|
||||
}
|
||||
}
|
||||
|
|
@ -0,0 +1,8 @@
|
|||
{
|
||||
"request_time": "2026-11-16T14:00:00+08:00",
|
||||
"cached_deadline": "2026-11-16T09:33:00+08:00",
|
||||
"cache_until": "2026-11-16T09:35:00+08:00",
|
||||
"verdict": "UNAVAILABLE",
|
||||
"request_id": "PMS_offline_probe",
|
||||
"network_calls": 0
|
||||
}
|
||||
|
|
@ -0,0 +1,41 @@
|
|||
{
|
||||
"at": "2026-11-17T08:59:30.445596+08:00",
|
||||
"scope": "155 simulation, empty prefix, read-only",
|
||||
"redis": {
|
||||
"host": "192.168.18.208",
|
||||
"port": 6379,
|
||||
"quotes_db": 13,
|
||||
"intraday_db": 2
|
||||
},
|
||||
"technical": {
|
||||
"endpoint": {
|
||||
"scheme": "http",
|
||||
"host": "192.168.16.188",
|
||||
"port": 38000,
|
||||
"path": ""
|
||||
},
|
||||
"path": "/api/v1/market/technical",
|
||||
"daily_table": "pms_tech_daily",
|
||||
"latest_date": 20261116,
|
||||
"row_count": 5019,
|
||||
"map_table": "pms_runtime_param",
|
||||
"map_key": "PMS_TECH_STATE_MAP",
|
||||
"map_at": "2026-11-17 06:30:04",
|
||||
"map_data_date": 20261116,
|
||||
"map_states": 20
|
||||
},
|
||||
"plan": {
|
||||
"base": {
|
||||
"scheme": "http",
|
||||
"host": "192.168.16.155",
|
||||
"port": 8300,
|
||||
"path": ""
|
||||
},
|
||||
"logic_path": "/logic_state",
|
||||
"timeout_sec": 3
|
||||
},
|
||||
"signal_clock": {
|
||||
"redis_minus_host_seconds": -270.56278705596924,
|
||||
"roundtrip_seconds": 0.27058839797973633
|
||||
}
|
||||
}
|
||||
|
|
@ -0,0 +1,163 @@
|
|||
{
|
||||
"at": "2026-11-17T08:58:11.656399+08:00",
|
||||
"scope": "188 intraday_alerts only; read-only",
|
||||
"mongo": {
|
||||
"host": "192.168.18.75",
|
||||
"port": 27017,
|
||||
"database": "judge",
|
||||
"collection": "stock_flow_data"
|
||||
},
|
||||
"seasonality": {
|
||||
"runner_version": "v2",
|
||||
"data_source": "mysql",
|
||||
"parquet_root": "/app/data/parquet",
|
||||
"t_days": 20,
|
||||
"n_min": 30,
|
||||
"cache_dir": null,
|
||||
"purify_lag": 5,
|
||||
"min_valid_points": 20
|
||||
},
|
||||
"samples": {
|
||||
"300133.SZ": {
|
||||
"documents": 1,
|
||||
"dates": 88,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-10-14",
|
||||
"dates_after_oct14": []
|
||||
},
|
||||
"002979.SZ": {
|
||||
"documents": 1,
|
||||
"dates": 88,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-10-14",
|
||||
"dates_after_oct14": []
|
||||
},
|
||||
"601126.SH": {
|
||||
"documents": 1,
|
||||
"dates": 88,
|
||||
"first": "2026-06-03",
|
||||
"last": "2026-10-14",
|
||||
"dates_after_oct14": []
|
||||
}
|
||||
},
|
||||
"seasonality_files": {
|
||||
"2026-11-16": {
|
||||
"as_of_date": "2026-11-16",
|
||||
"mf_minute_rows": 0,
|
||||
"vol_rows": 27541,
|
||||
"mf_daily_rows": 118,
|
||||
"modified_at": "2026-11-16T07:30:38.824870+08:00"
|
||||
},
|
||||
"2026-11-17": {
|
||||
"as_of_date": "2026-11-17",
|
||||
"mf_minute_rows": 0,
|
||||
"vol_rows": 28010,
|
||||
"mf_daily_rows": 120,
|
||||
"modified_at": "2026-11-17T07:30:35.970534+08:00"
|
||||
}
|
||||
},
|
||||
"parquet_dates": {
|
||||
"2026-10-12": {
|
||||
"directory_exists": true,
|
||||
"data_files": 4
|
||||
},
|
||||
"2026-10-14": {
|
||||
"directory_exists": true,
|
||||
"data_files": 4
|
||||
},
|
||||
"2026-10-15": {
|
||||
"directory_exists": true,
|
||||
"data_files": 0
|
||||
},
|
||||
"2026-10-30": {
|
||||
"directory_exists": true,
|
||||
"data_files": 0
|
||||
},
|
||||
"2026-11-13": {
|
||||
"directory_exists": true,
|
||||
"data_files": 0
|
||||
},
|
||||
"2026-11-16": {
|
||||
"directory_exists": true,
|
||||
"data_files": 0
|
||||
}
|
||||
},
|
||||
"preparation": {
|
||||
"2026-11-16": {
|
||||
"at": "2026-11-16T23:59:55.611447+08:00",
|
||||
"samples": {
|
||||
"002979.SZ": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 13,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
},
|
||||
"300133.SZ": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 13,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
},
|
||||
"601126.SH": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 13,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
}
|
||||
}
|
||||
},
|
||||
"2026-11-17": {
|
||||
"at": "2026-11-17T08:58:07.765053+08:00",
|
||||
"samples": {
|
||||
"002979.SZ": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 12,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
},
|
||||
"300133.SZ": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 12,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
},
|
||||
"601126.SH": {
|
||||
"state": "partial",
|
||||
"minute_fund": {
|
||||
"source": "stock_flow_data",
|
||||
"days": 12,
|
||||
"required_days": 30,
|
||||
"ready_minutes": 0,
|
||||
"state": "waiting_data"
|
||||
},
|
||||
"errors": {}
|
||||
}
|
||||
}
|
||||
}
|
||||
}
|
||||
}
|
||||
|
|
@ -0,0 +1,50 @@
|
|||
# 业务证据核验工具
|
||||
|
||||
这组工具用于修复验收,防止“其他来源有消息”“任务成功”掩盖本路失效。它们不写业务状态、不发消息、不调用模型、不补算或交易;当前没有安装定时调度。
|
||||
|
||||
## ITD历史准备
|
||||
|
||||
在已获只读授权的ITD容器中通过stdin执行仓库`scripts/collect_itd_preparation.py`,stdout保存到开发机。实际主机、端口和容器先核对;以下是本次授权范围的调用方式,不构成未来授权:
|
||||
|
||||
```bash
|
||||
ssh -o BatchMode=yes -o ConnectTimeout=8 -p 2280 tlai@192.168.16.188 \
|
||||
'docker exec -i intraday_alerts python -' \
|
||||
< scripts/collect_itd_preparation.py > /tmp/itd-preparation.json
|
||||
python3 scripts/check_business_evidence.py preparation /tmp/itd-preparation.json
|
||||
```
|
||||
|
||||
采集只读分钟服务的独立应覆盖名单、当日准备状态和基线文件,复用ITD的`load_prepared`验证版本、配置及证券身份。它在独立进程内重建缓存,不读取告警进程的内存,也不访问Mongo/MySQL/Redis。采集失败退出2,不能用旧文件冒充本次结果。
|
||||
|
||||
判定按沪深股票逐路输出应有数、就绪数和缺口。分钟量价要求有效成交额分钟至少200、QRS分钟至少180;分钟资金要求历史至少30天、有效分钟至少200;日资金要求至少30天并存在接纳后的基线。这些阈值对应ITD `intake_preparation.HistoryBuilder` 的准备资格,样本数和标准差的判断复用当前配置与统计字段。上游资格规则或缓存协议变动后应同步此适配器;它不另定交易阈值。
|
||||
|
||||
`READY`仅表示**该份名单的历史准备层**通过,不能提升为全市场、全部告警股票或实时信号恢复。输出必须同时报告名单规模和采集时间。空名单、缺股、过期/未来证据、缓存拒绝或某一路不足都不能通过。默认按当前时间核验,证据和名单时间有效300秒;这是取证有效期,不是行情或交易容忍时间。
|
||||
|
||||
当日原始资金、实际计算、发布和消费仍须分别取证。盘前名单可能只有持仓及关注;开盘后扩池应重新采集,不以盘前14只代替此前129只告警池。历史准备允许的少量缺失分钟也不能证明某一具体交易分钟可计算。
|
||||
|
||||
## 任务业务子结果
|
||||
|
||||
将自然任务的完整业务返回值导出为JSON,保留嵌套结构后运行:
|
||||
|
||||
```bash
|
||||
python3 scripts/check_business_evidence.py task /tmp/task-result.json
|
||||
```
|
||||
|
||||
工具递归定位`ok/success=false`、非空`error/errors/invalid/failed`、以`_error/_errors`结尾的失败字段、`sources`下明确的false和明确失败status;顶层成功不能抵消它们。只输出字段路径,不输出错误正文。日志必须先核对为该次自然任务的完整返回值;不要用字符串摘要、被截断的日志或任意历史JSON冒充当前完整回执。
|
||||
|
||||
无显式失败返回`NO_REPORTED_FAILURE`,**不返回业务完成**。空结果为`INCOMPLETE`;没有预期输出仍需查名单、跳过原因和依赖。未计算、中性和未触发的区别不能仅从这个通用检查器推断。
|
||||
|
||||
## 退出码、重放和回归
|
||||
|
||||
- 0:历史准备层通过,或任务没有显式失败;含义由status与scope限定。
|
||||
- 1:发现失败或证据不完整。
|
||||
- 2:输入格式错误或采集失败。
|
||||
|
||||
历史证据用`--at '2026-11-18T09:15:30.370554+08:00'`在原时点重放,不能将此参数用于宣称当前健康。工具不修改输入,重复运行结果一致。文件、日期和字段类型不符合契约时必须失败。
|
||||
|
||||
开发机回归通过隔离入口执行;该专项已登记全量入口:
|
||||
|
||||
```bash
|
||||
python scripts/unit_test_guard.py scripts/test_business_evidence.py
|
||||
```
|
||||
|
||||
21例覆盖资金空而其他来源正常、应有证券缺席、样本不足、旧/未来证据、无效缓存、日资金缺失、嵌套失败、全部来源失败、空结果、无信号不冒充完成、输出脱敏和CLI退出码。另用11月18日188真实只读文件验证采集适配器,结果见[月度复盘](月度故障与返工根因复盘_2026-11-18.md)。
|
||||
|
|
@ -1,5 +1,9 @@
|
|||
# 开发资料入口
|
||||
|
||||
11月18日盘中资金修复见[逐股缺口修复与发布](资金逐股缺口修复与发布_2026-11-18.md):已定位214原始快照漏股及同股不同采集时间、共享读取器未补齐全量扫描名单接口;逐股提示恢复,188定向发布;10:08自然全量5226只落表完成,10:11:02最终131只告警池资金可用、14只优先股正常。以下盘前证据保留原时点。
|
||||
|
||||
11月18日最新:[近一个月故障与返工根因复盘](月度故障与返工根因复盘_2026-11-18.md)。已只读确认三股原始分钟资金历史补到11月17日,盘前14只分钟准备名单三路历史资格通过;不代表129只盘中告警池及自然发布消费已判收。复盘归并四类共因,新增[故障修复Skill](../.agents/skills/pms-incident-review/SKILL.md)和[业务证据核验工具](业务证据核验工具.md),保留明确的待闭环项。下方11月16日、17日的历史停更描述属于当时证据,不能继续当成当前原始数据状态。
|
||||
|
||||
11月16日资金监测最新整改见[漏检复盘与交易员提示](资金监测漏检复盘与交易员提示整改_2026-11-16.md):15:56已完成实时源切换;16:31仅发布155web的4814f9a,撤下历史准备常驻说明,保留内部诊断。16:32实际接口和对账正常,其他29容器不变。历史资金停更与自然告警验收仍需闭环。此前名称刷新修复保留。
|
||||
|
||||
11月16日14:14:45已按授权推送整改并发布155 web与worker的[技术读数保存修复](技术读数保存修复与发布_2026-11-16.md)。修复盘中核验发现的新提议与当日复核JSON保存错误;交易规则、参数及其他28容器不变。开发机88组、候选web 88组和worker 87组断网通过,14:18自然保存与运行核验完成。整体合理性分析仍属待讨论方案,下一步先与用户讨论,不自动转成策略实现;当前状态见[整改接续](交易计划与风险约束整改接续_2026-11-16.md)。
|
||||
|
|
@ -56,6 +60,8 @@
|
|||
|
||||
| 任务 | 入口 |
|
||||
| --- | --- |
|
||||
| 运行故障、重复返工、数据恢复验收 | [pms-incident-review](../.agents/skills/pms-incident-review/SKILL.md);[月度共因复盘](月度故障与返工根因复盘_2026-11-18.md);[只读取证和自动判定](业务证据核验工具.md)。普通文案和正常研究迭代不触发完整故障流程 |
|
||||
| 系统运行、逐路信号可用性与监控盲区 | [问题链路与数据位置](系统问题链路与数据位置细化_2026-11-17.md),明确表、Redis键、文件、消费者及最新补充状态;[全面检查与整改接续](系统全面检查与整改接续_2026-11-16.md)保留129只资金历史、技术新旧口径、行情完整性、任务子结果、时钟及155账本的当次实证;检查完成不等于问题已修复 |
|
||||
| 选股到交易计划的预算、网格与退出整改 | [整改规格与验收用例](交易计划与风险约束整改规格_2026-11-16.md);[当前进展与未完成项](交易计划与风险约束整改接续_2026-11-16.md) |
|
||||
| 持仓盈亏口径、雷赛综合盈亏空值与负成本截断 | [11月9日14:25只读核验](持仓盈亏与零成本边界核验_2026-11-09.md),已确认自然减仓及少计利润,计算修复尚未实施 |
|
||||
| 4%网格档距、实际批次余量及盘中迁移 | [11月9日网格执行修复](网格档距与成交余量修复_2026-11-09.md),以最新部署和实际回执为准 |
|
||||
|
|
|
|||
|
|
@ -0,0 +1,113 @@
|
|||
# 近一个月故障、返工与重复修改的根因复盘
|
||||
|
||||
核验日期:2026年11月18日,北京时间。范围为2026年10月18日至本次取证时点的PMS及直接依赖ITD、bionic、选股桥。第一阶段复盘只读核对188上游,未改运行参数、源数据、服务或交易;后续按用户修复并部署要求,定向更新ITD资金消费者,见[盘中修复接续](资金逐股缺口修复与发布_2026-11-18.md)。两阶段均未访问188真实PMS。本报告中的历史故障不是对今天运行状态的统一断言。
|
||||
|
||||
## 结论
|
||||
|
||||
这些问题存在共同根因:**业务约束没有完整地成为跨模块的输入、状态、输出和验收契约;修改与验证常停在局部入口,局部成功又被用来代表整条业务能力恢复。** 因而同一约束在另一个缓存、任务、页面或执行分支中再次失效。
|
||||
|
||||
这不是简单的“测试数量不足”。本月多次在数十组断网回归通过后仍发现真实边界问题;已有测试甚至曾断言错误的资金口径。增加相同假设下的测试不能纠正假设。也不能把所有问题归为这一个原因:外部资金原始写入为何停止、QMT某些缺失序号的原始报文,目前证据不足,不能虚构技术根因。
|
||||
|
||||
本次将稳定约束落入三条根规则、一条测试边界规则和一个故障修复Skill;实现可运行的只读取证及自动判定工具,用历史反例和恢复后的真实文件验证。没有把所有历史业务缺陷混入本次整改,也没有把新增文档当作运行系统已经具备持续监控。
|
||||
|
||||
## 复盘方法与证据范围
|
||||
|
||||
查阅本地全部引用中落在时间窗口内的提交标题,再按故障链追查相关差异、当日接续、实际回执和已有回归。清单为PMS 304条、ITD 19条、bionic 55条、选股桥44条,共422条提交记录。完整索引见[提交清单](evidence/monthly_commit_inventory_20261118.json)。这是本地可得记录,不是全部远程仓库审计,也不是422次事故。
|
||||
|
||||
已用稳定patch-id核对:`64af252/c725569`、`934d46f/5b75ade`、`47f5621/39d209a`各是一份相同补丁的不同提交,不能重复计为修复。发布回执、交接副本、研究方案调整也不按Bug计算。本报告按问题族归并,不用缺乏可靠工时和事故编号的数据计算“返工率”。
|
||||
|
||||
优先使用具体提交和运行回执,规则与历史解释发生冲突时回到当时有效的用户决定。保留原始历史,不以今天恢复后的数据改写过去。未额外读取、补齐或研究北交所数据。
|
||||
|
||||
## 从业务本质推导需要守住什么
|
||||
|
||||
交易系统首先要忠实执行授权,其次才是生成更多信号。一个动作有依据,要求相关事实属于正确对象和时点、必要输入足够计算、判断适用于当前规则、动作只发生一次且被真实账本承认。服务存活、消息存在或函数正常返回,只是这些条件中的一小部分。
|
||||
|
||||
系统异步运行,成交、入账、取消确认和源数据到达不会同时发生。因此“尚未入账”不等于“尚未成交”,“已发出”不等于“已完成”,“旧结果可读”不等于“当前仍有效”。持久化意图、真实事实和展示投影必须各有身份与有效期。
|
||||
|
||||
交易员通过产品作决策,需要的是当前判断、限制和可采取的动作。内部历史缺数、某次读缓存失败或运维处理过程,不能取代业务结论,更不能成为要求交易员自行排障的理由。
|
||||
|
||||
由此得到四类可验证的共性根因:
|
||||
|
||||
| 共因 | 本月反复出现的机制 | 为什么原保护和验收没有挡住 | 对应预防 |
|
||||
| --- | --- | --- | --- |
|
||||
| 完成标准没有贯穿依赖链 | 有数据行、能读旧批次、Celery成功、其他路有消息,被用于判断本路完成 | 缺独立应覆盖名单、目标日期、逐来源计算资格与最终产出;无触发和不能计算都沉默 | 按来源和证券核对输入、计算、发布、消费;自动暴露嵌套失败;取证结论保留层次 |
|
||||
| 同一业务语义分散实现 | 资金重复加回笼;技术面新旧读法并存;关注研究与告警名单分离;网格核销与库存顺序不同 | 修复围绕当前文件或截图展开,没有枚举所有消费者与状态投影 | 修复前定义业务约束,沿调用方核对;复用同一账本或事实入口,不新增平行判断 |
|
||||
| 时间、身份与恢复状态不完整 | 迟到成交被重复使用额度;跨日缓存不失效;数据恢复后任务不恢复;改参后旧库存被当新档位 | 测试主要覆盖同步首次成功,失败后重试、跨日、部分完成和版本变化缺少组合验证 | 按影响选择乱序、重放、恢复与跨版本反例;不能以刷新时间延长原事实有效期 |
|
||||
| 验证模型偏离真实使用边界 | API包装层漏读、Decimal无法保存、调度入口缺导入、页面“当时未取得”反复返工 | 桩把关键包装/类型替换掉;只测服务函数和字段,未经过实际入口、输出编码或交易员任务 | 保留真实边界、只替换外部I/O;验证旧反例能失败;同时验证原允许路径仍可达 |
|
||||
|
||||
“要更仔细”不能操作化。每项预防都必须回答:它会阻止哪一个已发生的反例,放过哪个正常场景,在哪里执行,由什么证据证明。
|
||||
|
||||
## 具体问题族与因果链
|
||||
|
||||
以下“历史结果”仅代表对应记录时点。提交短号可在相应仓库核查。
|
||||
|
||||
| 问题族与证据 | 直接触发、返工或遗漏 | 共同原因及可提前阻止的检查 | 历史结果或边界 |
|
||||
| --- | --- | --- | --- |
|
||||
| 10月19日买卖冲突,PMS `fad1bb1 → 28053f3`,DEVLOG对应两轮发布 | 科士达旧建仓与清仓同时活跃;首次修复后又发现人工清仓在T+1无可卖量时不留任务 | 将“当前能卖”与“清仓意图存在”混同;应同时验证跨轮停止旧买入和不可卖时的持久意图 | 第二轮修复发布;不能把首轮24项以外的未测场景算已验 |
|
||||
| 10月20日至21日提议确认,`0acf7b8、1df17e6、984e3d7、888a208` | 完整准备移出人工确认;随后补逐票快速核验、原子保存、重复确认幂等以及原数量可执行时不改承诺 | “最新数据”和“用户已经确认的内容”边界需明确,不能让刷新不断重新确认 | 包含正常产品演进与缺失边界补齐,不能全部归为Bug |
|
||||
| 10月26日重复下发,`47bcea5`,DEVLOG“钧达股份成本口径与父指令重复下发” | 目标卖600股发出两笔600股;执行先于成交回放,父指令入账量尚未更新 | 将账本投影的暂时滞后当成可用额度;旧码反例13项失败,证明入口级测试能够提前拦住 | 修复综合出口累计成交、入账和未终态预留,不靠删账解决 |
|
||||
| 10月26日账户资金,`f90d5e7`,[资金口径核查](账户资金口径核查_2026-10-26.md) | QMT可用已含卖出回笼,PMS再次相加;原测试桩还断言错误公式 | 权威字段含义没有落实为统一入口,测试与实现共用同一错误假设 | 修正入口、协议说明及桩;数量对账正确不能证明资金口径正确 |
|
||||
| 10月27日QMT周期拒绝,DEVLOG同日联调记录 | 连接在线但出现拒绝与序号缺口;地址切换、补发时间与原事件时间容易混淆 | 连通性与连续确认、签名有效性不是一回事;必须核原报文及产生时间 | 当日QMT修改后取得连续135条证据;部分旧缺号内容仍未知,不编造归属 |
|
||||
| 10月28日轮换,`316d31d` | 隔离演练发现撤单失败会回滚退出决定,零持仓也可能早于下游委托收尾 | 意图与外部动作处于错误事务边界,失败恢复没有独立持久状态 | 候选阶段发现并补修,是有效预防的正例;不是线上已发事故 |
|
||||
| 10月30日当日限价,`64af252、2eaec70 → 47f5621`,[边界记录](限价单有效期与撤单成交边界_2026-10-30.md) | 改为当日有效后,15:00:16又生成截止15:00的续单,随后本地作废 | 新有效期与旧交易时段包含端点的语义不一致;应覆盖截止前、等于和之后 | 补两处截止检查;未发到QMT,不写成误成交 |
|
||||
| 10月19日、11月5日、11月11日计划过期,桥 `ef873bb → 475bfec → 9f8224e`,PMS `e4bb782、41fb434` | 缺热度/传导时阻断正确,但源恢复后缺有限恢复;新就绪查询又因历史全表扫描返修 | 只设计失败保护,没有恢复转移;小桩不暴露生产查询规模 | 已加有界恢复和日期范围;重复源迟到不等于同一补丁失效 |
|
||||
| 11月2日红利研究,`7fcae67、a7d1d55` | 旧“压力”标签被用于新策略方向;一般风险披露被解释成已发生风险 | 输出能解析、原文有词并不证明单位正确、因果成立或结论可跟踪 | 撤回旧标签推演,从原事实重建;属于研究产品验收纠偏,非运行代码回滚 |
|
||||
| 11月3日真实调度入口,`9bc94eb → 56db0fd` | 服务函数已有测试,调度器实际调用时缺`param_store`导入 | 测到函数能力,未测实际接线 | 增加真实Celery任务入口测试;保留外围桩而不替换入口 |
|
||||
| 11月3日至12日人工关注,PMS `bf5e3ed、6fddc50、71f8278`,bionic `963196a、a689c8f、4700ff5` | 先解决登记/研究,随后发现恢复、合法JSON、榜单截断和正式告警覆盖分别缺失;11月12日9只关注中8只未入ITD告警池 | 把研究池、交易候选、行情池、正式告警池当作同一“覆盖”;端到端角色没有明确分开 | 逐环节补齐;“关注即下单”从未被授权;缺券商或缺评析豁免的后续用户决定属于规则调整 |
|
||||
| 11月4日导出费用,`484aa2a → f50449d → 017ead5` | 金额精度处理后仍需修手续费/退款方向及表格舍入口径 | 数值可格式化不等于会计语义、符号和外部成品一致 | 应用同一真实账例贯穿数据、公式和导出,不只比显示小数位 |
|
||||
| 11月4日至5日信号页面,`34087b5 → 67b0277 → e672781 → e4a7424` | 多轮恢复原单行信息流及真实研究展示 | 界面实现偏离既有交易员任务与确认原型;并非每次都需要新标签或新分区 | 归为可避免的产品返工;布局、信息密度和操作任务需一并验收 |
|
||||
| 11月5日ETF入口,`f6cf445 → 6c10116` | 页面把统一`{ok,data}`外层当成业务状态,真实接口有数据却展示不可用 | 测试响应没有穿过真实包装边界 | 用真实包装的只读响应回放即可提前发现 |
|
||||
| 11月9日至16日网格,`2d673b0 → 5c30373 → 0ea114f`,[网格接续](网格档距与成交余量修复_2026-11-09.md) | 发指令就移除库存导致余量漏卖;补实际库存后又发现多批核销、零散成交、旧报价分支及改参后同价重复准入 | 多处各自解释库存、价格与完成;首次真机单批样本不能覆盖多批及版本变化 | 4%是用户决定;余量、核销和跨参数准入是缺陷修复,不能混计 |
|
||||
| 11月9日至10日负净成本,`50b4dcd → 6fddc50` | 雷赛减仓后成本收回,旧逻辑截负值为零再存空,金额少计1968元 | 将不适合计算比例的分母误当利润不存在;状态压缩损失业务含义 | 保留真实金额,收益率说明不适用;未知费用不补零 |
|
||||
| 11月11日ITD日线缓存,`2463a2e` | QRS跨日仍用旧日线,刷新时间可能掩盖事实日期 | 缓存生命周期没有绑定业务日,证据时间与发布时间混用 | 修复跨日失效及保留原证据时间;分钟缺口是另一问题 |
|
||||
| 11月11日分钟缓存候选,ITD `5017bf1 → 2b9f96b` | 候选启动缺requests,临时Compose挂载YAML解析失败 | 本机环境不等于最终容器环境;候选入口和实际配置解析需要执行验证 | 在旧消费者切换前修正,属于候选阶段拦截;不计为生产回滚 |
|
||||
| 11月12日提议页面至11月16日保存,`60440ad → 4d9818b → e4a77bf → 28abddf`,[保存故障](技术读数保存修复与发布_2026-11-16.md) | 先补标签与“当时未取得”,再发现应展示当前判断;统一读数后真实Decimal使8条新提议和1条复核保存失败 | 产品验收只看字段;边界桩过度简化;Celery成功遮蔽保存错误 | 真实JSON保存反例已补;11月16日审查另发现旧技术映射消费者,不能说所有路径已统一 |
|
||||
| 11月12日至18日分钟资金,ITD `8ee1dd0、a217dac、25f199a、89b8424、f5a02b7`,[数据链路细化](系统问题链路与数据位置细化_2026-11-17.md) | 先保护过期拒发,实时副本仍旧;切到214后历史分钟资金仍不足;秒时间与已结算分钟又需对齐 | 修覆盖、实时和历史分别止于局部,缺逐路计算资格验收;其他信号掩盖资金失效 | 今天原始历史及当前准备名单已恢复,详见下节;原始写入者停更原因未证实 |
|
||||
| 11月16日试探预算,`6c5afe2 → 35838b8、7c60cdc`,[规则纠偏](建平仓规则对齐与人工止损验收_2026-11-16.md) | 将本次OPEN预算保护扩成整轮新增禁令,阻断原可独立审批的后续策略 | 把“更保守”当成合法替代规则,未检验允许路径 | 明确是实施错误扩大约束,已纠正;必须同时验证不越原预算和后续合法动作可达 |
|
||||
| 11月16日系统审查,[代码反例](系统全面检查代码审查_2026-11-16.md) | 嵌套业务失败未进入总状态;技术分页可混版本;旧不可用研判可复用;稀疏分钟被跨度当完整;Redis时钟影响时效判断 | 部分成功、暂时不可用、完整性与时钟分别缺少明确契约 | 属已证实风险或代码反例,不能冒充全部发生了错误交易,也未在本次统一修业务代码 |
|
||||
| 11月17日吸筹阶段,bionic `dbc2d57、011d9bf` | `my_quant_db.gp_stock_factor_pro_202611`因子缺行,阶段连续推进停在11月3日;查询旧批次OK不能证明最新日完成 | 同一完成语义在另一条数据链再次缺失;失败回调、目标业务日和恢复补采没有贯穿 | 当日接续记录补采及阶段推进到11月16日;本次只读历史记录,未重新触发或验证全市场补采 |
|
||||
| 11月13日研究跨环境复算,`2b09160` | 嵌套结果浮点比较仅顶层容差,跨版本微小差异导致校验失败 | 验证工具本身没有覆盖结果结构与数值语义 | 修递归容差;不是研究结论被证实错误,也不是交易事故 |
|
||||
|
||||
本窗口可以证实规则撤回、界面恢复原方案、遗漏边界后的补丁及候选返修。没有足够证据证明发生过生产镜像整体回滚;文档中的“回退条件”不是已执行回滚。模拟仓授权重置也不自动归为Bug回滚。
|
||||
|
||||
## 本次资金恢复的准确位置和边界
|
||||
|
||||
09:09:28从188 `intraday_alerts`只读抽查华策、雷赛、四方:Mongo `192.168.18.75:27017 / judge / stock_flow_data`每股112个日期,末日2026-11-17,较之前10月14日末日新增24个日期。该结论限三股原始日期投影,未宣称全池原始分钟完整。证据见[原始日期恢复摘要](evidence/fund_history_recovery_20261118.json)。
|
||||
|
||||
09:15:30从ITD现有文件取得独立分钟准备名单14只,名单时间09:15:26。使用实际`load_prepared`校验规则只读重建缓存,分钟量价、分钟资金、日资金各为14/14就绪;三只抽查股票分钟资金历史34天、有效分钟240。主基线文件`mf_daily=0`,但单票准备缓存接纳后14只日资金均存在,所以不能仅凭主文件判日资金链路故障。见[原始准备证据](evidence/itd_preparation_20261118.json)及[自动判定与反例重放](evidence/business_evidence_replay_20261118.json)。
|
||||
|
||||
09:27:40使用最终采集器再次只读核验,名单来源错误为空,三路仍各14/14,见[最终采集证据](evidence/itd_preparation_verified_20261118.json)。
|
||||
|
||||
这里的14只是当时分钟服务的准备名单,不等同11月16日盘中的129只告警池。这几次检查发生在开盘前,当时证据没有覆盖今天正式告警的全部名单、当天实时输入、实际计算、发布和PMS消费。10:04后续按实际131只告警名单核验,两路资金计算基线均131/131,14只高优先股票四路资金来源均在自然计算,实时健康和155提示已恢复;具体发布消费及仍无触发的边界见[盘中修复接续](资金逐股缺口修复与发布_2026-11-18.md)。原始写入任务为什么曾停止,以及补数是否由哪个具体任务完成,本次未取得其写入日志,不推断责任服务。
|
||||
|
||||
资金的两条主要历史链仍应分别维护:分钟资金来自`judge.stock_flow_data → MongoMoneyFlowMinuteAdapter → 历史准备/seasonality.mf_minute → money_flow_in/out_intensity`;日资金来自`gp_moneyflow_ths → daily_fund准备`。分钟量价`gp_stk_mins_1min`和当日214 Redis快照不能互相替代上述历史资格。
|
||||
|
||||
## 已落地的预防措施与验证
|
||||
|
||||
| 措施 | 实际落点 | 已证明能防止什么 | 不能据此声称什么 |
|
||||
| --- | --- | --- | --- |
|
||||
| 明确业务约束、合法范围与逐路完成标准 | 根`AGENTS.md`新增三条;测试目录规则新增真实边界要求 | 对“预算限制扩成整轮禁买”“只看其他来源消息”等明确约束审查行为 | 文本规则不会自动消除现存代码缺陷 |
|
||||
| 故障修复Skill | `.agents/skills/pms-incident-review/`,根规则及开发入口可发现 | 要求从独立名单、真实数据位置、全部消费者及失败/恢复路径核验;区分需求变化和返工 | 不新增授权、不触发所有普通修改、不另造交易规则 |
|
||||
| 历史准备只读采集和自动判定 | `scripts/collect_itd_preparation.py`、`scripts/check_business_evidence.py preparation` | 空名单、缺股、资金基线为0、样本不足、过期证据、缓存未接纳会返回非零;其他来源正常不抵消 | 未监控实时计算、告警进程内存或自然发布消费;不是常驻监控 |
|
||||
| 任务子结果自动检查 | `check_business_evidence.py task` | 11月16日两组原始代码反例均判FAILED,指出`timing_fusion.invalid/source_errors`及全部来源false | NO_REPORTED_FAILURE只表示没有显式失败,不是业务完成 |
|
||||
| 真实边界反例接入常规回归 | `test_business_evidence.py`登记`run_tests.py` | 21例;真实14只快照通过;仅注入一股历史13日和资金有效分钟0就判INCOMPLETE,其他两路仍保留通过 | 注入仅开发机内存,不是线上事故或信号样本 |
|
||||
| 发布闭环补充 | `pms-release/SKILL.md`新增逐路及子结果判收 | 把自然待办落实到具体事件、读取位置、通过条件,防止只记“以后观察” | 不自动新建定时任务或延续用户已取消的观察安排 |
|
||||
|
||||
最终版本在开发机Python3.12完成90组配置隔离、禁网全量回归,返回`ALL SUITES PASS`,其中包含本次工具21例专项。Skill的官方格式校验通过。188只读执行采集器成功,验证了实际ITD模块和文件的适配。文档、链接与差异检查纳入本次交付检查。
|
||||
|
||||
第一阶段复盘不修改应用服务,没有应重建的业务容器;新脚本仅以stdin在已授权容器执行只读检查,没有安装到服务器或增加调度。独立工作树基于`bf289f7`,分支`codex/recurrence-prevention-20261118`,保护主研究工作树及其已有未提交文件。
|
||||
|
||||
## 仍需单独闭环的运行问题
|
||||
|
||||
本轮完成的是复盘与可执行预防机制,不将以下问题藏在“全面通过”后面。最新状态以重新取证为准,下面列的是明确的关闭条件。
|
||||
|
||||
| 项目 | 下一次应读取的位置与触发场景 | 关闭条件 |
|
||||
| --- | --- | --- |
|
||||
| 开盘后资金全链路恢复(已有后续实证,见盘中修复接续) | ITD实际告警池、逐源健康、当日资金时间、正式告警流、PMS逐源消费;自然开盘与真实满足阈值时 | 对当前完整应监测名单逐路证明可算;未触发有计算资格证据,触发时有发布与消费回执,不制造信号 |
|
||||
| 原始资金历史停更直接根因 | `judge.stock_flow_data`实际写入任务的调度、最近成功、写入行数和失败日志 | 找到生产者及失败点,并验证下一自然批次;目前仅知道数据已经恢复 |
|
||||
| 技术读数旧映射与分页一致性 | `pms_tech_daily`、`PMS_TECH_STATE_MAP`及持仓/网格/退出调用方;源数据换日或换版本 | 同时拒绝不完整跨版本拉取,并证明所有当前判断路径使用有效同口径数据 |
|
||||
| 子任务状态及不可用缓存恢复 | `execution_basis_refresh.risk_reviews`、`signal_service.consume.timing_fusion`、异步研判持久请求;自然失败再恢复 | 聚合状态反映必要子步骤,暂时不可用在有效截止后可重评,保留人工和保守交易边界 |
|
||||
| 分钟完整性与时钟 | PMS分钟Redis键、实际分钟集合、208 Redis TIME与业务主机时钟 | 价格/量比拒绝过期和稀疏窗口;流ID时间不能冒充无偏业务证据时间 |
|
||||
| 上游新增补采的范围约束 | bionic `dbc2d57`的`factor_backfill.py`证券入口及任务覆盖契约,仅静态检查沪深范围 | 该历史补丁入口仍接受项目排除市场的代码;本项目调用须在读入入口限定沪深。本次未读取相关证券数据或运行补采,历史回执不能作为扩范围依据 |
|
||||
|
||||
这些关闭条件与本次预防工具的能力明确分开。后续修复优先处理会造成整路不可用却仍被称为正常的完成语义,以及旧数据/旧版本进入当前交易判断的问题;具体交易规则变化仍按用户决定执行。
|
||||
|
|
@ -0,0 +1,99 @@
|
|||
# 系统全面检查与整改接续
|
||||
|
||||
核验日期:2026年11月16日。现网采样为北京时间16:46至16:58,已经收盘。
|
||||
|
||||
11月17日补充:各问题已细化到数据表、Redis键和处理链路,见[链路与数据位置](系统问题链路与数据位置细化_2026-11-17.md)。08:58资金历史抽样仍停更,当日`mf_minute`基线仍为空;08:59确认技术日线及映射日期已由今早06:30任务对齐至11月16日。下文保留11月16日的原始检查事实,不将其全部当作今天现状。
|
||||
|
||||
结论:155模拟PMS的交易通道、资金及持仓账本当前正常,但不能判为“所有研判能力正常”。独立资金强度在整个129只监控池均不可计算;技术旧映射仍被部分业务路径使用;PMS分钟行情不完整;任务成功状态仍会掩盖来源失败。这些是需要闭环的系统问题,不应交给交易员自行判断。
|
||||
|
||||
## 范围与方法
|
||||
|
||||
- 核对155模拟PMS、其已配置数据接口,以及用户本次明确授权只读的188上游ITD和bionic服务。未访问188真实PMS。主机时间按实际时区换算为北京时间;各数据源观察时间另行核验。
|
||||
- 实时资金和历史资金覆盖当时129只沪深监控股票;行情和技术判断重点核对15只持仓关注股票及4只实际持仓。入口按规范证券代码排除北交所,未开展北交所取数或异常核验。
|
||||
- 读取实际容器、配置有效值、来源时间、样本覆盖、正式流、消费状态、自然任务结果及账本。没有触发扫描、补算、消费、回放、模型调用或委托,没有重启、改参数、改时钟或修复数据。
|
||||
- 开发机以最新信号分支`c9dee14`进行断网反例检查。7个相关服务及调度文件与155实际web文件摘要一致。主工作区仍有用户原有修改,本报告在独立分支`codex/system-audit-20261116`归档。
|
||||
|
||||
完整采样摘要见[检查证据](evidence/system_audit_20261116.json)。服务存活、请求成功、数据时效、完整性和能否计算分别检查,不用其中一项替代其他项目。
|
||||
|
||||
## 优先整改项
|
||||
|
||||
| 优先级 | 已证实问题 | 对交易的实际影响与边界 |
|
||||
| --- | --- | --- |
|
||||
| 高 | 129只历史分钟资金全停在10月14日,60日窗口内均13个日期,原资格要求30日。独立资金强度可计算覆盖为0/129。 | 资金流入、流出强度这两路不能正常判断。实时Redis修复和成交额基线正常不代表此项恢复。 |
|
||||
| 高 | 技术映射停在11月13日06:30,数据日期为11月12日;库内最新有效日线已到11月13日,但旧映射仍标为新鲜。 | 页面能显示最新判断,部分持仓动作、网格买入及策略恢复仍读旧判断,存在业务口径不一致。未发现因此产生错误成交。 |
|
||||
| 高 | PMS直接读取的15只分钟行情只有178至186条,虽均到15:00,日内仍缺大量分钟。 | 现价新鲜不代表量比、日内均价完整。量能函数按首尾时间估算全天覆盖,未识别中间缺条,可能影响盘中确认及解锁重问。 |
|
||||
| 高 | 14:25、14:31、14:43、14:53、14:58,持仓评析补读超过3秒;自然任务仍记为成功,子结果实际失败并保留原评级。 | 只看任务成功率会漏掉评级未能刷新。16:54对4只持仓复测1.536秒成功,故准确结论是盘中发生过间歇性失败,而非接口目前持续失联。 |
|
||||
| 中 | 208信号Redis时钟落后约270.34秒。155和188两侧分别复测,往返均不足6毫秒;214与155仅差约0.027秒。 | 流ID时间与业务观察时间不同,按流ID展示或计算消息年龄会偏旧。尚未证明由此丢信号,也不能把时钟差当作传输延迟。 |
|
||||
| 中 | 技术拉取可在提前空页、分页不足或跨日期版本时返回成功;技术映射失败也不改变顶层成功。 | 后续仍可能出现“任务完成但部分股票不可计算”或数据版本误标。此项为断网反例证实的代码缺陷,不冒称今天已发生分页混版。 |
|
||||
|
||||
### 历史资金恢复不能继续仅靠等待
|
||||
|
||||
此前仅三只抽查,本次逐只检查扩至129只,全部最后日期为10月14日。每只虽有88个历史日期,原滚动窗口内只有13日;现用基线文件的分钟资金部分为空。按当前基线及准备产物合并后,在10:00、14:54和15:00三个时点,成交额基线129/129具备,独立资金强度0/129具备。
|
||||
|
||||
214保留23个日期键,其中今天之前22日;10月13日只有97个分钟键。日期键存在不等于每股拥有完整合格样本,更不等于足够30日。整改应核对历史原始源、与旧Mongo重叠数据的单位和累计口径、逐股逐分钟覆盖,再恢复可追溯归档。不得降低原资格、补零或用成交额替代净流入。
|
||||
|
||||
### 技术新旧判断已经出现实际差异
|
||||
|
||||
| 持仓 | 旧映射,11月12日数据 | 当前日线,11月13日数据 |
|
||||
| --- | --- | --- |
|
||||
| 雷赛智能 | 看多 | 中性 |
|
||||
| 宁德时代 | 中性 | 看空 |
|
||||
| 四方股份 | 看多 | 中性 |
|
||||
| 药明康德 | 看多,趋势延续 | 看多,强度弱 |
|
||||
|
||||
新建仓候选、OPEN提议当前重评、持仓卡片、综合分析和个股详情已读取新日线。旧映射仍用于持仓增持门、技术转空退出、自动网格新增买入、首次系统停买恢复、旧吸筹暂停解除和自动跟踪止盈的SAR更新。具体是否动作还受实际开关、已有策略、数量和其他门槛约束,不能从缓存差异推导出已经错误交易。
|
||||
|
||||
beat日志证明今天06:30投递了技术拉取,不能证明成功消费。worker于14:14重建,旧容器日志未保留,当前持久日志目录也没有早间worker日志,因此今早未推进映射的具体原因尚未还原。应统一当前判断入口,保留历史原始依据,同时补齐任务结果持久化。不能只重跑一次就宣称根因解决。
|
||||
|
||||
### 行情缺口与ITD补齐是两条不同路径
|
||||
|
||||
ITD的15只持仓关注分钟缓存各241条,包含09:30以及240个交易分钟,没有缺分钟或冲突;其中55至70条来自补齐源。PMS的直接Redis读法没有使用这份完整结果。
|
||||
|
||||
PMS已采到条数和末条时间;最后进一步读取首条、重复数及逐分钟缺口分布时,SSH连续两次在连接阶段关闭,未取得该补充明细。因此本次确认完整日数据不足,不报告具体缺失时段或断言全部缺口均位于日中。
|
||||
|
||||
`market.get_price`只检查末条价格为正,不核对日期;断网输入10月1日旧分钟线仍被返回为可用价格。`day_volume`将仅有09:30、15:00两条的输入也按全天覆盖处理。量比进入盘中技术确认和解锁重问;日内均价同样受缺条影响。现价、收盘估值和盘中量能应分别定义可用标准,新执行报价链已有的时效保护应保留。此次没有证明最终委托绕过该保护。
|
||||
|
||||
## 其他需要补齐的监控与追溯
|
||||
|
||||
1. **合成择时的局部故障没有汇入总状态。** 断网反例中,来源错误且3条状态全部无效,信号消费仍返回`ok=true`,调度摘要又省略合成择时子结果。应逐组记录输入截至时间、有效覆盖及不可计算原因。
|
||||
2. **技术健康把非空映射当作有效计算。** 即使唯一映射为“无读数”,仍能显示`fresh=true`。必须区分有效方向、中性、缺数据、质量拒绝和过期。
|
||||
3. **五路消息的总状态不等于五路可用。** 全部来源读取失败时,顶层仍为`ok=true`;页面已有各来源失败提示,不能说它完全隐藏错误,但任何只看总状态的巡检都会误判。正常读取空流也不能证明各生产者可以计算。
|
||||
4. **实况评分榜缺少源时间契约。** PMS仅取固定榜单的分数,没有读取观察时间。此次按上游证券格式对照,15只均有15:10的辅助实况读数,榜单和快照剩余有效期约10小时,未发现当前停更证据;辅助时间仅有时分,仍应补全日期和批次标识。
|
||||
5. **不可用研判结果可能长期复用。** 断网反例中,同一证据不变时,上午已超过截止和缓存期限的`UNAVAILABLE`结果,下午仍直接返回且不重试。断网反例已确认。需要区分真实证据不足、等待人工确认和短暂来源故障,不能通过统一自动重试改变人工降级规则。
|
||||
6. **日终费用校准存在误导。** 未传入实际费用时,函数直接返回“ws通道未启用”,没有核对实际连接;本次WS明明启用。自动实际费用校准尚未实现。今天无新增委托成交,未观察到本日新增费用差。
|
||||
|
||||
代码定位及断网反例详见[代码审查](系统全面检查代码审查_2026-11-16.md)、[九项反例输出](evidence/system_audit_code_probes_20261116.json)与[不可用缓存反例](evidence/system_audit_judge_cache_20261116.json)。它们解释可重复的缺陷,不替代现网故障证据。
|
||||
|
||||
## 已确认正常及必须准确解释的状态
|
||||
|
||||
| 路段 | 本次结果 | 判定边界 |
|
||||
| --- | --- | --- |
|
||||
| 155实例及QMT | 模拟范围`pms-sim-155`,空前缀,WS启用且唯一连接;连续确认1899537推进至1899586。 | 不能只依据ONLINE;本次另外核了回报和账本。 |
|
||||
| 回报及对账 | 缺口、待入账、孤儿成交、在途委托、活动父指令均0;4只持仓数量相符,现金差0。首次资金和持仓快照年龄16.3秒。 | 当前未见通道或账本故障,不证明所有历史时段无故障。 |
|
||||
| 自然调度 | 当前worker无执行中及预留积压;15:10结算、15:20净值、15:30日报完成;限制价126/126。 | 日报关注项为16条待确认提议;任务完成仍须看业务子结果。 |
|
||||
| 实时资金 | 129/129读取可用,原始观察时间到收盘;239个分钟键,缺11:13、13:42、14:19。 | 少量缺分钟仍保留事实;实时有效不等于历史强度有效。 |
|
||||
| ITD实时服务 | alerts为`funds-alerts-f5a02b7`,API及snapshot为`funds-query-1ab96bd`,三服务healthy。 | 收盘后发布,正式自然资金告警尚未判收。 |
|
||||
| 正式消息 | 决策4条、告警187条、沪深资金异动1327条,扫描未截断。日QRS自然发布67条,持仓关注命中9条。 | 无新消息不是健康证据;没有把其他股票的消息当作持仓覆盖。 |
|
||||
| 盘中评估截止 | 实际配置09:35至14:55;最后告警评估14:54,循环14:55。 | 符合配置,不列为收盘前停更故障。 |
|
||||
| 技术日线 | 最新11月13日,5018行;15/15持仓关注可形成当前判断。 | 收盘后尚未取得当天日线,不据此认定停采;旧映射问题另列。 |
|
||||
| 上游计划 | 11月13日数据,今天12:10修订,日龄1交易日。 | 满足当前允许日龄;本次原始默认页数有限,未把它称为完整候选池。 |
|
||||
| 宏观 | 今天扫描存在,股汇输入截至11月13日;当前区域中性,未产生新动作。 | 发布值5.9834与PMS内部计算6.296是独立口径,未混为同一读数。 |
|
||||
| ETF分时与观测 | 今天15:00事实及收盘轮已存储;查询与观测消费持续更新。 | 已收盘且模型未标定、仍在积累,不是可交易信号。 |
|
||||
| 日终宽基资金 | 当日日报已接收,但ETF份额净值0/177到齐、行业资金0/90;11月13日ETF177/177完整。 | 顶层消费正常不代表当日各组件可计算。未核实日终来源到齐时限,不能断言是超时事故;页面保留不可用。 |
|
||||
| bionic研判 | 当前保存的21份今日OPEN请求中18份无合成方向、3份WAIT、0份BUY,均被前置守卫拒绝。 | 符合保守规则,不属于已证实模型故障。请求记录会覆写,不代表全日仅21次;收盘全部WAIT也不能倒推盘中。 |
|
||||
|
||||
## 整改顺序与验收口径
|
||||
|
||||
先恢复历史资金可计算能力,并统一技术当前判断与PMS行情完整性,再修复健康聚合、时钟和追溯。短期每路内部巡检至少保存预期证券数、有效输入数、最后观察时间、历史末日、可计算数、不可计算原因、最近一次成功计算与发布状态。
|
||||
|
||||
验收必须分别证明:来源数据有效,计算可运行,没有触发条件时明确记录“可计算但未触发”,真正触发时发布及PMS接收一致,交易页面与实际动作使用同一当前判断。任何一路失败都不能由其他路消息覆盖。运维诊断留在系统内部,交易员只需看到与当前操作有关的能力限制及结果。
|
||||
|
||||
本次完成的是全面检查和证据归档,**上述问题尚未修复或部署**。仍需完成:历史资金源恢复、技术映射原因追溯及入口统一、行情完整性修正、逐路可用性监控、208授时核对,以及资金切换后的盘中自然触发到消费验收。未设长期观察或自动化任务。
|
||||
|
||||
## 验证记录
|
||||
|
||||
- 现网只读:155模拟PMS与已授权188上游服务;未触碰188真实PMS。
|
||||
- 开发机:Python 3.12.14,隔离环境、无业务配置、禁止网络;资金健康已有9项专项通过,9项监控缺陷反例及1项不可用缓存反例完成。
|
||||
- 文档:JSON可解析、引用文件存在、差异及敏感字段检查。没有业务代码改动,因此没有构建镜像、重建容器或声称完成盘中判收。
|
||||
|
||||
后续工作应以本记录的采样时间、未完成项及实际ParamStore值为起点,不能把本次短时健康读数当作长期保证。
|
||||
|
|
@ -0,0 +1,104 @@
|
|||
# 系统运行检查:代码与监控盲区
|
||||
|
||||
核验时间:2026年11月16日16:49,北京时间。代码基准:`/private/tmp/pms-signal-health-20261116`,提交 `c9dee14`。本次代码审查未修改业务代码、运行参数或线上服务,成果仅作检查归档。以下是已由代码或断网反例确认的缺陷与盲区,**不等于已经在线上发生的故障**;当前运行影响需结合其他检查的真实读数。
|
||||
|
||||
## 应优先处理
|
||||
|
||||
### 1. 通用行情入口仍接受停更的旧分钟线
|
||||
|
||||
- `app/services/market.py:69` 的 `get_price` 只取最后一行正价格,不检查日期或时效。`day_snapshot`(第88行起)返回同一旧数据的完整价量聚合,时间仅附在 `bar_time`。
|
||||
- `app/services/portfolio.py:190` 使用此价格;第207行把正数标记为 `price_ok=True`,继续计算市值和安全垫。`app/services/proposal_service.py:421` 也从此入口取得候选价格。
|
||||
- 断网反例:仅提供 `2026-10-01 10:00:00` 的20元分钟线,仍返回 `get_price=20.0`、完整 `day_snapshot`,无失效状态。
|
||||
- 影响:采集停更但Redis保留旧值时,估值、持仓安全垫及提议前置计算无法据此发现数据不新鲜。新执行报价链另有时效保护,本检查**没有证明最终委托会绕过该保护**。
|
||||
- 建议:在统一读取入口保留观察时间并区分当日盘中可用、收盘估值可用、不可用;由实际交易时段决定时效,避免一刀切使收盘估值失效。需要下单与择时的调用必须核实盘中有效状态。
|
||||
|
||||
### 2. 合成择时的来源错误不影响信号任务成功状态
|
||||
|
||||
- `app/services/timing_fusion.py:39` 将上游错误放在 `source_errors`;不合契约的状态在第45行仅累加 `invalid`。
|
||||
- `app/services/signal_service.py:111` 把该结果存为子字段;第148行仅根据顶层 `errors` 决定 `ok`,子结果的来源错误、零可采纳覆盖并不会进入其中。
|
||||
- `app/scheduler.py:137` 的完成摘要还会过滤掉 `timing_fusion` 子字段。任务返回业务错误对象也不会抛给Celery,外部仅看任务SUCCESS容易误判。
|
||||
- 断网反例:合成择时返回 `accepted=0`、`invalid=3`、`source_errors=['main_fund unavailable']`,消费结果仍为 `ok=true, errors=[]`。
|
||||
- 影响:真正影响卖出纪律和方向更新的来源降级,可能被“任务成功、消息消费正常”掩盖。旧方向有时效契约,不能把此处盲区写成旧方向无限生效。
|
||||
- 建议:独立记录合成择时各组输入的预期范围、有效覆盖及最后成功观察;总体可用性必须合并子结果,区分正常无方向、部分降级、完全不可计算。逐条坏输入要保留原因数量,不能只报一个 `invalid`。
|
||||
|
||||
### 3. 技术面分页并未兑现“完整拉取后才落表”的约定
|
||||
|
||||
- `app/services/tech_service.py:178` 只读取首页的日期、算法版本和matched;后续页没有校验相同版本。
|
||||
- 第190行遇空页直接结束,第199行统一返回 `status=OK`;未核对已经拉取的条数是否达到matched,MAX_PAGES耗尽后也同样返回OK。
|
||||
- 断网反例一:matched=2,首批1只,次页空,结果为 `status=OK,total=1,matched=2`。
|
||||
- 断网反例二:第二页改成20261116、v2,仍被加工成首页的20261113、v1,结果为OK。这里会错误标注原始数据日期及版本,而不只是显示问题。
|
||||
- 建议:检查每页日期、算法版本与总量一致;提前空页、分页上限、重复证券或未拉足应判失败,不推进当天状态或落半份。保持沪深范围过滤,不能通过全市场总量变化容忍混版。
|
||||
|
||||
### 4. 技术健康统计把“有一条映射”当成“可计算”
|
||||
|
||||
- `app/services/tech_service.py:375` 的 `pull_and_map` 顶层ok只看pull,不包含map的失败。
|
||||
- 第351至361行把 `synthesize` 的“无读数”返回也放进states并计数;第438行 `fresh=bool(state_map(m))` 只检查映射是否非空及映射日期。
|
||||
- `app/web/static/index.html:3288` 直接据 `map.fresh` 标记技术状态为ok。
|
||||
- 断网反例:拉取成功、映射失败仍顶层ok=true;唯一映射为“无读数”时,status仍报告states=1、fresh=true、error=null。
|
||||
- 影响:当前日期、当前行数、映射条数都可能“正常”,但关注股票无法形成技术判断。它与本次资金漏检是相同类型的可计算覆盖问题。
|
||||
- 建议:总状态合并拉取、映射、保存结果;按预期证券分别统计有效立场、明确中性、缺输入、质量拒绝、过期,不用非空字典代表健康。
|
||||
|
||||
## 尚未被补齐的逐路监控
|
||||
|
||||
### 5. 五路信号状态仍主要代表读Redis是否成功
|
||||
|
||||
- `app/services/upstream_signals.py:337` 只要来源函数不抛错就写 `ok=true`。除新增的资金健康键外,没有分别核对价格异动、日QRS、决策广播、资金观测的输入时间和可计算覆盖。
|
||||
- 同一告警流里一个来源持续更新,不能证明其他来源仍可计算。`coverage.scanned/eligible` 是已发布消息的读取完整度,不是监测名单的计算覆盖。
|
||||
- 第335行顶层ok恒为true。断网反例:五个Redis来源全部失败,顶层仍ok=true,各来源为false。现有页面会展示来源读取失败,因此这项不能说成“页面把五路异常全部隐藏”;问题在于只看总ok的巡检会得出错误结论。
|
||||
- 建议:保留连接状态,但新增每路可用性和按证券计算覆盖的独立事实,分辨未触发、不可计算、未按计划运行。不要用信号数量衡量健康,也不要要求日线信号每分钟发布。
|
||||
|
||||
### 6. 实况评分榜完全没有读取源时间
|
||||
|
||||
- `app/services/upstream_signals.py:319` 仅从固定键 `mtf:mr:intraday:board` 取高低分,返回代码和分值,没有日期、as_of、写入版本或TTL检查。
|
||||
- `app/web/static/index.html:963` 将它展示为“盘中实况评分·关注与回避”。读取接口成功时,停更榜单与新榜单不能区分。
|
||||
- 断网反例用只支持两个zset读取方法的冻结榜单,服务照常返回完整榜单,说明读取契约根本不需要新鲜度证据。是否当前已停更,需真实源核验,不能从代码单独断言。
|
||||
- 建议:和发布方使用同批次观察时间或版本,收盘后正确保留收盘榜;盘中停更明确降级,不从PMS读取时间推断源更新时间。
|
||||
|
||||
### 7. 分钟线中间缺口不进入量比与均价可用性判断
|
||||
|
||||
- 主检查采得的 `business.json` 显示15只当前关注持仓的PMS分钟线各178至186条,末条均为今日15:00;另一数据路径的分钟归档达241条。需要结合首条与缺失时段分布,区分滚动截断和中间缺口,不能只因末条新鲜就视为整日完整。
|
||||
- `app/services/market.py:305` 只累计已取得的分钟量;第306至314行用首尾交易时间之差计算覆盖分母,并不检测中间缺失。第94至110行的day_snapshot也只按现有bar计算均价、高低和开盘涨幅。
|
||||
- 断网反例:输入仅今日09:30和15:00两条,`day_volume`仍返回 `minutes=240,frac=1.0,bars=2`,没有不可用或缺口状态,见 `code-probes.json` 的 `sparse_minute_span`。
|
||||
- 业务路径已经接线:`app/services/reask_service.py:85`将该frac和累计量送给 `app/core/reask_rules.py:82` 的时段折算量比;`app/services/proposal_service.py:517`的盘中技术确认在“收口等待/开口向上”时使用量比和VWAP,第543行调用 `intraday_confirm`。解锁重问也使用同一量比,在 `reask_rules.py:153` 判断U3量能条件。
|
||||
- 影响:中间缺失时按整个时间跨度除以不完整成交量,会扭曲量比;VWAP和高低点也可能缺少关键时段。现有数据已发现条数差异,算法缺口已复现;**尚未证明因此发生错误成交或具体哪一次提议被误判**。建议先恢复完整分钟数据或明确可用覆盖,不能简单把缺分钟补零,也不能只按条数缩分母推算未知时段真实量。
|
||||
|
||||
## 已有保护与验证边界
|
||||
|
||||
- 资金专用健康状态已能识别过期心跳、过期输入、缺失关注证券;当前9项专项测试全部通过。历史基线是否具备与实时资金是否具备是两个事实,历史未恢复不能靠这9项测试判收。
|
||||
- 信号页面已分别显示真正的连接读取失败,并提示当天消息扫描截断;这些保护应保留。
|
||||
- 合成择时契约会核对证券范围、时间、有效期与证据组,避免拿明显过期方向直接行动;本次问题是健康聚合未体现来源降级。
|
||||
- 计划读取有日期时效断言,失败缓存会清除旧计划,不是所有取数路径都同样缺乏时效保护。
|
||||
- 检查使用开发机Python 3.12.14,经仓库 `scripts/unit_test_guard.py` 在无业务环境的临时工作目录执行并禁止网络。9个反例输出在 [九项反例输出](evidence/system_audit_code_probes_20261116.json),反例通过本次临时脚本在隔离入口执行。没有真实服务测试、数据库写入、业务任务重放或委托。
|
||||
|
||||
## 文件定位
|
||||
|
||||
以上源码路径均相对仓库根目录,基准提交为 `c9dee14`。需要修复时应以155实际运行文件为基准核对指纹,不能假定主工作区 `a2211fe` 已包含这些后续代码。
|
||||
|
||||
## 研判全部不可用的补查
|
||||
|
||||
根据主检查新增的21份当日已保存请求的UNAVAILABLE事实,检查了PMS请求与Bionic的择时版本边界。Bionic旧临时工作树已无文件,使用 `/Users/baobao/Documents/work/project/bionic_trader` 中 `git show e139e34` 读取当时实现;主检查已只读核对188当前服务中的同一路径。
|
||||
|
||||
- PMS `app/services/judge.py:253` 从 `timing_state.latest` 获取当前方向,携带 `timing_fusion.key`,只剔除传输核验时间和短有效期。
|
||||
- Bionic `workers/tasks_intraday.py:676` 在模型执行前重新取当前方向,第680行要求BUY且key相等,否则立即返回这条UNAVAILABLE理由。
|
||||
- Bionic `app/core/timing_fusion.py:153` 的key包含日期、三组完整证据和方向,不包含每次读取的verified_at。未发现“每次读取必然换key”的直接错误,不能仅凭21条同类失败断言永远不相等。
|
||||
- 需要对照的关键证据是:请求实际携带的key/action/at、当时PMS入账的方向版本、模型worker当时读取的key/action。当前收盘后的WAIT不能替代当时状态。API与worker配置或缓存不一致也需要实证,不能先下结论。
|
||||
- PMS `app/services/judge_async.py:82` 仅对PASS/REJECT应用缓存过期;第93行会直接复用任何已有result。若material未变化,一个早盘UNAVAILABLE即使已过cache_until和deadline,下午仍原样返回,不新发请求。隔离反例在14:00调用,继续返回09:33截止、09:35缓存截止的同一UNAVAILABLE,网络调用0次,见 [不可用缓存反例](evidence/system_audit_judge_cache_20261116.json)。这说明短暂不可用可能长时间保留;既定规则要求不可用降级人工,不能为了恢复交易擅自自动重跑或改成通过。需要区分真实研究内容缺失与瞬时来源/版本失败,再按原授权明确恢复条件。
|
||||
|
||||
## 技术映射停更的实际消费范围
|
||||
|
||||
主检查 `path-check.json` 已证实现网映射生成于11月13日06:30,数据日11月12;可直接读取的有效日线已到11月13。4只持仓中,雷赛智能、四方股份在旧映射看多、最新日线为中性;宁德时代由旧中性变为最新看空;药明康德同为看多但强弱、SAR和理由变化。主检查已核对相关线上文件指纹,因此不应将此现象仅归为无消费者的旧缓存,也不能夸大为全部交易使用旧技术结论。
|
||||
|
||||
| 消费场景 | 实际读取路径 | 影响范围 |
|
||||
| --- | --- | --- |
|
||||
| 新建仓候选与OPEN提议当前重评 | `proposal_service.py:597`直接`read_states_for`;`consensus_service.py:145`复用此路 | 已使用最新有效日线,不能归入旧映射影响 |
|
||||
| 持仓卡片与综合分析、个股详情 | `web/main.py:416`取新日线,428显式传给合议;`tech_service.py:414`详情也读新日线 | 已使用新日线,主要当前展示没有被旧映射覆盖 |
|
||||
| 持仓增持门 | `proposal_service.py:176`未传tech_states;`consensus_service.py:184`默认回旧映射 | 增持合议仍可能使用旧立场,实际作用受`PMS_TECH_GATE_INCREASE`及其他持仓门控制 |
|
||||
| 技术转空退出 | `proposal_service.py:186`取旧映射并交动作引擎 | 受技术退出档位、可卖量及已有ACTIVE策略排除;未证明今天产生错误委托 |
|
||||
| 自动网格新增买入与旧吸筹暂停解除 | `consensus_service.py:163`仍取旧映射;`strategy_runner.py:734`与`strategy_advisor.py:700`使用该合议 | 新增买入与恢复条件可能与页面所见当前技术判断不一致;仍受其他约束 |
|
||||
| 首次系统停买后的恢复 | `risk_exit.py:260`传旧映射 | 即使出现新转多信号,恢复时的三源合议技术票仍可能过旧;不影响已启动清仓必须守成的规则 |
|
||||
| 自动跟踪止盈SAR | `strategy_advisor.py:550`刷新,631挂载时取旧映射SAR | 自动挂载且ACTIVE的TRAIL使用旧SAR;人工策略和网格SAR不在此刷新范围 |
|
||||
| 提议接口附加字段 | `web/main.py:513`的row.tech仍旧,但525的OPEN当前analysis重评走新日线 | 不能仅看row.tech就声称所有提议主分析过旧;当前模板主要取analysis与审计内容 |
|
||||
|
||||
准确结论:**持仓与详情可显示最新判断,但部分持仓动作、自动网格与停买恢复仍读取旧映射;健康状态也未提示两路日期和结论不一致。** 本次仅检查归档,没有为追平映射触发重新计算、修改参数或重跑策略。
|
||||
|
||||
当前请求的后续实证:18份未携带有效合成方向、3份携带WAIT、0份BUY,与前置守卫一致,不能认定模型故障。详见全面检查接续中的研判行。
|
||||
|
|
@ -0,0 +1,107 @@
|
|||
# 系统问题链路与数据位置细化
|
||||
|
||||
本记录细化[11月16日全面检查](系统全面检查与整改接续_2026-11-16.md),明确问题落在哪个数据对象、哪段处理及哪个消费者。11月17日08:58至08:59对188上游ITD和155模拟PMS作了补充只读核验;没有修改业务数据、运行参数或服务。
|
||||
|
||||
**新增当前事实:历史分钟资金缺口仍在;技术日线与映射的日期已在今早06:30对齐至11月16日;208信号Redis仍比155时钟慢约270.6秒。** 其他故障次数、证券覆盖和行情条数仍引用11月16日实测,不冒充今天重新全量检查。
|
||||
|
||||
## 一、历史资金:明确缺在Mongo历史集合及下游分钟基线
|
||||
|
||||
最上游已确认缺口是 **`192.168.18.75:27017` 上 `judge.stock_flow_data` 集合没有近期日期数据**。这是Mongo集合,不是PMS的SQL表;集合不是空的,问题是已有旧数据停在10月14日。
|
||||
|
||||
| 层次 | 精确位置 | 已核实事实 |
|
||||
| --- | --- | --- |
|
||||
| 原始历史分钟资金 | MongoDB `192.168.18.75:27017`,库`judge`,集合`stock_flow_data` | 11月16日逐只查129只监控股票,均有88个日期,末日10月14日。11月17日08:58抽查华策影视、雷赛智能、四方股份,均仍为88日,没有10月14日之后的日期。 |
|
||||
| 集合字段 | `code`为六位证券代码;`data[].date`为日期;`data[].flow_data[]`为各分钟记录 | 分钟记录读取`time/main/large/super_large/medium/small`。诊断日期按`data[].date`,不能用父记录更新时间替代数据截至日期。 |
|
||||
| 历史读取适配器 | ITD `MongoMoneyFlowMinuteAdapter.get_moneyflow()` | 按证券和日期展开该集合,金额按元处理,再将开盘累计资金差分为分钟增量。它是读取器,不负责把原始采集写入Mongo。 |
|
||||
| 当前运行来源选择 | 188 ITD配置`seasonality.runner_version=v2`、`data_source=mysql` | 这里`mysql`表示直接读数据库的组合路径。价格与日资金读MySQL,**历史分钟资金这一支仍读Mongo**;不能据这个配置名称去找MySQL的`stock_flow_data`。 |
|
||||
| 当日统一基线文件 | 188容器`/app/data/seasonality/2026-11-17.json`,字段`mf_minute` | 今天07:30:35已生成新文件,但`mf_minute`为0行;同文件`vol`有28010行,`mf_daily`有120行。文件新鲜不等于分钟资金基线可用。昨天文件的`mf_minute`也为0。 |
|
||||
| 入池历史准备结果 | `/app/data/minute_recovery/preparation/2026-11-17/status.json`,`stocks.<证券>.parts.minute_fund` | 三只抽样均为`waiting_data`,`days=12`、`required_days=30`、`ready_minutes=0`。昨天对应为13日,窗口滚动后又减少1日。 |
|
||||
| 可选Parquet镜像 | `/app/data/parquet/mf_minute/trade_date=YYYY-MM-DD/` | 10月12日、14日各有4个Parquet文件;抽查10月15日、30日、11月13日、16日,目录存在但Parquet文件为0。当前来源配置未选Parquet,因此它不是当前直接读失败的位置,也不能作为已就绪备用源。 |
|
||||
| 正式信号输出 | 208 Redis db2,`intraday_alerts:YYYY-MM-DD` | `money_flow_in_intensity`、`money_flow_out_intensity`缺少基线时无法形成有效判断,返回空结果,不会进入发布环节。不能解释为“算过但没有触发”。 |
|
||||
|
||||
```mermaid
|
||||
flowchart TD
|
||||
A[原始资金采集与历史写入任务:尚未定位] --> B[Mongo judge.stock_flow_data:近期日期缺失]
|
||||
B --> C[夜间基线构建与入池历史准备]
|
||||
C --> D[seasonality 文件的 mf_minute:空]
|
||||
D --> E[资金流入和流出强度:无法计算]
|
||||
E --> F[正式告警流没有这两路有效输出]
|
||||
```
|
||||
|
||||
入池准备代码读取执行日前60个自然日的分钟资金,要求至少30个不同历史日期,然后才用最近20个历史交易日构建分钟基线。因此“总共有88个旧日期”并不满足当前窗口资格。运行配置中的`n_min=30`另有分钟窗口含义,不能把它与此处30个历史日期混淆。
|
||||
|
||||
### 与实时资金、日资金、成交额历史的区别
|
||||
|
||||
| 数据 | 位置及用途 | 与本次缺口的关系 |
|
||||
| --- | --- | --- |
|
||||
| 旧实时资金副本 | Mongo `judge.stock_flow_realtime` | 这是11月16日盘中曾严重滞后的另一集合,不等于历史集合`stock_flow_data`。 |
|
||||
| 切换后的实时资金 | Redis `192.168.16.214:36379/db0`,键`stock_flow_realtime:YYYY-MM-DD:HH:MM` | 11月16日15:56相关实时服务已改读这里,当时129/129可读到收盘。切换的是实时读取,没有自动给Mongo历史集合补入数据。 |
|
||||
| 日级资金 | MySQL逻辑表`gp_moneyflow_ths` | 另一路日级资金及降级特征的来源。它有数据不代表具备同一分钟的历史资金分布,不能代替独立分钟强度基线。 |
|
||||
| 分钟成交额历史 | MySQL逻辑表`gp_stk_mins_1min`,构建`seasonality.vol` | 资金分布、吸筹使用的成交额基线属于这一路。11月16日129/129就绪,与`mf_minute=0`可以同时成立。 |
|
||||
| 独立健康状态 | 208 Redis db2,键`intraday_alerts:fund_health` | 同时保存实时可用性及基线状态;PMS读取它。不能只看顶层实时`available`,还要看`money_flow_baseline_ready`与`capital_baseline_ready`。 |
|
||||
|
||||
具体阻断点在ITD `alerts/sources/money_flow_out_intensity.py`:`get_mf_minute(证券,时段)`返回空、样本不足或标准差无效时,直接返回`None`,甚至不会继续读取当天资金。因而即便214实时资金正常,这两路仍不能恢复。
|
||||
|
||||
**尚未定位的是“谁应把新资金历史写入`judge.stock_flow_data`,为什么没有写入”。** 已检查到的ITD适配器和Parquet脚本是读取、转换及镜像链路,不是原始写入任务。现有证据不足以把原因归给原始采集停止、Redis到Mongo同步失败、归档调度停跑或写入目标变更中的某一种。下一步需要定位实际写入任务及其最后成功批次;不能先重跑下游基线,期待从停更集合中补出新数据。
|
||||
|
||||
## 二、技术判断:SQL日线有新数据,派生映射曾落后
|
||||
|
||||
读取链路为:bionic `http://192.168.16.188:38000/api/v1/market/technical` → PMS `tech_service.pull()` → SQL表`pms_tech_daily` → `build_map()` → SQL表`pms_runtime_param`中`param_key='PMS_TECH_STATE_MAP'`的JSON值。
|
||||
|
||||
| 对象 | 11月16日实测 | 11月17日08:59新核验 |
|
||||
| --- | --- | --- |
|
||||
| `pms_tech_daily` | 最新`data_date=20261113`,5018行 | 最新`data_date=20261116`,5019行 |
|
||||
| `PMS_TECH_STATE_MAP` | `at=2026-11-13 06:30:04`,`data_date=20261112`,21个状态 | `at=2026-11-17 06:30:04`,`data_date=20261116`,20个状态 |
|
||||
|
||||
因此这项不是“技术日线表没有数据”,而是**昨天派生映射没有跟随已有日线更新**。今早任务已将日期对齐;本次没有手动刷新。日期对齐不代表已修复两套读取入口及健康判定问题,也未逐股复算今天的全部映射。
|
||||
|
||||
新建仓和主要页面已调用`read_states_for()`直接读`pms_tech_daily`,部分持仓动作及策略恢复仍调用`state_map()`读运行参数。昨天三个持仓方向不同的证据见原报告。应统一当前判断的读取口径,并独立记录拉取、落表、构建映射各阶段结果;保留历史审计,不能以今天结果覆盖昨天记录。
|
||||
|
||||
另外,`tech_service.fetch_all_pages()`存在分页不足仍成功、跨日期版本页被首页日期覆盖的可复现缺陷;`pull_and_map()`顶层结果不包含映射失败;`status()`用非空映射判断新鲜。这些是代码验证结果,未证明昨天的映射落后就是分页问题造成的。早间worker日志缺失仍使根因未闭环。
|
||||
|
||||
## 三、分钟行情:PMS直接读Redis,ITD另有补齐路径
|
||||
|
||||
| 环节 | 精确位置 | 问题 |
|
||||
| --- | --- | --- |
|
||||
| PMS行情源 | Redis `192.168.18.208:6379/db13`,键例`tushare:rt_min:1MIN:300133.SZ` | 11月16日15只持仓关注股末条均到15:00,但数组只有178至186条。它不是某张PMS行情表缺记录。 |
|
||||
| PMS读取与聚合 | `market._bars()` → `get_price()`、`day_snapshot()`、`day_volume()` | 末价没有统一日期检查;量能按首尾时间估计覆盖,不检查中间是否完整。 |
|
||||
| ITD补齐结果 | 独立分钟恢复服务,缓存与状态位于`/app/data/minute_recovery/` | 同15只当天各241条,第三方源不足部分由`rt_min_daily/rt_min`补齐55至70条。PMS没有读取这份补齐结果。 |
|
||||
| 下游计算 | `reask_service`与`proposal_service`的量比、日内均价和盘中确认 | 读取路径差异可能导致同一证券的量能判断不一致;未证明已产生错误成交。 |
|
||||
|
||||
昨天下午最后追加逐分钟明细时SSH连接关闭,未取得PMS首条、重复数及具体缺口时段。今天尚未开盘,本轮未把昨日条数当作今日盘中完整性结果。后续需统一取数或明确各用途完整性资格,并复核缺失时段。
|
||||
|
||||
## 四、任务成功掩盖失败:落在接口调用和结果汇总
|
||||
|
||||
实际超时链路:`pms.execution_basis_refresh` → `risk_exit.refresh_reviews()` → `plan_feed.fetch_logic_states()` → 155选股桥 `http://192.168.16.155:8300/logic_state`。
|
||||
|
||||
- 当前有效超时参数为`PMS_RISK_REVIEW_TIMEOUT_SEC=3`。11月16日14:25、14:31、14:43、14:53、14:58出现超时,子结果`risk_reviews.ok=False`,保留原评级。16:54同接口4只持仓复测1.536秒成功,故没有证据证明数据库表持续缺数。
|
||||
- 刷新节流记录保存在`pms_rotation_document`的`doc_id='risk-review-refresh:original'`;逐股退出纪律及评级状态使用`risk-exit:original:<证券>`文档。失败不会自动把原评级改为空或通过。
|
||||
- 调度函数把`risk_reviews`附在返回结果中,但未将其失败合并到任务总结果;Celery执行结束仍是`succeeded`。应查业务子结果,不能仅看Celery状态。
|
||||
- 另一个同类位置是`signal_service.consume()`调用合成择时刷新:`source_errors`和`invalid`保留在子结果,顶层`ok`仍可能为真;调度摘要`_brief()`又省略该子结果。此项有断网反例,尚未将其全部情形认定为当天现网事故。
|
||||
|
||||
## 五、时钟偏差:208 Redis服务时钟,不是资金表没有数据
|
||||
|
||||
具体对象是`192.168.18.208:6379`的Redis服务时钟。Redis各DB共用同一服务时钟,不是db2独有故障。
|
||||
|
||||
- 11月16日由155、188两侧读取`TIME`,均比本机墙钟慢约270.34秒。11月17日08:59从155再次读取,约慢270.56秒,仍未消失。
|
||||
- 相关流包括db2的`intraday_alerts:日期`、`intraday_signals:日期`和`mtf:intraday:stream:metrics`。
|
||||
- PMS `_read_metrics()`明确从流ID解析`time/age_min/stale`,因此这一显示路径会将消息看得约4分30秒更旧。其他路径有的用报文`trigger_time`或观察时间,不能笼统说所有信号都被同样延迟。
|
||||
- 尚未核验208的授时服务、宿主机时钟来源和偏差起点,也没有证据证明已经因此丢消息。本次没有修改时钟、流ID或序号。
|
||||
|
||||
## 六、其余代码与监控缺口的具体对象
|
||||
|
||||
| 问题 | 对象与位置 | 还需处理什么 |
|
||||
| --- | --- | --- |
|
||||
| 实况评分榜缺少源日期校验 | 214 Redis db0,`mtf:mr:intraday:board`;辅助信息为`mtf:mr:intraday:score` | PMS只读榜单分数,没有核对辅助时间。昨天15只辅助记录为15:10,未确认停更;应增加完整日期、批次和可用性契约。 |
|
||||
| 五路总状态不反映失败 | `upstream_signals.snapshot()` | 顶层`ok`恒真,源级`ok`主要表示读取是否报错。连接状态、计算能力和正常未触发需要分开记录。 |
|
||||
| 不可用研判缓存复用过久 | `pms_rotation_document`中`kind='judge_request'`、`doc_id='judge:<摘要>'`,逻辑在`judge_async.request()` | 同一证据下只对PASS/REJECT应用缓存到期,UNAVAILABLE可能长期复用。需按不可用原因确定恢复条件,不擅自改变人工降级规则。昨天21份保存请求的拒绝符合缺少BUY依据,不能当作模型失效。 |
|
||||
| 费用校准提示错误 | `ledger_service.calibrate_fees()`,估算费用读`pms_cash_flow`,实际资金回报在`pms_qmt_inbox` | `actual_fee=None`时直接返回“ws未启用”,并未去读已有资金快照。问题在未实现的自动校准分支及提示,不是已证明资金回报表为空。 |
|
||||
| 早间任务无法追溯 | 155旧`pms-worker`容器日志及持久日志目录 | 只有beat投递证据,旧worker重建后日志未保留。需要保存业务阶段回执和错误,不能把投递等同完成。 |
|
||||
|
||||
## 证据、整改入口与边界
|
||||
|
||||
新采样见[11月17日资金链路证据](evidence/system_sources_detail_20261117.json)和[11月17日PMS位置及日期证据](evidence/system_pms_detail_20261117.json)。既有全池、行情、任务、对账及断网反例见[11月16日全面检查证据](evidence/system_audit_20261116.json)。
|
||||
|
||||
整改应分别落到以下环节:历史资金原始写入任务及归档、ITD历史准备与告警可计算状态、PMS技术判断入口、PMS行情完整性、业务任务结果汇总,以及208授时。不要把这些不同问题合并为“重启PMS”或“重新跑一次基线”。
|
||||
|
||||
本轮只细化定位和更新当前证据。未修复、补数、重放、部署或发送交易动作,未访问188真实PMS。
|
||||
|
|
@ -0,0 +1,58 @@
|
|||
# 资金逐股缺口修复与发布
|
||||
|
||||
核验日期:2026年11月18日,北京时间。承接[月度共因复盘](月度故障与返工根因复盘_2026-11-18.md)。用户在原始历史恢复后,要求修复“部分持仓及关注股的资金异动提醒暂不可用,系统正在重试”并部署。
|
||||
|
||||
## 原因落到具体链路
|
||||
|
||||
历史分钟资金与当日资金是两条独立输入。本次剩余提示来自当日资金读取,不能继续解释成历史表没有补齐。
|
||||
|
||||
| 位置 | 本次证据和影响 |
|
||||
| --- | --- |
|
||||
| 历史分钟资金:Mongo `192.168.18.75:27017 / judge / stock_flow_data` | 09:09抽查三股已到11月17日;10:04对实际131只告警名单使用ITD现有缓存校验入口只读重建,分钟资金和放量基线均131/131通过。原始写入此前为何停止仍未取得生产者日志。 |
|
||||
| 当日原始资金:214 Redis `36379`端口、db0,`stock_flow_realtime:2026-11-18:HH:MM` | 688356.SH在09:34存在、09:35缺席、09:36恢复。09:30存在同股不同原始采集秒时间的两行,一行金额为`-`,后一行有效。这不是整路数据持续停更。 |
|
||||
| ITD共享读取器:`adapters/redis_moneyflow_realtime.py` | 旧实现只在整个分钟键缺失时向前找;最新键存在但漏一股时直接判缺失。不同时间的同股记录也被一律当成冲突。错误假设是“每分钟快照必定完整且每股唯一”。 |
|
||||
| 提示的直接输入:208 Redis db2,`intraday_alerts:fund_health` | 09:36仅688356.SH为`missing_stock`,14只持仓关注中13只可用;PMS正确显示异常。其他来源有信号不能证明该股资金可算。 |
|
||||
| 全量资金快照:`CapitalSnapshotScanner.on_intraday_minute → distinct_codes → capital_snapshot_rt` | 发布逐股读取修复后继续按消费者核验,发现共享读取器缺少旧数据源的`distinct_codes()`接口。09:59自然全量周期报AttributeError,热股扫描却持续成功;最终产出缺口会被局部正常掩盖。 |
|
||||
|
||||
原始采集为什么偶发漏股或出现不同采集时间的重复行,目前未读取到写入端日志。已证明并修复的是消费契约不匹配,不能把未证实的分页或上游进程故障写成根因。
|
||||
|
||||
## 修复行为
|
||||
|
||||
单股在最新快照缺席时,在原有15分钟有效期内查找同日最近原始记录,最多16个键,所有股票共享缓存;保留每股快照分钟和原始采集时间,不把刷新时间当成数据时间。不同采集时刻取最新记录;同一时刻金额或比例冲突、最新记录字段异常、未来、旧日及过期仍拒绝。原本可用的资金值、累计金额口径、阈值、权重和冷却保持。
|
||||
|
||||
补齐全量扫描的名单接口,取同日有效期内原始快照沪深证券并集。名单不代表可计算,逐股仍走原有数据检查;来源失败明确报错,不能作为空名单成功。不读取或补齐北交所数据,不回退旧Mongo实时副本,不插值或补零。
|
||||
|
||||
PMS页面提示逻辑保留,真实不可用仍应提示;本次没有通过隐藏提示修复问题。
|
||||
|
||||
## 验证和部署
|
||||
|
||||
| 环境或步骤 | 实际结果 |
|
||||
| --- | --- |
|
||||
| 开发机旧故障反例 | 逐股快照旧版25项中5失败、3错误;补齐名单前的12项专项中3错误、1失败。真实全量调度入口必须经过计算和写库转换,不能用替代调度器的桩通过。 |
|
||||
| 开发机最终回归 | 29项相关反例纳入1049项配置隔离、禁网全量,全部通过。测试数据仅本地内存,未发测试信号或委托。 |
|
||||
| 188真实快照只读对照 | 09:35旧版123/131、优先13/14,新版131/131和14/14;09:43旧版125/131,新版131/131。各读2个键,所有原本可用的累计值及证据时间保持。 |
|
||||
| 188候选镜像 | 告警角色1045项、查询角色974项通过;补名单后的查询基线978项通过。均为无业务配置、断网容器全量回归。 |
|
||||
| 09:54:34首次发布 | 重建`intraday_alerts`、`intraday_api`、`capital_snapshot`,代码ed98c29;其余48容器不变,候选与实际源码逐文件哈希一致。 |
|
||||
| 10:03:44补充发布 | 仅重建`capital_snapshot`,代码1a45b6c;其他50容器不变。名单接口仅扫描器调用,未为版本整齐重复重启告警和API。 |
|
||||
|
||||
候选回归曾拦住一次测试打包错误:告警专用断言误带入查询角色。已把共用读取器反例独立成测试文件,保留两个角色原有测试与代码;不通过升级无关告警逻辑来让查询测试通过。此为候选返修,不是生产回滚。
|
||||
|
||||
最终运行镜像为:告警`intraday_timing:funds-snapshot-alerts-ed98c29`;API `intraday_timing:funds-snapshot-query-ed98c29`;资金快照`intraday_timing:funds-snapshot-query-1a45b6c`。两个角色沿各自实际镜像和只读`/app/src`挂载构建,原运行目录HEAD、`.env`、其他挂载及私有配置保持;有效Compose差异仅为相应镜像和源码目录。
|
||||
|
||||
备份分别位于188的`/mnt/work/project/intraday_timing/backups/funds-snapshot-20261118-ed98c29`与`funds-snapshot-20261118-1a45b6c`。包含服务器本地私有配置、目标容器元数据和候选清单,密钥未导出。发生新故障时按对应角色恢复已备份镜像与源码挂载并定向重建,不覆盖其他服务新变更,不回滚账本或原始数据。
|
||||
|
||||
## 自然运行判收
|
||||
|
||||
09:55资金健康为131/131可用,14只持仓关注全部可用,155同一提示函数返回空字符串。10:01再次执行页面实际使用的`upstream_signals.snapshot()`,资金提示仍为空,五个来源读取成功,无关注名单错误或截断;已显示09:59自然发布的资金流强度和资金分布消息。未登录HTTP直接请求按预期返回401,因此不冒充已做登录后的浏览器验收,也未伪造会话绕过认证。
|
||||
|
||||
10:04只读重建现有历史缓存,对实际131只名单确认分钟资金与放量基线各131/131;这不是读取运行进程内存。运行进程的覆盖文件确认14只高优先股票四路资金来源各14/14已计算,发布就绪且错误为空。没有用“没有触发”代替“数据可算”,也没有伪造每条来源都触发过;当时尚无高优先股票资金触发样本。
|
||||
|
||||
09:57在155模拟PMS核验:连续确认与接收序号均1939027,无缺口、待入账、孤儿及在途委托,资金快照16.5秒,持仓数量及策略现金差均为零,健康接口200。155无需修改应用或重建容器;188真实PMS未访问。
|
||||
|
||||
10:08:01启动的自然全量扫描在54.026秒后完成5226只沪深证券,计算调用错误为0;随后只读查表确认5226行产出,其中5217行为available,9行明确为DATA_NOT_READY。后9只原始字段异常,部分原始时间还停在盘前,均不在当前131只告警池或14只持仓关注中,未用零值或中性掩盖。688356.SH及三只持仓均已有本轮有效快照。不能把扫描统计ok_cnt=5226解释成5226只数据全部可用。 10:11:02从155最终复核,实时资金仍131/131可用、14只优先股均可用、提示为空,名单无错误或缺股;资金快照容器健康且零重启。证据见[完整发布回执](evidence/funds_snapshot_release_20261118.json)。
|
||||
|
||||
## 防止再次付出相同成本
|
||||
|
||||
这两处遗漏与月度复盘的共因一致:把局部结果当成完整能力,并且替换入口时没有覆盖全部消费者和调度分支。现有项目规则要求独立名单、逐路资格和最终产出,本次将其具体落成跨快照、不同时间重复、异常保持不可用、缓存上限、跨日、来源故障以及真实全量调度入口反例,接入ITD常规断网回归。
|
||||
|
||||
月度新增项目规则、故障修复Skill及历史准备/任务子结果核验工具位于PMS分支`codex/recurrence-prevention-20261118`。它们是开发和验收约束,不冒充已部署的常驻监控,也不需要重启PMS。历史写入停更直接根因及复盘列出的其他独立业务问题仍保留明确待办,不因本次资金恢复统一销项。
|
||||
|
|
@ -9,6 +9,7 @@
|
|||
- 新增`test_batch*.py`同时登记`run_tests.py`的`SUITES`和例数说明。缺失测试文件必须失败,不能当跳过。
|
||||
- DDL、调度、API、密钥、动作求值顺序及仓储签名变化,检查`run_tests.py`顶部哨兵位置清单及实际断言,不照抄历史表数或测试总数。
|
||||
- 合并分支时检查测试文件是否重名,不能让一批测试覆盖另一批;缺项不能靠删登记解决。
|
||||
- 跨边界修复至少保留一个经过真实入口和真实输出编码的反例,只替换外部I/O。桩保留实际响应包装、Decimal/日期、空值、失败返回和版本字段;不要把待核验的序列化、路由或任务入口一起替换掉。涉及异步动作按影响选择迟到、重放、部分完成和恢复场景,并检查原来允许的正常路径。
|
||||
|
||||
开发机在安装了项目依赖的独立虚拟环境中、从仓库根目录执行:
|
||||
|
||||
|
|
@ -24,3 +25,5 @@ python scripts/unit_test_guard.py scripts/test_batch48_units.py
|
|||
`make help`是命令目录,不能把每个目标都当只读探针。`make test`用于部署服务器,发布前还须对匹配的候选镜像断网验证,步骤见[pms-release](../.agents/skills/pms-release/SKILL.md)。
|
||||
|
||||
新脚本应区分只读检查和实际写入,并验证重复执行及失败后的状态。`tick`、回放、建表、清账和重建账本都有业务副作用,不在活跃交易账户上当作普通单测。隔离演练使用独立数据库与前缀,不使用会认领真实成交的shadow路径。历史探针文件和文档中的日期不自动构成今天的执行授权。
|
||||
|
||||
历史准备与任务回执的只读导出、自动判定见[业务证据核验工具](../docs/业务证据核验工具.md)。失败返回非零退出码;无显式错误不代表业务完成。工具不会触发业务任务,也没有安装定时调度。
|
||||
|
|
|
|||
|
|
@ -0,0 +1,135 @@
|
|||
"""离线核对历史准备覆盖或任务子结果;不连接服务、不触发补算或交易。"""
|
||||
import argparse
|
||||
import datetime as dt
|
||||
import json
|
||||
from pathlib import Path
|
||||
import re
|
||||
from zoneinfo import ZoneInfo
|
||||
|
||||
TZ = ZoneInfo("Asia/Shanghai")
|
||||
PARTS = ("minute_archive", "minute_fund", "daily_fund")
|
||||
|
||||
|
||||
def count(value):
|
||||
if type(value) is not int or value < 0:
|
||||
raise ValueError("覆盖数和历史天数必须是非负整数")
|
||||
return value
|
||||
|
||||
|
||||
def timestamp(value):
|
||||
result = dt.datetime.fromisoformat(value)
|
||||
if result.tzinfo is None:
|
||||
raise ValueError("时间缺少时区")
|
||||
return result.astimezone(TZ)
|
||||
|
||||
|
||||
def failure_paths(value, path="$", depth=0):
|
||||
"""检查明确失败字段,保留路径,不输出可能含凭据的错误正文。"""
|
||||
if depth > 40:
|
||||
return [path + ":too_deep"]
|
||||
failures = []
|
||||
if isinstance(value, dict):
|
||||
for key, child in value.items():
|
||||
where = path + "." + str(key)
|
||||
if ((key in ("ok", "success") and child is False)
|
||||
or ((key in ("error", "errors", "invalid", "failed") or str(key).endswith(("_error", "_errors"))) and bool(child))
|
||||
or (path.endswith(".sources") and child is False)
|
||||
or (key == "status" and child in ("error", "failed", "FAILURE"))):
|
||||
failures.append(where)
|
||||
failures.extend(failure_paths(child, where, depth + 1))
|
||||
elif isinstance(value, list):
|
||||
for i, child in enumerate(value):
|
||||
failures.extend(failure_paths(child, f"{path}[{i}]", depth + 1))
|
||||
return sorted(set(failures))
|
||||
|
||||
|
||||
def check_task(value):
|
||||
if not isinstance(value, (dict, list)) or not value:
|
||||
return {"status": "INCOMPLETE", "failure_paths": ["$:empty_or_invalid_result"]}
|
||||
paths = failure_paths(value)
|
||||
return {"status": "FAILED" if paths else "NO_REPORTED_FAILURE",
|
||||
"failure_paths": paths,
|
||||
"limit": "无显式失败不等于业务完成;仍须核对预期输出、覆盖与自然回执。"}
|
||||
|
||||
|
||||
def check_preparation(doc, now, max_age=300):
|
||||
"""只判断历史准备层,绝不把它提升为实时信号或交易可用。"""
|
||||
if not isinstance(doc, dict) or doc.get("schema") != "itd-preparation-evidence-v1":
|
||||
raise ValueError("不支持的证据格式")
|
||||
if now.tzinfo is None or not 0 < max_age <= 86400:
|
||||
raise ValueError("核验时间须带时区,证据有效秒数须在1至86400之间")
|
||||
now = now.astimezone(TZ)
|
||||
issues = []
|
||||
for field, age_limit in (("collected_at", max_age), ("universe_at", max_age)):
|
||||
age = (now - timestamp(doc[field])).total_seconds()
|
||||
if not 0 <= age <= age_limit:
|
||||
issues.append(field + ":stale_or_future")
|
||||
if doc.get("day") != now.date().isoformat():
|
||||
issues.append("day:mismatch")
|
||||
if doc.get("collection_errors"):
|
||||
issues.append("collection:incomplete")
|
||||
codes = doc.get("expected_codes")
|
||||
if not isinstance(codes, list) or not codes:
|
||||
raise ValueError("缺少独立的应覆盖名单,不能把空集当作全部通过")
|
||||
if any(not isinstance(c, str) or not re.fullmatch(r"(?:60\d{4}\.SH|68\d{4}\.SH|00\d{4}\.SZ|30\d{4}\.SZ)", c) for c in codes):
|
||||
raise ValueError("应覆盖名单必须在入口规范化并限定沪深股票")
|
||||
if len(codes) != len(set(codes)):
|
||||
raise ValueError("应覆盖名单存在重复代码")
|
||||
stocks = doc.get("stocks")
|
||||
if not isinstance(stocks, dict):
|
||||
raise ValueError("缺少逐股证据")
|
||||
lanes = {p: {"expected": len(codes), "ready": 0, "unready": {}} for p in PARTS}
|
||||
for code in codes:
|
||||
row = stocks.get(code, {})
|
||||
if not isinstance(row, dict):
|
||||
raise ValueError("逐股证据类型错误")
|
||||
for part in PARTS:
|
||||
p = row.get("parts", {}).get(part, {})
|
||||
e = row.get("effective", {})
|
||||
reasons = []
|
||||
if p.get("state") != "ready":
|
||||
reasons.append("preparation_not_ready")
|
||||
if part in row.get("errors", {}) or "build" in row.get("errors", {}):
|
||||
reasons.append("preparation_error")
|
||||
if row.get("day") != doc["day"] or row.get("loaded") is not True:
|
||||
reasons.append("cache_not_accepted")
|
||||
if part == "minute_fund":
|
||||
if count(p.get("days", 0)) < 30:
|
||||
reasons.append("history_days_below_30")
|
||||
if count(e.get("money_flow_minutes", 0)) < 200:
|
||||
reasons.append("effective_money_flow_minutes_below_200")
|
||||
elif part == "minute_archive":
|
||||
if count(e.get("volume_minutes", 0)) < 200 or count(e.get("qrs_minutes", 0)) < 180:
|
||||
reasons.append("effective_price_volume_coverage_insufficient")
|
||||
elif count(p.get("days", 0)) < 30 or e.get("daily_fund_present") is not True:
|
||||
reasons.append("effective_daily_fund_missing")
|
||||
if reasons:
|
||||
lanes[part]["unready"][code] = reasons
|
||||
else:
|
||||
lanes[part]["ready"] += 1
|
||||
return {"status": "READY" if not issues and all(x["ready"] == x["expected"] for x in lanes.values()) else "INCOMPLETE",
|
||||
"scope": "historical_preparation_only", "day": doc["day"],
|
||||
"issues": issues, "lanes": lanes,
|
||||
"limit": "只读重建的历史准备资格;未验证进程内存、当日实时输入、实际计算、发布和消费。"}
|
||||
|
||||
|
||||
def main(argv=None):
|
||||
parser = argparse.ArgumentParser(description=__doc__)
|
||||
parser.add_argument("kind", choices=("preparation", "task"))
|
||||
parser.add_argument("file", type=Path)
|
||||
parser.add_argument("--at", help="历史重放时间,必须带时区;省略则核验当前证据")
|
||||
parser.add_argument("--max-age", type=int, default=300)
|
||||
args = parser.parse_args(argv)
|
||||
try:
|
||||
value = json.loads(args.file.read_text())
|
||||
result = (check_task(value) if args.kind == "task" else check_preparation(
|
||||
value, timestamp(args.at) if args.at else dt.datetime.now(TZ), args.max_age))
|
||||
except (OSError, ValueError, TypeError, KeyError, AttributeError):
|
||||
print(json.dumps({"status": "INVALID_EVIDENCE", "reason": "输入文件、字段类型或时间格式不符合契约"}, ensure_ascii=False))
|
||||
return 2
|
||||
print(json.dumps(result, ensure_ascii=False, indent=2))
|
||||
return 0 if result["status"] in ("READY", "NO_REPORTED_FAILURE") else 1
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
raise SystemExit(main())
|
||||
|
|
@ -0,0 +1,69 @@
|
|||
"""在已授权ITD容器内只读导出历史准备证据;不访问数据库,不补算、不发布。
|
||||
|
||||
从开发机透传给容器的 python - 执行;输出仅有统计、证券代码和错误类型。
|
||||
使用ITD现有缓存校验入口,未验证告警进程内存或实时资金、信号消费。
|
||||
"""
|
||||
import datetime as dt
|
||||
import json
|
||||
from pathlib import Path
|
||||
from zoneinfo import ZoneInfo
|
||||
|
||||
|
||||
def collect():
|
||||
from intraday_timing.config.loader import load_config_bundle
|
||||
from intraday_timing.minute_recovery.core import load_settings, hs_stock, VERSION
|
||||
from intraday_timing.state.intake_preparation import load_prepared
|
||||
from intraday_timing.state.seasonality_cache import SeasonalityCache
|
||||
|
||||
now = dt.datetime.now(ZoneInfo("Asia/Shanghai"))
|
||||
day = now.date().isoformat()
|
||||
settings = load_settings()
|
||||
bundle = load_config_bundle(Path("/app/configs"))
|
||||
root = Path(settings.directory)
|
||||
universe = json.loads((root / "status.json").read_text())
|
||||
if universe.get("version") != VERSION or universe.get("config_hash") != settings.fingerprint:
|
||||
raise ValueError("universe_identity")
|
||||
codes = sorted({c for c in universe["codes"] if hs_stock(c)})
|
||||
prep_root = root / "preparation" / day
|
||||
prep = json.loads((prep_root / "status.json").read_text())
|
||||
baseline = json.loads((Path("/app/data/seasonality") / (day + ".json")).read_text())
|
||||
if baseline.get("as_of_date") != day:
|
||||
raise ValueError("baseline_day")
|
||||
cache = SeasonalityCache.from_dict(baseline)
|
||||
accepted = load_prepared(settings, bundle.runtime, codes, now.date(), cache)
|
||||
errors = ["universe_reported_errors"] if universe.get("errors") else []
|
||||
rows = {}
|
||||
alerts = bundle.runtime.get("alerts", {})
|
||||
capital_min = int(alerts.get("capital_anomaly", {}).get("min_sample_count", 10))
|
||||
flow_min = int(alerts.get("money_flow_out_intensity", {}).get("min_sample_count", 10))
|
||||
for code in codes:
|
||||
row = prep.get("stocks", {}).get(code, {})
|
||||
volumes = [cache.get_vol(code, m) for m in range(240)]
|
||||
flows = [cache.get_mf_minute(code, m) for m in range(240)]
|
||||
qrs = [cache.get_qrs_min(code, m) for m in range(240)]
|
||||
rows[code] = {
|
||||
"day": prep.get("day"), "loaded": code in accepted and accepted[code] in ("ready", "partial"),
|
||||
"parts": row.get("parts", {}),
|
||||
"errors": {k: "reported" for k in row.get("errors", {})},
|
||||
"effective": {
|
||||
"volume_minutes": sum(bool(v and v.sample_count >= capital_min and v.log_amt_std >= 1e-9) for v in volumes),
|
||||
"money_flow_minutes": sum(bool(v and v.sample_count >= flow_min and v.main_cum_std >= 1e-3) for v in flows),
|
||||
"qrs_minutes": sum(bool(v and v.sample_count >= 10 and v.beta_std > 0) for v in qrs),
|
||||
"daily_fund_present": cache.get_mf_daily(code) is not None,
|
||||
}}
|
||||
if prep.get("day") != day or not settings.enabled:
|
||||
errors.append("preparation_identity_or_disabled")
|
||||
return {"schema": "itd-preparation-evidence-v1", "collected_at": now.isoformat(),
|
||||
"day": day, "universe_at": universe["at"], "expected_codes": codes,
|
||||
"collection_errors": errors, "stocks": rows,
|
||||
"baseline_file_rows": {k: len(baseline.get(k, [])) for k in ("mf_minute", "mf_daily", "vol", "qrs_min")},
|
||||
"scope": "read_only_cache_reconstruction_not_live_process"}
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
try:
|
||||
print(json.dumps(collect(), ensure_ascii=False))
|
||||
except Exception as exc:
|
||||
# 禁止打印异常正文,可能包含连接或配置路径;采集不全必须失败。
|
||||
print(json.dumps({"collection_failed": type(exc).__name__}))
|
||||
raise SystemExit(2)
|
||||
|
|
@ -4,6 +4,8 @@
|
|||
======================================
|
||||
运行: docker compose run --rm pms-web python scripts/run_tests.py
|
||||
|
||||
历史准备逐路覆盖、旧证据拒绝及嵌套业务失败核验专项21例。
|
||||
|
||||
test_batch54_units.py 用户候选来源、到期核验、权限、显式取用、技术面补读及评级排序透传 (10例)
|
||||
|
||||
4%网格真实批次、核销顺序、报价边界、迁移事务与跨版本库存重复准入专项62例。
|
||||
|
|
@ -205,6 +207,7 @@ HERE = os.path.dirname(os.path.abspath(__file__))
|
|||
ROOT = os.path.dirname(HERE)
|
||||
# 退出纪律专项:两次独立清仓信号、评级下降、事务、双策略隔离及撤单收尾。
|
||||
SUITES = [
|
||||
"test_business_evidence.py", # 历史准备覆盖与嵌套业务失败(21例)
|
||||
"test_signal_health.py", # 资金监测可用性与交易员提示,7例
|
||||
"test_proposal_trader_view.py", # 当前分析、数据库读数保存及旧确认保护(21例)
|
||||
"test_watch_missing_fund.py",
|
||||
|
|
|
|||
|
|
@ -0,0 +1,139 @@
|
|||
"""业务证据核验:失效来源不能被其他来源、顶层成功或旧回执掩盖(21例)。"""
|
||||
import unit_test_guard
|
||||
import copy
|
||||
import datetime as dt
|
||||
import io
|
||||
import json
|
||||
from pathlib import Path
|
||||
import tempfile
|
||||
import unittest
|
||||
from contextlib import redirect_stdout
|
||||
|
||||
from check_business_evidence import check_preparation, check_task, main
|
||||
|
||||
NOW = dt.datetime.fromisoformat("2026-11-18T10:00:00+08:00")
|
||||
CODE = "300133.SZ"
|
||||
|
||||
|
||||
def prepared():
|
||||
return {"schema": "itd-preparation-evidence-v1", "day": "2026-11-18",
|
||||
"collected_at": NOW.isoformat(), "universe_at": NOW.isoformat(),
|
||||
"expected_codes": [CODE], "collection_errors": [], "stocks": {CODE: {
|
||||
"day": "2026-11-18", "loaded": True, "errors": {},
|
||||
"parts": {"minute_archive": {"state": "ready"},
|
||||
"minute_fund": {"state": "ready", "days": 34},
|
||||
"daily_fund": {"state": "ready", "days": 35}},
|
||||
"effective": {"volume_minutes": 240, "qrs_minutes": 240,
|
||||
"money_flow_minutes": 240, "daily_fund_present": True}}}}
|
||||
|
||||
|
||||
class PreparationEvidenceTests(unittest.TestCase):
|
||||
def test_nonfinite_boolean_or_string_count_cannot_be_ready(self):
|
||||
for value in (float('nan'), float('inf'), True, "240", -1):
|
||||
d = prepared(); d["stocks"][CODE]["effective"]["money_flow_minutes"] = value
|
||||
with self.assertRaises(ValueError): check_preparation(d, NOW)
|
||||
|
||||
def test_ready_is_limited_to_historical_layer(self):
|
||||
out = check_preparation(prepared(), NOW)
|
||||
self.assertEqual(out["status"], "READY")
|
||||
self.assertEqual(out["scope"], "historical_preparation_only")
|
||||
|
||||
def test_other_sources_cannot_mask_empty_moneyflow(self):
|
||||
d = prepared(); d["stocks"][CODE]["effective"]["money_flow_minutes"] = 0
|
||||
out = check_preparation(d, NOW)
|
||||
self.assertEqual(out["status"], "INCOMPLETE")
|
||||
self.assertEqual(out["lanes"]["minute_archive"]["ready"], 1)
|
||||
self.assertEqual(out["lanes"]["minute_fund"]["ready"], 0)
|
||||
|
||||
def test_preparation_claim_cannot_mask_too_few_history_days(self):
|
||||
d = prepared(); d["stocks"][CODE]["parts"]["minute_fund"]["days"] = 13
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_missing_stock_is_counted_in_denominator(self):
|
||||
d = prepared(); d["expected_codes"].append("002979.SZ")
|
||||
out = check_preparation(d, NOW)
|
||||
self.assertEqual(out["lanes"]["minute_fund"]["expected"], 2)
|
||||
self.assertIn("002979.SZ", out["lanes"]["minute_fund"]["unready"])
|
||||
|
||||
def test_empty_universe_cannot_pass(self):
|
||||
d = prepared(); d["expected_codes"] = []
|
||||
with self.assertRaises(ValueError): check_preparation(d, NOW)
|
||||
|
||||
def test_duplicate_or_outside_universe_is_rejected(self):
|
||||
for codes in ([CODE, CODE], ["INVALID"]):
|
||||
d = prepared(); d["expected_codes"] = codes
|
||||
with self.assertRaises(ValueError): check_preparation(d, NOW)
|
||||
|
||||
def test_old_snapshot_and_future_timestamp_cannot_pass(self):
|
||||
for timestamp in ("2026-11-18T09:00:00+08:00", "2026-11-18T10:01:00+08:00"):
|
||||
d = prepared(); d["collected_at"] = timestamp
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_stale_independent_universe_cannot_pass(self):
|
||||
d = prepared(); d["universe_at"] = "2026-11-17T10:00:00+08:00"
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_rejected_cache_is_not_ready_even_if_file_has_rows(self):
|
||||
d = prepared(); d["stocks"][CODE]["loaded"] = False
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_previous_day_cache_is_not_current(self):
|
||||
d = prepared(); d["stocks"][CODE]["day"] = "2026-11-17"
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_daily_fund_failure_does_not_disappear_when_minute_recovers(self):
|
||||
d = prepared(); d["stocks"][CODE]["effective"]["daily_fund_present"] = False
|
||||
out = check_preparation(d, NOW)
|
||||
self.assertEqual(out["lanes"]["minute_fund"]["ready"], 1)
|
||||
self.assertEqual(out["lanes"]["daily_fund"]["ready"], 0)
|
||||
|
||||
def test_reported_error_dominates_old_ready_state(self):
|
||||
d = prepared(); d["stocks"][CODE]["errors"] = {"minute_fund": "reported"}
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_unknown_collection_state_cannot_pass(self):
|
||||
d = prepared(); d["collection_errors"] = ["identity"]
|
||||
self.assertEqual(check_preparation(d, NOW)["status"], "INCOMPLETE")
|
||||
|
||||
def test_input_remains_unchanged(self):
|
||||
d = prepared(); old = copy.deepcopy(d); check_preparation(d, NOW)
|
||||
self.assertEqual(d, old)
|
||||
|
||||
|
||||
class TaskEvidenceTests(unittest.TestCase):
|
||||
def test_source_error_without_invalid_counter_is_detected(self):
|
||||
self.assertEqual(check_task({"ok": True, "timing_fusion": {"invalid": 0, "source_errors": ["unavailable"]}})["status"], "FAILED")
|
||||
self.assertEqual(check_task({"status": "SUCCESS", "business_error": "data_missing"})["status"], "FAILED")
|
||||
|
||||
def test_all_sources_failed_cannot_hide_under_top_ok(self):
|
||||
out = check_task({"top_ok": True, "sources": {"intraday": False, "alerts": False}})
|
||||
self.assertEqual(out["status"], "FAILED")
|
||||
self.assertEqual(check_task({"ok": True, "enabled": False})["status"], "NO_REPORTED_FAILURE")
|
||||
|
||||
def test_nested_failure_dominates_celery_success(self):
|
||||
out = check_task({"status": "SUCCESS", "result": {"ok": True, "risk_reviews": {"ok": False, "errors": ["timeout"]}}})
|
||||
self.assertEqual(out["status"], "FAILED")
|
||||
self.assertIn("$.result.risk_reviews.ok", out["failure_paths"])
|
||||
|
||||
def test_errors_without_exception_are_detected(self):
|
||||
out = check_task({"ok": True, "timing_fusion": {"invalid": 3}})
|
||||
self.assertEqual(out["status"], "FAILED")
|
||||
out = check_task({"ok": True, "new_proposals": [{"errors": ["do-not-print-secret"]}]})
|
||||
self.assertNotIn("do-not-print-secret", json.dumps(out))
|
||||
|
||||
def test_no_message_and_no_reported_failure_do_not_claim_completion(self):
|
||||
self.assertEqual(check_task({})["status"], "INCOMPLETE")
|
||||
self.assertEqual(check_task({"ok": True, "signals": [], "errors": []})["status"], "NO_REPORTED_FAILURE")
|
||||
|
||||
def test_cli_exit_codes_and_malformed_input(self):
|
||||
with tempfile.TemporaryDirectory() as folder:
|
||||
path = Path(folder) / "input.json"
|
||||
for value, expected in (({"ok": True}, 0), ({"ok": False}, 1), (None, 1)):
|
||||
path.write_text(json.dumps(value))
|
||||
with redirect_stdout(io.StringIO()): self.assertEqual(main(["task", str(path)]), expected)
|
||||
path.write_text('{')
|
||||
with redirect_stdout(io.StringIO()): self.assertEqual(main(["task", str(path)]), 2)
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
unittest.main()
|
||||
Loading…
Reference in New Issue