记录统一入池准备发布及归档核验
This commit is contained in:
parent
447473c071
commit
dd35968f26
|
|
@ -1,5 +1,11 @@
|
|||
# 开发节点记录(三系统量化交易)
|
||||
|
||||
## 2026年11月12日14:56 统一入池历史补齐发布
|
||||
|
||||
用户要求机器选入与人工关注都经过数据补齐完成资金相关准备。核实gp_stk_mins_1min足以重建分钟量价及成交额,独立分钟资金净额来自另一数据源;纠正此前“分钟历史不足”的泛化表述。188三个ITD服务发布a217dac,共用持久任务、后台逐票构建、重启恢复、失败退避及按项读取,盘中循环不等待历史构建;原阈值及权重保持。
|
||||
|
||||
开发机和188候选1020项断网测试通过。128只首轮处理完成:分钟归档和日资金均就绪,分钟净额仍16天并自动重试;两容器读取结果一致。三个目标以外47容器不变,155未部署,账本核验差异0。发布与真实验证见[接续](docs/入池历史补齐与统一标定_2026-11-12.md)。
|
||||
|
||||
## 2026年11月12日14:29 人工关注与持仓同优先告警发布
|
||||
|
||||
按用户授权,155 worker发布71f8278,关注快照独立发布风险监测资格;188分钟缓存发布989ca91、告警最终发布8ee1dd0。9只关注与5只持仓去重13只同档优先于普通候选,缺评析不阻断告警,交易资格和三组权重保持。启动恢复真实告警去重,防止盘中重建重复发布。
|
||||
|
|
|
|||
File diff suppressed because it is too large
Load Diff
|
|
@ -64,3 +64,7 @@ PMS自然signal_digest和monitor_watch_sync均成功,无来源错误。当前
|
|||
回退只涉及本次三个目标容器;保留账本、回报、真实告警、消费水位和缓存事实。回退告警覆盖代码会重新失去8只关注,回退时效保护会重新允许过期资金发布,必须明确说明。未创建长期观察任务。
|
||||
|
||||
脱敏证据见[发布证据](evidence/watch_alert_release_20261112.json)。
|
||||
|
||||
## 14:56后续
|
||||
|
||||
用户补充要求后已发布[统一入池历史准备](入池历史补齐与统一标定_2026-11-12.md)。分钟价格归档可重建量价与成交额基线;此前不足的是独立分钟资金净额历史。机器与人工现共用后台补齐、重试和逐项就绪流程,最新镜像与核验以该接续为准。
|
||||
|
|
|
|||
|
|
@ -0,0 +1,60 @@
|
|||
# 入池历史补齐与统一标定
|
||||
|
||||
2026年11月12日,承接用户要求:机器选入和人工关注都必须经过数据检查、补齐与资金相关基线准备。既有持仓也同等纳入,不再仅增加名单后等待偶然触发。
|
||||
|
||||
## 核实与纠正
|
||||
|
||||
只读实际表结构确认,`gp_stk_mins_1min`包含开高低收、成交量、成交额和时间,不包含主力净流入、大小单资金字段。华策影视、果麦文化在9月1日至11月11日范围内均查到至少40个交易日,最近两日各241条。该表可以重建分钟QRS及资金分布依赖的成交额基线。上一轮“分钟历史不足”的泛化表述不准确;不足的是独立分钟资金净额历史,不能把这两类数据混为一谈。
|
||||
|
||||
本次“标定”指按既有模型补算逐股统计基线,不重新选择交易阈值,不改三组权重,也不把成交额推算成主力净流入。
|
||||
|
||||
## 统一流程
|
||||
|
||||
1. 候选入池、有效人工关注和真实模拟持仓共同登记。持仓与关注同档优先,普通机器候选随后处理。限沪深,按实际有效名单撤销准备任务;仍有其他有效身份则保留。
|
||||
2. 复用现有独立分钟服务,新增后台准备线程,独立数据库连接。单次只处理一只股票,不占用信号循环或行情补齐线程,不增加第二套行情采集。
|
||||
3. 按执行日、证券、算法和配置版本建立持久任务。已就绪当日不重复计算,重启恢复任务;部分不足和读取失败按5分钟起、最长1小时退避。新增票不会被旧票失败堵住。
|
||||
4. 分开补取、构建、核验三部分:分钟量价归档、分钟资金历史、日资金历史。分钟量价先查60个自然日,不足20个交易日则向前扩大到180、366日上限,使用最近20个历史交易日;资金历史仍用原60日探测、30个有记录日期资格。只用执行日之前数据,不包含当日部分收盘或未来数据,不插值、不补零。
|
||||
5. 按单项发布统计到本系统私有目录,原子替换。单项异常保留同日上一份成功统计;独立来源可以部分完成,不能因任意一项缓存命中就把整票标为全部准备好。日资金统计不替代分钟资金统计。
|
||||
6. 入场循环和告警循环在自然分钟调度中读取同一份准备结果,校验日期、配置、证券和文件边界后使用。读取不联网、不等待构建;缺哪项只影响依赖它的计算。原阈值、冷却、过期资金保护和三源合议不变。
|
||||
|
||||
## 验证及运行观察
|
||||
|
||||
离线测试覆盖人工/机器同队列、优先级、缺失重试、重启、跨日/配置失效、归档排除当日、重复冲突拒绝、部分准备、失败保留已就绪项、证券身份校验及两个消费者不等待历史构建。实际候选测试与发布结果见下文。
|
||||
|
||||
准备状态在`data/minute_recovery/preparation/YYYY-MM-DD/status.json`;逐股缓存同目录,含来源、可用日期、样本与错误类型。它是运维证据,不新增主界面开发参数。源实时数据过期与历史基线准备是独立条件,历史重建不能修复实时资金源停止更新。
|
||||
|
||||
## 发布边界
|
||||
|
||||
本次仅更新188的`intraday_minute_cache`、`intraday_alerts`、`intraday_loop`三个受影响服务,沿用本会话授权和独立发布目录。188真实PMS、Bionic及155运行容器不操作;原源码和私有环境不变。开发机提交、候选断网全量通过后,先准备服务完成高优先级归档重建,再更新两个消费者。保留原账本、真实消息和缓存事实,不补发历史信号验证。
|
||||
|
||||
## 实际发布与核验
|
||||
|
||||
核验时间为北京时间2026年11月12日14:55至14:56。代码`a217dac5241b36be7583179fd553592da0d1aa23`,镜像`intraday_timing:intake-history-a217dac`,镜像ID`sha256:3c855f15e35cf9e72d500c150a994e0492d1a84ed241593aaafb88a0deeddc4d`。
|
||||
|
||||
| 服务 | 部署时间 | 用途 |
|
||||
| --- | --- | --- |
|
||||
| intraday_minute_cache | 14:52:03 | 原行情任务继续运行,独立后台线程负责统一历史准备 |
|
||||
| intraday_alerts | 14:52:44 | 关注、持仓、全部机器监测候选共用准备结果 |
|
||||
| intraday_loop | 14:52:45 | 入场候选读取同一准备结果,盘中入池不再同步等待历史构建 |
|
||||
|
||||
三个实际容器的141个源码文件均与提交逐文件摘要一致,均healthy、重启计数0。原ITD目录源码仍75adbfaf1dd0a2fc0e8b0f7d454d84f7a2cc6e73,环境键值及非目标挂载保持。其余47个容器标识、镜像、启动时间不变,含Bionic与188真实PMS。155没有部署或参数修改,运行容器与上一轮一致。
|
||||
|
||||
开发机及188候选各通过1020项断网全量,均隔离业务配置。新增测试涉及归档范围、任务持久化、部分完成、重启与退避、证券隔离、坏缓存及两个消费者入池不等待历史。服务器候选日志`/tmp/itd-intake-history-a217dac.log`;配置备份`/mnt/work/project/intraday_timing/backups/intake-history-20261112-a217dac`,仅留服务器,不把私有配置提交Git。
|
||||
|
||||
### 真实数据结果
|
||||
|
||||
14:55:38首轮128只全部处理完毕。9只有效关注与5只持仓去重13只先完成,随后处理普通机器候选。128只分钟量价和成交额基线均就绪,均严格截至11月11日,采用最近20个历史交易日;高优先级13只均为4820条分钟归档记录。日资金历史128只均达到原要求,实际35至37条日记录。
|
||||
|
||||
独立分钟资金净额历史128只均为16个有记录日期,未达到原30天资格要求,明确保留等待并定时重试;没有拿成交额模拟净流入,也未降标准。因此每股总体为“部分完成”,但已完成的分钟QRS、成交额及日资金统计可独立投入使用。**“统一准备流程已完成发布”不等于“所有资金来源都已满足条件”。**
|
||||
|
||||
两个消费者14:53、14:54自然分钟循环正常,告警覆盖记录无错误。14:56分别在两个容器只读调用实际读取器,均校验并解析128只,结果一致:分钟QRS统计27008条、成交额统计29871条、日资金128条、分钟资金0条。该核验不是模型任务、业务调度或信号注入;不把本次基线重建计作新的买卖信号或成交验收。
|
||||
|
||||
155在2026-11-12T14:55:04.642762的连续确认与落库均1805596,缺口、待入账、孤儿、在途委托均0,策略合计数量和现金差0;最新资金9.3秒,估值可用。
|
||||
|
||||
### 后续条件与回退
|
||||
|
||||
实时主力资金比率必须按既有15分钟时效通过;历史归档重建无法替代实时源更新。分钟净额统计须等独立资金历史达到原要求,后台将按5分钟起、最长1小时退避重新检查。任务按有效入池名单、执行日和配置版本维护,重启不清除已完成状态;未创建额外观察自动化。
|
||||
|
||||
需要回退时仅恢复上述三个ITD服务的旧镜像和源码挂载。保留本次准备文件、原分钟事实、真实信号、消费水位和PMS账本;旧版不读取新目录,不必删除数据。回退会恢复盘中同步补算或缺项难以重试的旧行为,应明确说明。
|
||||
|
||||
脱敏证据见[发布与归档核验](evidence/intake_preparation_release_20261112.json)。
|
||||
|
|
@ -1,5 +1,7 @@
|
|||
# 开发资料入口
|
||||
|
||||
11月12日14:52已发布[入池历史补齐与统一标定](入池历史补齐与统一标定_2026-11-12.md)。机器、人工与持仓共用后台准备流程;128只分钟量价、成交额和日资金基线完成,独立分钟净额历史仍为16天。明确纠正此前将分钟价格归档与分钟资金历史混称的表述。
|
||||
|
||||
11月12日14:29已完成[人工关注高优先告警发布](人工关注高优先告警发布_2026-11-12.md)。9只关注与持仓同档监测,155仅worker、188仅ITD告警和分钟缓存更新。5只新增QRS自然发布并被PMS读取;实时主力资金数据仍落后、资金流强度历史不足,已加过期发布保护,不能把覆盖完成等同所有资金信号可计算。逐股时间与自然验收见接续。
|
||||
|
||||
11月12日13:37至13:45人工关注信号只读巡检发现实际覆盖缺口,见[巡检记录](人工关注信号覆盖缺口巡检_2026-11-12.md)。PMS正式流读取正常,但9只关注中8只未进ITD告警池;行情缓存和每日、盘中研究已覆盖,不代表正式告警覆盖。华策影视13:15已有风险研究但未发布正式信号。这是修复前巡检,后续接入及仍存数据限制以上方最新发布接续为准。
|
||||
|
|
|
|||
Loading…
Reference in New Issue