gao
b351bd7595
work #06 (2026-07-03)：user 请求加 mairui /hsdata 历史分时 MA 同步（日 K 级别）。 mairui 端点探测：/d/ma, /d/ma5/10/20, /15/ma, /30/ma, /60/ma 端点结构存在 但当前免费 licence 返 数据不存在；基础 K 线 (/d/n, /15/n, /30/n, /60/n) 正常。 策略：本地从 kline_stock 计算（pandas per-stock rolling），写新表 kline_stock_ma_daily，source=local_kline_proxy 标识本地派生。 mairui URL 留作未来升级 licence 后切 API 用。 变更： - app/core/db/models.py: KlineStockMADaily ORM model - app/core/db/ops.py: upsert_kline_stock_ma_daily_rows (批量 5000/批) - app/tasks/task_mairui_ma_daily.py: SyncMairuiMADaily (全量重算) - app/tasks/__init__.py: 注册到 TASKS dict - app/core/sync/registry.py: SYNC_DEFINITION (sort_order=90, dep=kline_daily) - app/core/scheduler/scheduler.py: schedule_mairui_ma_daily @ 16:30 + register_sync_jobs - bin/daily_sync_check.py: SCHEDULE entry (window_end=17:00) 烟测：11,684,592 行, 5510 只, 1370s (23min)，MA5/10/20/60 全部计算。 SH600519 样本：ma5=1194.18 ma10=1191.03 ma20=1211.94 ma60=1296.20 (2026-07-03) 未来优化（不在本 work）： - 增量模式（每日只算最近 1-2 天）→ 23min → 30s - 升级 mairui licence 切到 /d/maN API - 加 EMA / BOLL / KDJ 等其他指标 Co-Authored-By: Claude <noreply@anthropic.com>
48 lines
1.5 KiB
Python
48 lines
1.5 KiB
Python
"""同步任务注册表。
|
|
|
|
所有 `SyncTask` 子类在此集中注册，外部通过 `get_task(dataset_id)` 或
|
|
遍历 `TASKS` 字典使用。
|
|
"""
|
|
from app.tasks.task_industry_sector import SyncIndustrySector
|
|
from app.tasks.task_kline_5min import SyncKline5Min
|
|
from app.tasks.task_kline_daily import SyncKlineDaily
|
|
from app.tasks.task_kline_index import SyncKlineIndex
|
|
from app.tasks.task_longhubang import SyncLonghubang
|
|
from app.tasks.task_mairui_ma_daily import SyncMairuiMADaily
|
|
from app.tasks.task_market_regime import SyncMarketRegime
|
|
from app.tasks.task_moneyflow import SyncMoneyflow
|
|
from app.tasks.task_sector_features import SyncSectorFeatures
|
|
from app.tasks.task_share_snapshot import SyncShareSnapshot
|
|
from app.tasks.task_stock_node import SyncStockNode
|
|
from app.tasks.task_stocks_basic import SyncStocksBasic
|
|
from app.tasks.task_tick_trade import SyncTickTrade
|
|
|
|
TASKS: dict[str, type] = {
|
|
cls.dataset_id: cls
|
|
for cls in (
|
|
SyncStocksBasic,
|
|
SyncKlineDaily,
|
|
SyncKlineIndex,
|
|
SyncKline5Min,
|
|
SyncTickTrade,
|
|
SyncMoneyflow,
|
|
SyncIndustrySector,
|
|
SyncSectorFeatures,
|
|
SyncShareSnapshot,
|
|
SyncMarketRegime,
|
|
SyncLonghubang,
|
|
SyncStockNode,
|
|
SyncMairuiMADaily,
|
|
)
|
|
}
|
|
|
|
|
|
def get_task(dataset_id: str):
|
|
"""通过 dataset_id 取同步任务类实例，找不到抛 KeyError。"""
|
|
if dataset_id not in TASKS:
|
|
raise KeyError(f"未知的同步任务: {dataset_id!r}，可选: {sorted(TASKS)}")
|
|
return TASKS[dataset_id]()
|
|
|
|
|
|
__all__ = ["TASKS", "get_task"]
|