feat(backtest): 대대적인 Optuna 백테스트 웹 UI 및 백엔드 파이프라인 개편
- Web UI: - Optuna 탭 추가 및 mode_combo (최빈값 조합), 사후합격 Top 10 시각화 기능 - 파라미터 분포(p25~p75, median, mode) 히스토그램 및 과적합(Overfit) 위험도 진단 UI 신설 - 체크박스 렌더링 깨짐 현상을 네이티브(appearance: auto)로 강제 복구 (CSS) - 다단 트레일링 스탑, 꼬리 진입/돌파 손절 등 고급 조건 설정 폼 UI 고도화 - Backend (Optuna Jobs): - CLI 환경에서 구동된 Optuna json 결과물을 웹 대시보드로 읽어오는 import 기능 강화 - JSON 메타데이터에 sort_by, mode, 호가 적용 여부 등 핵심 파라미터 파싱 누락 수정 - optuna_mode_combo.py 등 최빈값 조합 및 후보군 2차 검증을 위한 신규 모듈 추가 - DB & Execution: - WebSocket 호가/틱 피드 수집 통계(api_feed_collect_stats) 메모리 캐시 최적화 - KIS client 접속 키(approval_key) 등 인프라스트럭처 안정성 및 공유 관리 구조 개선 - 테스트 및 디버깅용 briefing 마크다운 자동 생성 기능 추가
This commit is contained in:
Your Name
@@ -108,6 +108,7 @@ class TradeDBExt:
|
||||
self._migrate_orders_drop_daily_side_unique()
|
||||
self._migrate_orders_pk_scope()
|
||||
self._migrate_orders_is_mock()
|
||||
self._migrate_orders_broker_debug_columns()
|
||||
logger.info("📊 orders 테이블 확인/생성 완료")
|
||||
except Exception as e:
|
||||
logger.warning("orders 테이블 생성 실패(무시·폴백): %s", e)
|
||||
@@ -228,6 +229,25 @@ class TradeDBExt:
|
||||
except Exception as e:
|
||||
logger.warning("orders.is_mock 마이그레이션 실패(무시·폴백): %s", e)
|
||||
|
||||
def _migrate_orders_broker_debug_columns(self) -> None:
|
||||
"""orders — cancelable reconcile 디버그 스냅샷 컬럼."""
|
||||
specs = {
|
||||
"broker_open_qty": "INT NULL",
|
||||
"broker_open_odno": "VARCHAR(30) NULL",
|
||||
"broker_reconcile_at": "VARCHAR(30) NULL",
|
||||
"broker_reconcile_note": "VARCHAR(200) NULL",
|
||||
}
|
||||
try:
|
||||
cols = self.conn.get_columns("orders")
|
||||
for col, ddl in specs.items():
|
||||
if col not in cols:
|
||||
self.conn.execute(
|
||||
f"ALTER TABLE orders ADD COLUMN `{col}` {ddl}"
|
||||
)
|
||||
logger.info("📌 orders.%s 컬럼 추가 (reconcile 디버그)", col)
|
||||
except Exception as e:
|
||||
logger.warning("orders broker debug 마이그레이션 실패(무시·폴백): %s", e)
|
||||
|
||||
# ------------------------------------------------------------------
|
||||
# orders CRUD
|
||||
# ------------------------------------------------------------------
|
||||
@@ -360,23 +380,121 @@ class TradeDBExt:
|
||||
code: str,
|
||||
status: str,
|
||||
ord_date: Optional[str] = None,
|
||||
broker_reconcile_note: Optional[str] = None,
|
||||
) -> bool:
|
||||
"""체결 대기 등 — filled_qty 없이 status 만 갱신 (strategy_id·code·ord_date·is_mock 로 행 한정)."""
|
||||
od = ord_date or datetime.datetime.now().strftime("%Y-%m-%d")
|
||||
mock_flag = self._resolve_is_mock(None)
|
||||
note = str(broker_reconcile_note or "").strip() or None
|
||||
try:
|
||||
with self.conn:
|
||||
self.conn.execute(
|
||||
"UPDATE orders SET status=%s "
|
||||
"WHERE ord_no=%s AND strategy_id=%s AND code=%s AND ord_date=%s "
|
||||
"AND is_mock=%s",
|
||||
(status, ord_no, strategy_id, code, od, mock_flag),
|
||||
)
|
||||
if note:
|
||||
self.conn.execute(
|
||||
"UPDATE orders SET status=%s, broker_reconcile_note=%s, "
|
||||
"broker_reconcile_at=%s "
|
||||
"WHERE ord_no=%s AND strategy_id=%s AND code=%s AND ord_date=%s "
|
||||
"AND is_mock=%s",
|
||||
(
|
||||
status,
|
||||
note[:200],
|
||||
datetime.datetime.now().strftime("%Y-%m-%d %H:%M:%S"),
|
||||
ord_no,
|
||||
strategy_id,
|
||||
code,
|
||||
od,
|
||||
mock_flag,
|
||||
),
|
||||
)
|
||||
else:
|
||||
self.conn.execute(
|
||||
"UPDATE orders SET status=%s "
|
||||
"WHERE ord_no=%s AND strategy_id=%s AND code=%s AND ord_date=%s "
|
||||
"AND is_mock=%s",
|
||||
(status, ord_no, strategy_id, code, od, mock_flag),
|
||||
)
|
||||
return True
|
||||
except Exception as e:
|
||||
logger.error("update_order_status 실패 (%s): %s", ord_no, e)
|
||||
return False
|
||||
|
||||
def update_order_broker_snapshot(
|
||||
self,
|
||||
*,
|
||||
ord_no: str,
|
||||
strategy_id: str,
|
||||
code: str,
|
||||
open_qty: Optional[int] = None,
|
||||
open_odno: Optional[str] = None,
|
||||
note: Optional[str] = None,
|
||||
ord_date: Optional[str] = None,
|
||||
) -> bool:
|
||||
"""cancelable reconcile — 브로커 미체결 스냅샷 기록."""
|
||||
od = ord_date or datetime.datetime.now().strftime("%Y-%m-%d")
|
||||
mock_flag = self._resolve_is_mock(None)
|
||||
now = datetime.datetime.now().strftime("%Y-%m-%d %H:%M:%S")
|
||||
try:
|
||||
with self.conn:
|
||||
self.conn.execute(
|
||||
"""
|
||||
UPDATE orders
|
||||
SET broker_open_qty=%s,
|
||||
broker_open_odno=%s,
|
||||
broker_reconcile_at=%s,
|
||||
broker_reconcile_note=%s
|
||||
WHERE ord_no=%s AND strategy_id=%s AND code=%s
|
||||
AND ord_date=%s AND is_mock=%s
|
||||
""",
|
||||
(
|
||||
int(open_qty) if open_qty is not None else None,
|
||||
str(open_odno or "").strip() or None,
|
||||
now,
|
||||
str(note or "").strip()[:200] or None,
|
||||
ord_no,
|
||||
strategy_id,
|
||||
code,
|
||||
od,
|
||||
mock_flag,
|
||||
),
|
||||
)
|
||||
return True
|
||||
except Exception as e:
|
||||
logger.error("update_order_broker_snapshot 실패 (%s): %s", ord_no, e)
|
||||
return False
|
||||
|
||||
def get_latest_sell_order_for_code(
|
||||
self,
|
||||
strategy_id: str,
|
||||
code: str,
|
||||
*,
|
||||
statuses: Optional[tuple] = None,
|
||||
) -> Optional[Dict]:
|
||||
"""당일·전략·종목 최신 매도 1건 (reconcile용)."""
|
||||
today = datetime.datetime.now().strftime("%Y-%m-%d")
|
||||
mock_flag = self._resolve_is_mock(None)
|
||||
st = statuses or ("CANCELLED", "PENDING_FILL", "SUBMITTED", "PARTIAL", "FILLED")
|
||||
placeholders = ",".join(["%s"] * len(st))
|
||||
try:
|
||||
row = self.conn.execute(
|
||||
f"""
|
||||
SELECT * FROM orders
|
||||
WHERE ord_date=%s AND is_mock=%s
|
||||
AND strategy_id=%s AND code=%s AND side='SELL'
|
||||
AND status IN ({placeholders})
|
||||
ORDER BY submitted_at DESC
|
||||
LIMIT 1
|
||||
""",
|
||||
(today, mock_flag, strategy_id, code, *st),
|
||||
).fetchone()
|
||||
return dict(row) if row else None
|
||||
except Exception as e:
|
||||
logger.error(
|
||||
"get_latest_sell_order_for_code 실패 (%s/%s): %s",
|
||||
strategy_id,
|
||||
code,
|
||||
e,
|
||||
)
|
||||
return None
|
||||
|
||||
def get_pending_fill_orders(self) -> List[Dict]:
|
||||
"""
|
||||
당일 미확인·부분체결 주문 (체결 qty < 주문 qty).
|
||||
|
||||
Reference in New Issue
Block a user