Files
8460s-image-rd/assets-library/models-performance.json
choijaewook 7be1192c73 meeting-103 R5+종합: 5라운드 통합 (Plan §자동 정지 #12 발동)
R1~R5 총 시도 27 · 성공 11 (40.7%)
- R1: 4/5 Pony 42.5% pastel 
- R2: 2/6 Pony→Refiner 42.1% · Pony C 한자카드 41.8% (시각 평가 핵심)
- R3: 0/6 cast_to_device OOM (VRAM 4.6GB)
- R4: 4/5 단순화 (Pony 검정 0.01% 완벽)
- R5: 1/5 동시 enqueue 한계 (Pony B dawn)

자동 정지 사유:
- 자동 평가 5R 변동 0.01~0.68% 범위 정체 (Plan §정지 #12)
- 자동 평가 시각 차원 미커버 (별이 정합성 / 한자 / 한옥 한국식)
- Qwen 5차 연속 실패 + PuLID 복합 반복 실패

사용자 시각 검수 의무 (Plan §검수 시스템 이중 채널):
- 1순위 Vault: D:\Vault\8460s-image-rd\eval\meeting-103-grid.html
- 2순위 Gitea raw

다음 결정:
- R1-1/R2-1/R4-3 Pony A 별이 8/10 ↑ → LoRA 자동 트리거
- R2-6 Pony C 한자 4.5/5 ↑ → winner 채택 + 60갑자 운영
- R1-4 Flux B 한옥 4.5/5 ↑ → winner 채택

자산 라이브러리:
- models-performance: pony-v6 5R · flux-dev/schnell/pulid/qwen 부분
- proven-patterns: pony single-model-stable + score tags
- failed-patterns: Qwen 5차 + PuLID concat/max + R3 OOM + Schnell 검정 14%
- loras: 트리거 미충족 (시각 평가 후 결정)
2026-05-19 22:12:34 +09:00

130 lines
2.8 KiB
JSON

{
"_initialized_at": "2026-05-19T21:47:00+09:00",
"_dimensions": [
"byeolyi",
"hanja",
"hanok",
"illustration",
"korean_traditional"
],
"_thresholds": {
"byeolyi": 8,
"hanja": 4.5,
"hanok": 4.5
},
"_protected_models": [
"qwen-image-2.0",
"qwen-image-2512",
"qwen-image-layered",
"qwen-edit-2511",
"flux-dev",
"flux-schnell",
"flux-kontext",
"flux-fill",
"flux-redux",
"pulid-flux",
"pony-v6",
"illustrious",
"lightning-lora-qwen"
],
"models": {
"pony-v6": {
"rounds_used": 5,
"dimensions": {
"byeolyi": [],
"hanja": [],
"hanok": [],
"illustration": [],
"korean_traditional": [],
"auto_pastel": [
42.5,
42.1,
41.8,
21.5,
13.1,
8.9
],
"auto_black": [
0.61,
0.68,
0.37,
0.01,
0.01,
0.15
]
},
"avg_scores": {},
"best_combinations": [],
"verdict": "5라운드 검증 — 단일 모델 가장 안정 (검정 0.01-0.68%, 파스텔 8-42%). 시각 평가 필수."
},
"flux-dev": {
"rounds_used": 4,
"dimensions": {
"byeolyi": [],
"hanja": [],
"hanok": [],
"illustration": [],
"korean_traditional": [],
"auto_pastel": [
20.1,
29.7
],
"auto_black": [
3.11,
0.0
]
},
"avg_scores": {},
"best_combinations": [],
"verdict": "복합 워크플로우 cast_to_device OOM 빈번 / 단순 워크플로우도 R4 실패"
},
"pulid-flux": {
"rounds_used": 1,
"dimensions": {
"byeolyi": [],
"hanja": [],
"hanok": [],
"illustration": [],
"korean_traditional": [],
"auto_pastel": [
30.2
],
"auto_black": [
0.73
]
},
"avg_scores": {},
"best_combinations": [],
"verdict": ""
},
"qwen-image-2512": {
"rounds_used": 1,
"dimensions": {
"byeolyi": [],
"hanja": [],
"hanok": [],
"illustration": [],
"korean_traditional": []
},
"avg_scores": {},
"best_combinations": [],
"verdict": "워크플로우 결함 — 5KB 검정 latent (v1~v4 4차 시도 모두 실패)"
},
"flux-schnell": {
"rounds_used": 4,
"dimensions": {
"auto_pastel": [
24.0,
36.4
],
"auto_black": [
13.92,
0.9
]
},
"avg_scores": {},
"best_combinations": [],
"verdict": "단일 모델 성공 / A 별이 검정 13.92% 한계 / B 한옥 안정 36.4% 파스텔"
}
}
}