Skip to content

生成モデルの候補競合評価を統合し精度後退を記録 - #162

Merged
PyYoshi merged 2 commits into
devfrom
v3/full-engine-model-results
Sep 20, 2026
Merged

PyYoshi merged 2 commits into
devfrom
v3/full-engine-model-results

Conversation

@PyYoshi

@PyYoshi PyYoshi commented Sep 20, 2026

Copy link
Copy Markdown
Owner

概要

  • uchardet PR Raising Exception #39(11 CI 成功)を統合した e03915e00daa036e7f172bad9b395f485530d8f5 へ参照を更新。
  • 非デフォルト実験targetで French cp1252 の1 slotを置換し、候補競合まで評価する基盤を統合。
  • Paris validation 16対での exact codec / decode-equivalent / language を日本語文書へ記録。
  • cp1252 decode-equivalent は legacy 16/16 に対し identity 5/16、filtered 7/16。新モデルは標準モデルに採用しません。
  • SBCS の公開候補が内部全modelの順位表ではないこと、学習重複・互換性指標の制約を明記。

検証

  • native 関連 unittest 94件成功、比較reportを2回生成してバイト一致。
  • cChardet ローカル 321 passed / 28 skipped / 79 subtests passed。実験用native buildのopt-in試験はnative側で別途実行済み。
  • git diff --check 成功。
  • native source/CMake変更のため wheel CI は省略せず実施。

P01の停止調査や追加fuzzは再開せず、公開API・標準モデル・masterには変更を加えません。

Refs #123

@PyYoshi
PyYoshi marked this pull request as ready for review September 20, 2026 23:26
@PyYoshi
PyYoshi merged commit 4c4d19d into dev Sep 20, 2026
20 checks passed
@PyYoshi
PyYoshi deleted the v3/full-engine-model-results branch September 20, 2026 23:26
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant