Skip to content

生成モデルを候補競合まで評価する非デフォルト実験target - #39

Merged
PyYoshi merged 1 commit into
devfrom
v3/experimental-model-engine
Sep 20, 2026
Merged

PyYoshi merged 1 commit into
devfrom
v3/experimental-model-engine

Conversation

@PyYoshi

@PyYoshi PyYoshi commented Sep 20, 2026

Copy link
Copy Markdown
Owner

概要

  • French cp1252 の1 slotのみを置換する実験用 static library と conformance target を追加。
  • 標準 target、ALL、install、公開モデルは変更しません。
  • 固定 training artifact / build provenance を照合する paired corpus 比較を追加。入力は4 KiB以下、processは10秒上限。
  • exact codec、decode-equivalent、language、候補内存在を分離し、日本語で再現手順を記載。

検証

  • 関連 unittest 94件成功。reference adapter一致、人工modelによる出力差、標準target不変、ALL/install分離を含む。
  • Ruff E/F、git diff --check 成功。
  • Paris validation 16対を2回実行しreportがバイト一致。

評価上の制約

cp1252 decode-equivalent は legacy 16/16、identity 5/16、filtered 7/16。生成モデルは採用せず実験用に限定します。legacy training overlap は不明。P01の大入力停止調査や追加fuzzは再開しません。

関連: PyYoshi/cChardet#123

@PyYoshi
PyYoshi marked this pull request as ready for review September 20, 2026 23:11
@PyYoshi
PyYoshi merged commit e03915e into dev Sep 20, 2026
11 checks passed
@PyYoshi
PyYoshi deleted the v3/experimental-model-engine branch September 20, 2026 23:11
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant