Skip to content

生成Frenchモデルの固定ratio感度実験を追加 - #41

Merged
PyYoshi merged 2 commits into
devfrom
v3/model-ratio-experiment
Sep 20, 2026
Merged

PyYoshi merged 2 commits into
devfrom
v3/model-ratio-experiment

Conversation

@PyYoshi

@PyYoshi PyYoshi commented Sep 20, 2026

Copy link
Copy Markdown
Owner

概要

  • 実測前のcommit fa32d55で固定した4因子と採否基準に基づく非デフォルト実験。
  • 元training artifactを再検証し、tableとbyte orderを変えずratioだけの派生contractを作成。
  • 2 profile × 4因子 × tuning全16入力を評価。標準targetと因子1のbaseline完全一致を要求。
  • 全候補confidenceを検査し、clampや失敗入力の選別は行いません。

結果

両profileで0.90が事前基準の次段階候補。cp1252 exact/decode-equivalent 8/8、UTF-8とlanguageの悪化なし。0.80はconfidence範囲外により不採択。これはtuning上の選択結果で、標準採用・汎化精度の保証ではありません。全8条件を日本語で記録しました。

検証

  • 関連100 unittest成功(実験native targetの試験を含む)。Ruff、diff check成功。
  • 全条件を2回観測しreport全byte一致。
  • validation再予測、独立holdout開封、標準modelやengine共通係数変更は未実施。P01維持。

関連: PyYoshi/cChardet#123

@PyYoshi
PyYoshi marked this pull request as ready for review September 20, 2026 23:44
@PyYoshi
PyYoshi merged commit f046224 into dev Sep 20, 2026
11 checks passed
@PyYoshi
PyYoshi deleted the v3/model-ratio-experiment branch September 20, 2026 23:45
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant