Skip to content

[skip-build] 固定block試作のvalidationとnative性能結果を統合 - #173

Merged
PyYoshi merged 1 commit into
devfrom
v3/fixed-block-evaluation
Sep 21, 2026
Merged

PyYoshi merged 1 commit into
devfrom
v3/fixed-block-evaluation

Conversation

@PyYoshi

@PyYoshi PyYoshi commented Sep 21, 2026

Copy link
Copy Markdown
Owner

内容

native #47(2863aeaf420d766c05dfa8c44604c33f20fe9d91)を固定し、日本語の評価結果・残条件を更新する。

結果

  • 既存validation32入力・640観測で同じ内部blockなら外部chunk間の結果が一致。独立holdout未開封。
  • 64/1024はvalidationのtop-1正解件数を維持するが、候補/confidenceは旧wholeと異なる。
  • 2回のnative warm reuse計測で64-byteの5%超悪化が再現。1024は追加評価候補であり標準採用しない。

検証

native最終11 CI成功。ローカルpytest 362 passed / 15 skipped / 94 subtests。native PR headとmerge commitのtree差分なし。diff check成功。
[skip-build]でwheelのみ省略、通常CIは実行する。

既定engine/API/modelは変更しない。初回allocation、peak/live memory、request p95、全言語・公開契約は未確認。P01保留。#125/#126はcloseしない。

@PyYoshi
PyYoshi marked this pull request as ready for review September 21, 2026 16:31
@PyYoshi
PyYoshi merged commit 6fabbdd into dev Sep 21, 2026
18 checks passed
@PyYoshi
PyYoshi deleted the v3/fixed-block-evaluation branch September 21, 2026 16:31
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant