RTX 4070 12GB · 翻訳比較

PLaMo 3 Translate × Gemma 4 QAT + MTP · 4096 tokens · 英日 / 日英 · 2026-11-05

各問の正確性スコア

各問10点:意味6・情報の完全性3・固有表現等1。最終訳なしは0点。CodexによるAI参考採点で、文体だけでは減点しません。数字を押すと、その問とモデルの訳文を表示します。

P=PLaMo、E2/E4/12=Gemma QAT。無=思考なし、有=思考あり。部分訳は訳出範囲を反映。小差は採点者や基準で逆転し得ます。

通常12問

問題P0.8P2P8E2無E2有E4無E4有12無12有
EN-S1
EN-S2
JA-S1
JA-S2
EN-M1
JA-M1
EN-M2
JA-M2
EN-L1
JA-L1
EN-L2
JA-L2
合計 /120109.5114.0116.0106.5113.0113.0112.5114.097.5

追加長文2問

問題P0.8P2P8E2無E2有E4無E4有12無12有
EN-XL
JA-XL
合計 /2015.517.517.513.513.715.516.517.51.3

100点換算(通常12問)

条件全問訳出ありのみ全14問・参考
PLaMo 8B96.796.7 (12問)95.4
PLaMo 2B95.095.0 (12問)93.9
Gemma 12B 思考なし95.095.0 (12問)93.9
Gemma E2B 思考あり94.294.2 (12問)90.5
Gemma E4B 思考なし94.294.2 (12問)91.8
Gemma E4B 思考あり93.893.8 (12問)92.1
PLaMo 0.8B91.391.3 (12問)89.3
Gemma E2B 思考なし88.888.8 (12問)85.7
Gemma 12B 思考あり81.397.5 (10問)70.6

100点換算は得点の換算値です。訳出ありのみの列は最終訳がなかった問題を除いています。詳細な採点基準・減点理由はaccuracy-scores.mdとJSONに保存。

自作原文12本を各3回。各原文の中央値を長さ別に平均。思考ありは思考時間を含みます。ロード・ウォームアップは除外。品質の注記はCodexによる原文照合で、人間独立採点ではありません。

追加長文・容量試験

英語約978語/日本語約2400字。4096トークン、各1回。失敗の秒数は停止までの時間です。

条件英→日 / 秒・状態日→英 / 秒・状態
PLaMo 0.8B2.50 / 完走2.25 / 完走
PLaMo 2B5.98 / 完走5.44 / 完走
PLaMo 8B14.39 / 完走13.24 / 完走
Gemma E2B / 思考なし6.85 / 完走5.18 / 完走
Gemma E2B / 思考あり8.81 / 完走8.53 / 途中で上限
Gemma E4B / 思考なし9.43 / 完走6.73 / 完走
Gemma E4B / 思考あり11.87 / 完走10.63 / 完走
Gemma 12B / 思考なし29.60 / 完走21.56 / 完走
Gemma 12B / 思考あり48.93 / 訳なし・上限44.91 / 途中で上限

原文と訳文を比較

原文を表示

訳文は初回測定。各回の時間はrawデータに保存しています。英語長文486/491語、日本語長文1250/1176字。この長さを超える文書への一般化には追加測定が必要です。