Custom AI

自動評価:

本コンテンツはPhrase Language AIの機械翻訳により、英語から翻訳されています。

すべてのMTモデルに対して自動評価が提供されます。モデル名またはellipses.pngをMore列からクリックすると、対応するモデルが表示されます。

Phrase Custom AIは、カスタムNextMTモデルの品質をより深く理解するために設計された、豊富なデータと高度な視覚的サポートを提供します:

  • 概要タブには、MTモデルに関する直感的な視覚化とメタデータを備えた評価結果の要約が表示されます。

    • Performance Comparisonテーブルでは、4つのMT quality metricsを用いて、汎用NextMTモデルとカスタムNextMTモデルのパフォーマンスを比較します。テーブルには2つの主要なセクションがあります:

      • 基準パフォーマンス

        TMを活用しないPhrase NextMTおよびカスタムNextMTモデルの自動MT品質スコアを表示します。

      • RAGパフォーマンス

        TMのファジーマッチを活用してMT出力を適応させた場合の自動MT品質スコアを表示します。

      Best Engine列は、各メトリックにおいて最高のパフォーマンスを示すモデルを強調表示します。

    • Model metadataパネルには、評価されたカスタムNextMTモデルに関する重要な情報が提供されます。

  • Visualizationsタブでは、ドーナツチャートを用いてMT評価結果がグラフィカルに表示され、評価された翻訳セグメントが品質カテゴリごとに内訳されています。

    • 上部のドロップダウンメニューから目的のMT品質メトリックを選択し、カスタムNextMTモデルと汎用Phrase NextMTモデルを比較します。

    • ドーナツチャートの各カテゴリにカーソルを合わせると、そのカテゴリの割合と影響を受けるセグメント数を確認できます。

  • Evaluation sampleタブには、評価セットから抽出されたセグメントサンプルのプレビューが表示され、関連するベースラインおよびRAGパフォーマンススコアとともにソースセグメントの一覧が示されます。

    セグメントを選択すると、右側のパネルに以下が表示されます:

    • ベースラインおよびRAGパフォーマンスのセグメント固有のスコアと品質レベルインジケーター。

    • カスタムNextMTモデルと汎用NextMTモデルによって生成された翻訳出力と、データセットの参照翻訳との比較。Show differences in the engine outputを選択すると、参照翻訳との違いが強調表示されます。

この記事は役に立ちましたか?
★ ★ ★ ★ ★

Sorry about that! In what way was it not helpful?

The article didn’t address my problem.
I couldn’t understand the article.
The feature doesn’t do what I need.
Other reason.

Note that feedback is provided anonymously so we aren't able to reply to questions.
If you'd like to ask a question, submit a request to our Support team.
Thank you for your feedback.