【RoundaChat】バッチシートに「速く安く採点する」を追加しました。迷った行だけを AI モデルが採点し直し、採点の費用と時間を減らせます

RoundaChat のバッチシートの採点の列に、スイッチ「速く安く採点する」を追加しました。オンにすると、Gemini Decision が先に全セルを判定し、迷った行だけを選んだ AI モデルが採点し直します。

確信度が高い行は Gemini Decision の判定で点が確定するので、すべてのセルを AI モデルで採点するより、採点の費用と時間を減らせます。採点し直した行には点と理由が入り、あとから絞り込めるので、AI が迷った行から人が確かめられます。

採点の列で、スイッチをオンにする

  • 採点の列の設定に「速く安く採点する」のスイッチがあります。オンにしても、採点基準と採点のモデルはそのまま使えます
  • オンにすると、モデルの欄は「採点し直すモデル」になります。Gemini Decision が迷った行だけを、ここで選んだモデルが採点し直します
  • 実行前の見込みの費用は、採点し直す行の数によって変わるため、「全部確定した場合」から「全部採点し直した場合」までの幅で表示されます
  • 採点基準の見出しの右の ⓘ から「採点基準の書き方」を開けます。何を満たせば何点かを具体的に書くほど、Gemini Decision で確定する行が増えます

確定した行と、採点し直した行を見分ける

  • Gemini Decision の判定で確定した行には、点と「Decision · 確信度」が表示されます。確定した行には理由は付かず、点だけが残ります
  • 確信度が低い行と、点が 2 点以下の行は、選んだモデルが点と理由つきで採点し直します。グリッドには「採点し直し」と表示されます
  • 採点し直した行のセルを開くと、採点し直した理由と、Gemini Decision が付けた点と確信度を確かめられます
  • CSV(フラット)のエクスポートには、スイッチをオンにした採点の列ごとに「確定したか・採点し直したか」と確信度の列が加わります

採点し直した行から、人が確かめる

  • 結果タブには、採点し直したセルの数と、採点の費用が表示されます。「採点し直した行を見る」から、その行だけに絞り込めます
  • 人評価でも「採点し直し」で絞り込めるので、AI が迷った行から順に人が読んで判断できます
  • デモ動画では、8 件の問い合わせに 3 つのモデルが返信文を書き、応対ルールに沿うかを Claude Sonnet 5.5 が 5 点満点で採点しました。この例では、スイッチをオンにすると採点し直しは 24 セル中 5 セルで、完了までの時間は 39.8 秒から 24.0 秒に、採点の費用は $0.157 から $0.040 になりました
  • どれだけ減るかは、データと採点基準によって変わります。迷う行が多いデータでは、採点し直す行が増えます

ご利用にあたって

  • オンにした採点の列では、採点し直すモデルが OpenAI や Anthropic のモデルでも、採点の指示と回答が Google の Gemini Decision に送られます
  • Gemini Decision を使える Google のキーが必要です。使えないときはスイッチを押せず、「Google のキーが必要です」と表示されます
  • 1〜5 点で採点する列で、出力の形が score と reason の列だけで使えます。ほかの項目を出力に足した列では、「出力の形が score と reason のときだけ使えます」と表示されます
  • Gemini Decision を一時的に使えないときも実行は止まらず、その行は選んだモデルが採点し直します

デモ動画

ニュース一覧へ