Jev のような判定モデルを SQL から呼べる ai_decide を日本語で試した

概要

Databricksの新機能 `ai_decide` 関数を用いて、日本語テキストの分類やスコアリングの精度、挙動の安定性を検証した技術記事。

詳細内容

DatabricksのAI Functionsに追加された `ai_decide`（ベータ版）の検証レポートです。この関数はLLMによるテキスト生成ではなく、与えられたテキストに対して構造化された判定（分類・確率・スコア）を返します。記事では日本語レビューの感情分析やポリシー遵守判定を例に、英語・日本語プロンプトによる結果の差異や、実行ごとの非決定的な挙動（結果の揺れ）を詳しく調査しています。特に「confidence」が正解率ではなく入力の裏付け度合いを指す点や、曖昧な入力に対して結果が変動しやすいという実用上の注意点が示唆に富んでいます。

元記事を読む他のサマリーを見る