2025年9月25日: AI_COUNT_TOKENS AISQL 関数(プレビュー

Snowflake AISQLAI_COUNT_TOKENS 関数は、AISQL 大規模言語モデルとタスク固有の関数により処理される入力トークンの総数を計算することで、AI ワークロードのサイズを調整するのに役立ちます。これにより、モデルの制限に達する前にクエリのサイズを適切に調整し、入力トークンの使用状況に基づいてコストを正確に見積もることができます。

AI_COUNT_TOKENS には主に次のような機能があります。

  • トークンの計算: AI_COMPLETE、AI_EMBED、AI_CLASSIFY、AI_SENTIMENT を含む、AISQL 関数の入力トークンの合計数を計算します。また、AI_COUNT_TOKENS は、さまざまなモデルを使用できる関数について、特定のモデルを考慮します。

  • コスト最適化のインサイトを取得: 操作を実行する前に正確な入力トークン数を取得し、プロンプトや組織全体で使用する適切なサイズの AI 最適化を支援します。

  • 複雑な構成のサポート: AI ワークフローのトークン全体の影響を理解するため、カスタムラベルを使った分類、説明、タスク定義、例などの高度な機能の影響を分析します。

詳細については、 AI_COUNT_TOKENS をご参照ください。