次の方法で共有

PySpark でai.fix_grammarを使用する

ai.fix_grammar関数では、生成 AI を使用して、入力テキストのスペル、文法、句読点を 1 行のコードで修正します。

注

  • この記事では、PySpark での ai.fix_grammar の使用について説明します。 pandas で ai.fix_grammar を使用するには、 この記事を参照してください。
  • この概要記事では、他の AI 関数を参照してください。
  • AI 関数の構成をカスタマイズする方法について説明します。

概要

ai.fix_grammar関数は Spark DataFrames で使用できます。 既存の入力列の名前をパラメーターとして指定する必要があります。

この関数は、出力列に格納されている入力テキスト行ごとに修正されたテキストを含む新しい DataFrame を返します。

構文

df.ai.fix_grammar(input_col="input", output_col="corrections")

パラメーター

名前 Description
input_col
必須		 スペル、文法、句読点を修正するための入力テキスト値を持つ既存の列の名前を含む 文字列 。
output_col
オプション		 入力 テキスト の各行の修正されたテキストを格納する新しい列の名前を含む文字列。 このパラメーターを設定しない場合は、出力列に既定の名前が生成されます。
error_col
オプション		 入力テキストの各行の処理に起因する OpenAI エラーを格納する新しい列の名前を含む 文字列。 このパラメーターを設定しない場合は、エラー列の既定の名前が生成されます。 入力行にエラーがない場合、この列の値は null。

返品ポリシー

この関数は、入力列のテキスト行ごとに修正されたテキストを含む新しい列を含む Spark DataFrame を返します。 入力テキストが null場合、結果は null。

Example

# This code uses AI. Always review output for mistakes.

df = spark.createDataFrame([
        ("There are an error here.",),
        ("She and me go weigh back. We used to hang out every weeks.",),
        ("The big picture are right, but you're details is all wrong.",)
    ], ["text"])

results = df.ai.fix_grammar(input_col="text", output_col="corrections")
display(results)

このコード セルの例では、次の出力が提供されます。

関連コンテンツ

  • Last updated on