現在の Spark タスクのファイル名の文字列列を作成します。
構文
from pyspark.sql import functions as sf
sf.input_file_name()
返品ポリシー
pyspark.sql.Column: ファイル名。
例示
例 1: 入力ファイル名を取得する
import os
from pyspark.sql import functions as sf
path = os.path.abspath(__file__)
df = spark.read.text(path)
df.select(sf.input_file_name()).first()
Row(input_file_name()='file:/...')