Compartir vía


TableValuedFunction.inline_outer

Explota una matriz de estructuras en una tabla. A diferencia de inline, si la matriz es null o está vacía, se genera null para cada columna anidada.

Syntax

spark.tvf.inline_outer(input)

Parámetros

Parámetro Tipo Description
input pyspark.sql.Column Columna de entrada de valores que se va a explotar.

Devoluciones

pyspark.sql.DataFrame: DataFrame con filas struct explotadas o valores NULL si la matriz está vacía o nula.

Examples

import pyspark.sql.functions as sf
spark.tvf.inline_outer(sf.array(
    sf.named_struct(sf.lit("a"), sf.lit(1), sf.lit("b"), sf.lit(2)),
    sf.named_struct(sf.lit("a"), sf.lit(3), sf.lit("b"), sf.lit(4))
)).show()
+---+---+
|  a|  b|
+---+---+
|  1|  2|
|  3|  4|
+---+---+
import pyspark.sql.functions as sf
spark.tvf.inline_outer(sf.array().astype("array<struct<a:int,b:int>>")).show()
+----+----+
|   a|   b|
+----+----+
|NULL|NULL|
+----+----+