可以在udf中使用pyspark.sql.function吗？

可以在udf中使用pyspark.sql.function吗？

来自

pyspark.sql.functions

的函数是JVM函数的包装器，旨在在上运行

pyspark.sql.Column

。您不能使用这些：

• 转换本地Python对象。他们乘飞机

  Column

  返回

  Column

  。
• 无法在工作者上使用它们，因为没有上下文可以对其进行评估。