Skip to main content
 首页 » 编程设计

Python UDF之导入/读取外部文件

2025年04月02日18haluo1

我想将其他 python/csv 文件导入到我的 python udf 中以执行一些操作。
喜欢,
将表数据(作为流逐行流入)与外部 .csv 行进行比较。
当我尝试读取 .csv 文件的数据时,出现错误

IOError: File /home/abc/xyz/myfile.csv does not exist

虽然代码作为常规 python 脚本(不像 udf)编写时运行良好

请您参考如下方法:

如果我没理解错的话。你可以试试 添加文件 [您的完整文件路径] 或者 添加 FILES [您的目录路径]。

因为在引用集群上的任何内容之前,您必须将其添加到分发缓存中,以便那里的代码可以访问该部分。 你可以看看它。 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Cli