如何使用多个分隔符将文件加载到猪？

Question

我有以下文件tax_cal我想在猪加载：

101,5 | 2; 3 | 2

102,3 | 1; 4.5 | 2; 4 | 1

103,2 | 1; 5 | 2; 5.6 | 3

输出：

101,5 | 2,3 | 2

102,3 | 1,4.5 | 2,4 | 1

103,2 | 1,5 | 2,5.6 | 3

此外，我将这个输出文件传递给python UDF来计算总价格。

我该如何做到这一点？

Answer 1

所以猪的基本加载命令如下，但我不确定你的文件样本数据类型。试着看下面的内容，并检查是否可以按照你需要的方式修改它。

A = LOAD '(your_file_name)' USING PigStorage(',') AS (bill_number:INT, tax:chararray);