在Pig中删除单列

Question

我正在通过大约20个ID的列表过滤表.现在我的代码看起来像这样:

A = LOAD 'ids.txt' USING PigStorage();
B = LOAD 'massive_table' USING PigStorage();
C = JOIN A BY $0, B BY $0;
D = FOREACH C GENERATE $1, $2, $3, $4, ...
STORE D INTO 'foo' USING PigStorage();

我不喜欢的是D行,我必须通过显式声明我想要的每一个其他列来重新生成一个新表来摆脱加入列(有时这是很多列).我想知道是否有相当于:

FILTER B BY $0 IN (A)

要么:

DROP $0 FROM C

Answer 1

也许这个问题类似于:

• 如何使用猪拉丁"更新"列

这引用了一个JIRA票证:https://issues.apache.org/jira/browse/PIG-1693哪些示例如何使用..表示法来表示所有剩余的字段:

D = FOREACH C GENERATE $1 .. ;

假设您有0.9.0+ PIG