djW*_*ann 6 python etl luigi
我正在尝试使用luigi编写一个etl管道.据我所知,luigi中的任务可以生成一个目标,可以是某种类型的文件存储或数据库.为了减少处理时间,我希望将输出作为内存列表.这可能吗？我是否必须创建自定义目标？
djW*_*ann 7
我发现我可以使用MockFile作为目标。一个很好的例子：
http://gouthamanbalaraman.com/blog/building-luigi-task-pipeline.html
归档时间：
9 年，6 月 前
查看次数：
1410 次
最近记录：