我已经安装了 Microsoft Integration Runtime 配置管理器当我将数据从本地 SQL Server 迁移到 Azure Data Lake 以及当我尝试将其用于另一个 Azure 数据工厂时,我找不到为数据添加新密钥的空间工厂。怎么做。提前致谢
azure azure-data-lake azure-data-factory-2 azure-sql-data-warehouse
我正在尝试将 numpy 形状数组转换(80000,)为(80000,55)
我有如下数据
[[1212,121,121],[12,122,111]]
转换此列表列表后,我得到了形状,(2,)但我想要形状像(2,3)如何做。
我正在尝试使用开源框架进行 ETL,我听说过两种东西 Apache Beam 和 Apache Airflow,其中一种最适合整个 ETL 或 ELT,例如 Talend、Azure 数据工厂等,事实上,我尝试使用云数据仓库(redshift、azure 数据仓库、雪花等)完成所有工作,哪一个适合此类工作,如果我对这两个框架进行一些比较,那就太好了。提前致谢。
airflow ×1
apache-beam ×1
apache-spark ×1
azure ×1
etl ×1
numpy ×1
pandas ×1
pyspark ×1
python ×1
python-3.x ×1