标签: hpcc

我想使用这个很棒的包：https://github.com/hpcc-systems/hpcc-js-wasm 它将 Web assembly (graphizlib.wasm) 与要使用的 Javascript 函数捆绑在一起。我将其添加为 package.json 中的依赖项。

  "dependencies": {
    "@hpcc-js/wasm": "^1.13.0"
  },

当我现在运行 Vite 开发服务器时，很容易找到 Javascript 代码。但 wasm 不可用。特别是，我收到此错误消息：

Failed to load resource: the server responded with a status of 404 (Not Found) http://localhost:3000/graphvizlib.wasm

我不确定如何使嵌入式 Web 程序集可用于我的网站。它位于依赖包中。请参阅 #1，在 node_modules (#2) 中，在 @hpcc-js/wasm/dist 文件夹中 (#3)

我也用 Vite 的构建配置尝试过 - 没有访问权限。

最近我从一台服务器传输一组数据到hpcc（高性能计算）命令是这样的：

scp /folder1/*.fastq.gz xxx@hpcc:/home/
scp /folder2/*.fastq.gz xxx@hpcc:/home/
scp /folder3/*.fastq.gz xxx@hpcc:/home/

我打开多个终端同时传输数据。我总共有大约 50 个这样的 fastq.gz 文件，每个文件大约 10GB。我只是想知道数据（特别是这么大的数据）在以上述方式传输时是否有可能被扭曲？

因为服务器上的数据是完好的；而一些数据被复制到hpcc后被扭曲了。

谢谢谢谢

我正在运行一个程序，该程序采用具有相同标志的可变数量的参数。例如

myprogram -args 'var1' 'var2' 'var3' 'var4'
myprogram -args 'var5' 'var6'

我必须使用 test.txt 文件中提供的不同参数集多次启动该程序。

arg1 arg2 arg3
arg5 arg6
arg7
arg8 arg9 arg9 arg10

该程序必须在其自己的脚本内才能请求 HPCC 中的资源。

while read p; do
  launchmyprogram.sh "$p"
done < test.txt

我知道我可以使用var1=$1launchmyprogram.sh 中的语法来收集和分配变量，但这无法处理可变数量的参数，并且我必须为每一行创建一个脚本。有没有办法在 bash 中创建一个接受可变数量参数的脚本？

我需要在一秒钟内将 PB 级文本数据加载到存储 (RAM/SSD) 中。

下面是解决上述问题的一些问题。

1) 实际上/理论上是否可以在一秒钟内加载 PB 级的数据？2) 为了实现亚秒级快速加载 PB 级数据，最佳设计方法是什么。3）有可用的基准方法吗？

我可以使用任何类型的技术来实现，例如 Hadoop、spark、HPCC 等......