小编Big*_*ief的帖子

Hadoop HDFS:从命令行设置文件块大小?

当我将文件加载到 HDFS 时,我需要将文件的块大小设置为低于集群块大小的某个值。例如,如果 HDFS 使用 64mb 块,我可能希望将一个大文件复制到 32mb 块中。

我之前使用org.apache.hadoop.fs.FileSystem.create()函数在 Hadoop 工作负载中完成了此操作,但是有没有办法从命令行执行此操作?

hadoop hdfs block

6
推荐指数
1
解决办法
1万
查看次数

KVM + cgroups:Dom0 进程最佳实践?

我正在从 Xen 过渡到 KVM,并将使用 Fedora 14。我计划使用 cgroups 为 VM 分配优先级。

我的问题如下:如果我将虚拟机放在不同的 cgroup 中,我是否也应该将所有其他 Domain-0(物理主机)进程放在单个 cgroup 中,然后分配较低的优先级?Xen 的类比是当 Dom0“VM”被调度时,所有的 Dom0 进程都是批量调度的,所以通过将它们全部放在同一个 cgroup 中,我将模拟这种行为。但是,由于 KVM 没有与 Xen 相同的 Dom0 IO 依赖性,我可以为 Dom0 cgroup 分配低优先级。

换句话说,所有后台 Dom0 进程(如 ntpd、yum 等)是否会与通过 cgroup 显式控制资源分配的 VM 竞争,从而导致性能下降?这里的最佳做法是什么?

process-priority cgroup kvm-virtualization

5
推荐指数
1
解决办法
813
查看次数