如何将 HuggingFace 数据集写入磁盘?
我使用 JSONL 文件制作了自己的 HuggingFace 数据集:
数据集({ 特征: ['id', 'text'], num_rows: 18 })
我想将数据集保存到磁盘。
有没有更好的方法来做到这一点?或者,是使用 joblib 或 pickle 等通用库的唯一选择吗?
我不久前参加了有关 Kubernetes 的课程。我使用 Ubuntu 20.04.3 LTS 笔记本电脑来设置用于教育目的的环境。
我使用 microk8s 作为我的 Kubernetes 发行版。
我最近注意到有以下进程使用了大约 1/2 GB 的内存:
kube-apiserver
kube-controller
kubelet
Run Code Online (Sandbox Code Playgroud)
它们都以 root 身份运行。
这是他们的具体版本信息。
Client Version: version.Info{Major:"1", Minor:"20+", GitVersion:"v1.20.13-35+005120472f128e", GitCommit:"005120472f128ee37994ebbe34eb340d4a580a95", GitTreeState:"clean", BuildDate:"2021-11-18T08:25:58Z", GoVersion:"go1.15.15", Compiler:"gc", Platform:"linux/amd64"}
Server Version: version.Info{Major:"1", Minor:"20+", GitVersion:"v1.20.13-35+005120472f128e", GitCommit:"005120472f128ee37994ebbe34eb340d4a580a95", GitTreeState:"clean", BuildDate:"2021-11-18T08:26:57Z", GoVersion:"go1.15.15", Compiler:"gc", Platform:"linux/amd64"}
Run Code Online (Sandbox Code Playgroud)
我尝试使用以下方法终止进程:
sudo kill -9 {pid}
Run Code Online (Sandbox Code Playgroud)
然而,进程又回来了!
如何杀死 microk8s kubernetes 集群?我不关心保留任何数据,也不希望集群在启动时重新启动。