LVM 报告 I/O 错误,但磁盘报告没有问题。阿格

and*_*ewf 5 xen lvm diskmanagement errors debian-lenny

我已经开始看到 LVM 在某些逻辑卷上报告的错误(以及 Xen 在尝试在这些 LV 上创建虚拟机时)报告的错误。但是我已经在磁盘上运行了测试,并没有发现任何硬件问题。

我们在这里运行 XEN/Linux (Debian Lenny) 机器,运行由 LVM2 管理的单个 SATA 磁盘。它已经运行了一年多,唯一的主要变化是最近对内核的 apt-get 升级。

# uname -a
Linux hostname 2.6.26-2-xen-amd64 #1 SMP Thu Sep 16 16:32:15 UTC 2010 x86_64 GNU/Linux
Run Code Online (Sandbox Code Playgroud)

错误显示如下:

# vgck
/dev/dm-20: read failed after 0 of 4096 at 0: Input/output error
Run Code Online (Sandbox Code Playgroud)

然后,当我尝试启动使用该 LV 作为其 C 驱动器的 VM(它是 Windows 虚拟机)时,VM 拒绝启动,我在/var/log/xen/qemu-dm-*.log日志文件的末尾看到了这一点:

...
Register xen platform.
Done register platform.
raw_read(6:/dev/vgroup/newvm-cdrive, 0, 0x7fff02bca520, 512) [20971520] read failed -1 : 5 = Input/output error
I/O request not ready: 0, ptr: 0, port: 0, data: 0, count: 0, size: 0
raw_read(6:/dev/vgroup/newvm-cdrive, 0, 0x12dfff0, 512) [20971520] read failed -1 : 5 = Input/output error
Run Code Online (Sandbox Code Playgroud)

这首先发生在 2 个 VM 上,它们的磁盘基于第三个原始 VM 的快照。我 nuked 2 LVs 并重新创建它们(再次通过快照相同的原始 VM 的 LV),从那以后它们一直很好。

但是,今天我尝试创建一个新的 VM。我对相同的原始 VM 的 LV ( lvcreate -L500M --snapshot --name newvm-cdrive /dev/vgroup/original-cdrive) 进行了快照,并创建了新的 VM。它最初有效,但在关闭虚拟机一次后,它拒绝再次启动,并出现如上所示的错误。

我明显的第一个猜测是驱动器的物理问题,但 smartmon 没有报告任何内容:

# smartctl -t long /dev/sda
# [later]
# smartctl -l selftest /dev/sda
smartctl version 5.38 [x86_64-unknown-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF READ SMART DATA SECTION ===
SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Completed without error       00%         1         -
# 2  Short offline       Completed without error       00%         0         -
Run Code Online (Sandbox Code Playgroud)

此外,没有从badblocks.

我试过运行vgckpvck

# vgck vgroup -v
    Using volume group(s) on command line
    Finding volume group "vgroup"
  /dev/dm-20: read failed after 0 of 4096 at 0: Input/output error

# pvck /dev/sda2
  Found label on /dev/sda2, sector 1, type=LVM2 001
  Found text metadata area: offset=4096, size=192512
Run Code Online (Sandbox Code Playgroud)

在 Internet 上找到了一些对此错误消息的引用(“read failed after 0 of 4096 at...”),但似乎没有任何内容适用于我的情况。

有任何想法吗?

更新:根据要求,下面是 lvdisplay 和 ls -l 的输出。用完 COW 空间是合理的。我怎么讲?

# lvdisplay /dev/vgroup/newvm-cdrive
  /dev/dm-20: read failed after 0 of 4096 at 0: Input/output error
  --- Logical volume ---
  LV Name                /dev/vgroup/newvm-cdrive
  VG Name                vgroup
  LV UUID                jiarxt-q2NO-SyIf-5FrW-I9iq-mNEQ-iwS4EH
  LV Write Access        read/write
  LV snapshot status     INACTIVE destination for /dev/vgroup/original-cdrive
  LV Status              available
  # open                 0
  LV Size                10.00 GB
  Current LE             2560
  COW-table size         200.00 MB
  COW-table LE           50
  Snapshot chunk size    4.00 KB
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           254:20

# ls -l /dev/dm-20
brw-rw---- 1 root disk 254, 20 2010-10-11 15:02 /dev/dm-20
Run Code Online (Sandbox Code Playgroud)

这是 fdisk -l。

# fdisk -l /dev/sda

Disk /dev/sda: 160.0 GB, 160000000000 bytes
255 heads, 63 sectors/track, 19452 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Disk identifier: 0x00000080

   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          31      248976   83  Linux
/dev/sda2              32       19452   155999182+  8e  Linux LVM
Run Code Online (Sandbox Code Playgroud)

and*_*ewf 8

好的,我认为答案是逻辑卷的 COW 空间已满。

使用命令“lvs”(我刚刚发现),我看到...

# lvs
/dev/dm-20: read failed after 0 of 4096 at 0: Input/output error
LV             VG      Attr   LSize   Origin          Snap%  Move Log Copy%  Convert
[...other LVs...]
newvm-cdrive   mrburns Swi-I-   2.00G original-cdrive 100.00
[...other LVs...]
Run Code Online (Sandbox Code Playgroud)

“Attr”列开头的大写“S”表示“无效快照”。(小写的“s”表示(有效的)快照。)正如您所看到的,Snap% 是 100,即它使用了所有的 COW 空间。

令人讨厌的是,lvdisplay 它不提供此信息,也不会告诉您您的快照逻辑卷无​​效。(它只是说快照状态是“INACTIVE”,我认为它的意思是“当前未使用”。)而且该lvs命令并没有被广泛宣传。并且错误消息(“输入/输出错误”)不是很有帮助——事实上,没有日志消息或错误消息表明“快照已满”。(当空间开始填满时,LVM2 的更高版本会将消息写入 /var/log/messages,但 Debian Lenny 中的版本不会。嘘。)

使问题更加复杂的是,互联网上没有对此进行讨论(或者至少,我找不到)!

我也奇怪为什么COW快照不能仅仅通过增加更多的空间给LV(使用固定lvextend,但是,实际上,COW空间将不仅当你写快照目的地所需,而且当你写快照因此,一旦您的 COW 区域被填满,对源 LV 的任何写入都必须使快照 LV 无效,并且不容易恢复。