Du bist nicht angemeldet.

#1 05.06.2020 10:01:43

J4son
Mitglied

[gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Hallo zusammen,

ich habe ein großes verschlüsseltes Soft-Raid(6) mit 16 HDD's welches ungefähr alle 2 Tage Tage folgende Fehlermeldung auswirft:

[335482.512063] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.512065] XFS (dm-1): Unmount and run xfs_repair
[335482.512067] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.512070] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.512071] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.512072] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.512073] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.512074] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.512075] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.512076] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.512077] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.512206] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.513228] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.513230] XFS (dm-1): Unmount and run xfs_repair
[335482.513232] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.513235] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.513237] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.513238] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.513239] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.513240] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.513241] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.513242] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.513244] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.513284] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.514021] XFS (dm-1): Metadata corruption detected at xfs_dir3_data_reada_verify+0x3c/0x70 [xfs], xfs_dir3_data_reada block 0x733d09fe0 
[335482.514022] XFS (dm-1): Unmount and run xfs_repair
[335482.514023] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.514024] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.514025] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.514026] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.514027] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.514028] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.514029] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.514030] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.514031] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.514707] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.514708] XFS (dm-1): Unmount and run xfs_repair
[335482.514709] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.514710] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.514711] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.514712] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.514713] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.514715] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.514716] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.514717] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.514718] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.514759] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.515468] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.515469] XFS (dm-1): Unmount and run xfs_repair
[335482.515470] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.515472] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.515473] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.515473] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.515474] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.515475] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.515476] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.515477] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.515478] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.515517] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.516523] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.516524] XFS (dm-1): Unmount and run xfs_repair
[335482.516525] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.516526] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.516527] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.516528] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.516529] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.516530] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.516531] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.516532] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.516533] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.516572] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.519628] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.519630] XFS (dm-1): Unmount and run xfs_repair
[335482.519631] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.519632] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.519634] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.519634] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.519635] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.519636] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.519637] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.519638] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.519639] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.519681] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.520401] XFS (dm-1): Metadata corruption detected at xfs_dir3_data_reada_verify+0x3c/0x70 [xfs], xfs_dir3_data_reada block 0x733d09fe0 
[335482.520402] XFS (dm-1): Unmount and run xfs_repair
[335482.520403] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.520404] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.520406] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.520406] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.520408] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.520409] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.520409] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.520410] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.520411] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.521106] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.521107] XFS (dm-1): Unmount and run xfs_repair
[335482.521108] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.521109] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.521110] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.521111] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.521112] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.521113] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.521114] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.521115] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.521116] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.521155] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.521418] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.521419] XFS (dm-1): Unmount and run xfs_repair
[335482.521420] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.521421] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.521422] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.521423] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.521424] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.521425] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.521426] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.521427] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.521428] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.521467] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.522294] XFS (dm-1): Metadata corruption detected at xfs_dir3_data_reada_verify+0x3c/0x70 [xfs], xfs_dir3_data_reada block 0x733d09fe0 
[335482.522295] XFS (dm-1): Unmount and run xfs_repair
[335482.522296] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.522297] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.522298] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.522299] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.522300] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.522301] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.522302] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.522303] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.522304] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.522548] XFS (dm-1): Metadata corruption detected at xfs_dir3_data_reada_verify+0x3c/0x70 [xfs], xfs_dir3_data_reada block 0x733d09fe0 
[335482.522549] XFS (dm-1): Unmount and run xfs_repair
[335482.522550] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.522551] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.522552] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.522553] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.522554] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.522555] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.522556] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.522557] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.522558] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.522785] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.522786] XFS (dm-1): Unmount and run xfs_repair
[335482.522787] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.522788] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.522789] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.522790] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.522791] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.522792] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.522793] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.522794] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.522794] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.522836] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[335482.551067] XFS (dm-1): Metadata corruption detected at xfs_dir3_data_reada_verify+0x3c/0x70 [xfs], xfs_dir3_data_reada block 0x733d09fe0 
[335482.551069] XFS (dm-1): Unmount and run xfs_repair
[335482.551070] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.551071] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.551072] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.551073] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.551074] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.551075] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.551076] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.551077] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.551078] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.551353] XFS (dm-1): Metadata corruption detected at xfs_dir3_block_verify+0x5c/0xb0 [xfs], xfs_dir3_block block 0x733d09fe0 
[335482.551354] XFS (dm-1): Unmount and run xfs_repair
[335482.551355] XFS (dm-1): First 128 bytes of corrupted metadata buffer:
[335482.551356] 00000000: ff 7f cd b5 2e bc e0 05 ed e8 7a e5 18 a2 86 d7  ..........z.....
[335482.551357] 00000010: ce 6a 4c 1b 2a 1e 14 aa 87 4f 7e 60 80 95 45 34  .jL.*....O~`..E4
[335482.551358] 00000020: e9 9b 51 55 aa d9 4e a9 ad d6 a1 45 37 5a a5 c7  ..QU..N....E7Z..
[335482.551359] 00000030: 51 ee c1 73 72 00 1c 71 2d 2f 19 ad 20 93 e8 61  Q..sr..q-/.. ..a
[335482.551360] 00000040: 2f 83 d7 06 e4 7a 2d 02 fb b0 77 36 96 87 14 5c  /....z-...w6...\
[335482.551361] 00000050: 91 85 2c fa 7a 18 1a e9 27 62 14 b7 d2 f0 51 7b  ..,.z...'b....Q{
[335482.551362] 00000060: 0b 5c d2 b4 43 3b 7d 37 33 44 0f dc 3c 1a b7 40  .\..C;}73D..<..@
[335482.551363] 00000070: 3a 0e 68 a2 69 29 6b e2 eb 01 cd 9f 8d b0 3e 9f  :.h.i)k.......>.
[335482.551405] XFS (dm-1): metadata I/O error in "xfs_da_read_buf+0xec/0x140 [xfs]" at daddr 0x733d09fe0 len 8 error 117
[340881.066209] XFS (dm-1): Unmounting Filesystem

Nachdem ich das die Partion ausgehangen und xfs_repair drüber laufen lasse geht es dann wieder für ca. 2 Tage und dann ist wieder das gleiche Problem.

Das Raid sieht für mich an sich ok aus:

Personalities : [raid6] [raid5] [raid4] 
md0 : active raid6 sdp1[2] sdo1[1] sdg1[12] sdn1[0] sdq1[3] sdc1[8] sde1[10] sdf1[11] sdd1[16] sdl1[4] sdm1[17] sdb1[7] sdj1[15] sdi1[13] sda1[6] sdh1[14]
      109394388992 blocks super 1.2 level 6, 512k chunk, algorithm 2 [16/16] [UUUUUUUUUUUUUUUU]
      bitmap: 0/59 pages [0KB], 65536KB chunk

Ok ich gebe zu ich habe schon länger keinen Raid Check mehr drüber laufen lassen. Aber normalerweise sollte doch auch etwas bezüglich der HDD's in den logs auftauchen oder?

Hat ggf. noch jemand einen Ansatzpung was ich noch prüfen könnte? Vielen Dank im voraus!

Edit: Das System ist stets auf dem neusten Stand und Kernel ist der 5.6.15, das Problem trat das erste mal bei 5.6.13 auf.

Beitrag geändert von J4son (13.06.2020 15:21:46)

Offline

#2 05.06.2020 10:49:20

frostschutz
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

smartctl -a und mdadm --examine-badblocks ist sauber für alle? Steht im dmesg noch was anderes?

Benutzt du suspend to disk / ram?

Offline

#3 05.06.2020 11:18:38

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Hi Forstschutz:

Bad-blocks list is empty in /dev/sda1
Bad-blocks list is empty in /dev/sdb1
Bad-blocks list is empty in /dev/sdc1
Bad-blocks list is empty in /dev/sdd1
Bad-blocks list is empty in /dev/sde1
Bad-blocks list is empty in /dev/sdf1
Bad-blocks list is empty in /dev/sdg1
Bad-blocks list is empty in /dev/sdh1
Bad-blocks list is empty in /dev/sdi1
Bad-blocks list is empty in /dev/sdj1
Bad-blocks list is empty in /dev/sdl1
Bad-blocks list is empty in /dev/sdm1
Bad-blocks list is empty in /dev/sdn1
Bad-blocks list is empty in /dev/sdo1
Bad-blocks list is empty in /dev/sdp1
Bad-blocks list is empty in /dev/sdq1

Bei smartctl bei jeder HDD:

SMART Error Log Version: 1
No Errors Logged

Und wegen suspend to RAM, das habe ich meines Wissnes nach nicht aktiviert,

Offline

#4 05.06.2020 11:22:25

frostschutz
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Mal einen memtest laufen lassen? Übertaktest du irgendwas?

Wenn du nicht gerade einen Prozess hast der absichtlich Daten beschädigt (dd aufs falsche Gerät udgl.) bleibt am Ende sonst nur noch ein Kernel-Bug übrig. Da könntest du mal auf den LTS Kernel wechseln... und wenn es reproduzierbar nur beim neuen Kernel passiert, mal in die Mailinglisten blinzeln ob du alleine damit bist.

Beitrag geändert von frostschutz (05.06.2020 11:23:23)

Offline

#5 05.06.2020 11:32:16

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Das ist ein Storageserver bei dem nichts übertaktet ist. Ich denke ich werde wirklich auf den LTS Kernel switchen und damit testen.

Mal sehen ob es dann Problemlos läuft. Danke dir auf jeden Fall schon mal!

Offline

#6 05.06.2020 14:03:13

GerBra
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Zu den Fehlermeldungen:
Hast du das schon mal berücksichtigt?
https://wiki.archlinux.org/index.php/Xfs
V.a. die Punkte 2 bzw. 2.2 und 3

Die Meldung könnte nun durchaus mit eben jenem neuen Metadata-Checksumming zu tun haben. Bei XFS habe ich keinerlei Erfahrung, wie stabil das o.a. Scrubbing ist.

Ursache kann eben durchaus ein "harter Reset" sein, völlig unerheblich ob das Dateisystem dann ein Single oder ein Raid ist. Die Redundanz eines entsprechenden Raidlevels bietet halt ggf. die Möglichkeit zur Korrektur.

Zu smartctl: machst du bei deinen HDs regelmäßig smartctl-Checks? Und hast du für jede Disk auch mal die Smart-Werte kontrolliert (v.a. für Dinge wie Read_Errorrate, Pending und Uncorrectable Sectors).
https://wiki.archlinux.org/index.php/S.M.A.R.T.
Meiner Erfahrung nach rührt ein großer Teil von Dateisystemfehlern von der Hardware her.

Ebenso zu beachten: Es wird/ist wieder wärmer. Also machen sich Probleme wieder verstärkt bemerkbar, die auf unzureichende Kühlung (schlechte, verdreckte Ventilatoren, Wollmäuse,...) zurückzuführen sind.

Offline

#7 05.06.2020 14:38:05

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Ok auf den smart test hätte ich wirklich auch selbst kommen können *shame on me*

Es scheint wirklich dass der Fehler da bei einer Festplatte im RAID liegt:

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed: read failure       90%     42781         17480

Die werd ich dann wohl jetzt ersetzen...

Offline

#8 05.06.2020 14:45:05

frostschutz
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Wobei das Dateisystem niemals ordentlich gemeldete Lesefehler einer Festplatte sehen sollte, da diese Fehlstellen ja vom RAID dann von den anderen Platten gelesen werden.

Dazu müsste die Festplatte schon stillschweigend ohne Fehlermeldung einfach so falsche Daten liefern. Das sind dann Festplatten die eben gerade kein "read failure" vermelden...

Oder das RAID war dann eben nicht synchron aber das bekommt man auch nur mit Gewalt hin (assemble force, assume clean etc.).

Offline

#9 05.06.2020 14:48:19

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Also am RAID wurde nichts geändert. Außer dass in den vergangenen Jahren zwei oder drei Platten gecrashed sind, welche dann ersetzt wurden.

Also denkst du das kommt nicht davon?

Offline

#10 05.06.2020 14:55:09

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Bzw. lese ich das richtig dass der Lesefehler sogar in einem Bereich liegt in dem keine Partition ist?

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed: read failure       90%     42781         17480
Gerä?t      Anfang        Ende    Sektoren Grö?ß?e Typ
/dev/sdf1   20480 15628052479 15628032000  7,3T Linux-Dateisystem

Offline

#11 05.06.2020 15:50:13

frostschutz
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Natürlich solltest du deine Festplatten regelmäßig mit SMART überprüfen und betroffene Platten dann auch austauschen.

Aber das Dateisystem sollte davon idealerweise nichts merken (es sei denn du verlierst drei Platten von deinem RAID 6). Also wenn die defekte Platte Schuld ist dann hat die noch irgendwie anderweitig Mist gebaut, also falsche Daten zurückgeliefert (darf nie passieren, müssen als Lesefehler gemeldet werden) oder aber Daten nicht geschrieben und dann eben alte Daten zurück. Es ist halt ziemlich blöd wenn man sich darauf nicht verlassen kann... ein RAID bei dem die Daten einfach so kaputt gehen ist ziemlich nutzlos.

Du kannst noch mal deine Logs durchschauen ob denn irgendwann nicht doch ein I/O Error dabei war oder sonst ein Problem mit dem mdraid.

Neben SMART-Checks auch Memtest machen. Und mal beim Netzteil schauen o die Spannungen stabil sind bzw. ob das geeignet ist für die Plattenanzahl. Und falls du Strom-Y-Adapter benutzt schauen daß die alle sauber sind.

Beitrag geändert von frostschutz (05.06.2020 15:52:08)

Offline

#12 05.06.2020 19:49:33

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Danke für den Tip, Ich werde morgen auf jeden Fall den memcheck durch laufen lassen.

Die Stromkabel bzw. SATA-Kabel zu prüfen wird etwas schwer werden da der Server in einem Rechenzentrum steht.

Offline

#13 13.06.2020 15:21:26

J4son
Mitglied

Re: [gelöst]"XFS (dm-1): Metadata corruption" alle 2 Tage

Also so wie es für mich aussieht liegt es wirklich am Kernel 5.6.x,  damit hatte ich alle 2 Tage das Problem mit der "Metadata corruption". Ich habe das ganze jetzt mit dem LTS-Kernel (5.4.44-1-lts). Damit ist jetzt bei einer Uptime von 8 Tagen nichts mehr passiert.

Ich lasse das ganze jetzt nochmal 1 Woche weiterlaufen und dann teste ich das ganze nochmal mit der Kernel Version 5.7.x. Falls es dort wieder auftritt werde ich deswegen einen Bugreport schreiben. Der Tag passt zwar nicht so ganz, aber ich setze das ganze jetzt auf "gelöst".

Danke trotzdem für eure Hilfe!

Offline

Schnellantwort auf dieses Thema

Schreibe deinen Beitrag und versende ihn
Deine Antwort

Fußzeile des Forums