단순 mdadm RAID 1이 스페어를 활성화하지 않음

단순 mdadm RAID 1이 스페어를 활성화하지 않음

나는 창조했다2TB HDD 파티션 2개( /dev/sdb1그리고 /dev/sdc1)에서RAID 1Ubuntu 12.04 LTS Precise Pangolin을 /dev/md0사용하여 호출된 배열입니다 .mdadm

sudo mdadm --detail /dev/md0두 드라이브를 다음과 같이 표시하는 데 사용되는 명령활성 동기화.

그런 다음 테스트를 위해 실패하고 /dev/sdb1제거한 다음 명령을 사용하여 다시 추가했습니다.sudo mdadm /dev/md0 --add /dev/sdb1

watch cat /proc/mdstat어레이 재구축 진행률 표시줄이 표시되었지만 나는 그것을 보는 데 몇 시간을 소비하지 않을 것이므로 소프트웨어가 무엇을 하고 있는지 알고 있다고 가정했습니다.

진행률 표시줄이 더 이상 표시되지 않으면 cat /proc/mdstat다음이 표시됩니다.

md0 : active raid1 sdb1[2](S) sdc1[1]
      1953511288 blocks super 1.2 [2/1] [U_]

그리고 sudo mdadm --detail /dev/md0다음을 보여줍니다:

/dev/md0:
        Version : 1.2
  Creation Time : Sun May 27 11:26:05 2012
     Raid Level : raid1
     Array Size : 1953511288 (1863.01 GiB 2000.40 GB)
  Used Dev Size : 1953511288 (1863.01 GiB 2000.40 GB)
   Raid Devices : 2
  Total Devices : 2
    Persistence : Superblock is persistent

    Update Time : Mon May 28 11:16:49 2012
          State : clean, degraded 
 Active Devices : 1
Working Devices : 2
 Failed Devices : 0
  Spare Devices : 1

           Name : Deltique:0  (local to host Deltique)
           UUID : 49733c26:dd5f67b5:13741fb7:c568bd04
         Events : 32365

    Number   Major   Minor   RaidDevice State
       1       8       33        0      active sync   /dev/sdc1
       1       0        0        1      removed

       2       8       17        -      spare   /dev/sdb1

/dev/sdb1mdadm이 제거된 드라이브를 예비 드라이브로 자동 교체하지만 예상 위치인 RaidDevice 로 이동되지 않는다고 들었습니다 1.


업데이트(2012년 5월 30일):badblocks전체에 대한 파괴적인 읽기-쓰기 테스트에서는 예상 /dev/sdb한 대로 오류가 발생하지 않았습니다. 두 HDD 모두 새 제품입니다.

최근 편집에서 다음 명령으로 배열을 어셈블했습니다.

sudo mdadm --assemble --force --no-degraded /dev/md0 /dev/sdb1 /dev/sdc1

출력은 다음과 같습니다.

mdadm: /dev/md0 has been started with 1 drive (out of 2) and 1 rebuilding.

재구축은 정상적으로 진행되는 것처럼 보입니다.

md0 : active raid1 sdc1[1] sdb1[2]
      1953511288 blocks super 1.2 [2/1] [U_]
      [>....................]  recovery =  0.6% (13261504/1953511288) finish=2299.7min speed=14060K/sec

unused devices: <none>

지금은 이번 리빌드를 기다리고 있지만 /dev/sdb1이전에 리빌드를 5~6번 시도했던 것처럼 스페어가 될 것으로 기대하고 있습니다.


업데이트(2012년 5월 31일):응, 아직은 여유야. 윽!


업데이트(2012년 6월 1일):노력하고있어애드리안 켈리님이 제안한 명령:

sudo mdadm --assemble --update=resync /dev/md0 /dev/sdb1 /dev/sdc1

지금은 재건축을 기다리고 있습니다..


업데이트(2012년 6월 2일):아뇨, 아직 여유가 있어요...


업데이트(2012년 6월 4일): PB내가 간과했던 우려 사항을 제기했습니다.아마도 /dev/sdc1I/O 오류가 발생했을 것입니다.. 제대로 작동하는 것처럼 보였고 새 제품이었기 때문에 확인하지 않았지만 /dev/sdc1드라이브 끝 부분에 I/O 오류가 발생할 가능성이 높습니다.

나는 이 HDD를 세일해서 샀기 때문에 그 중 하나가 이미 고장나고 있다는 것은 놀라운 일이 아닙니다. 게다가 둘 다 다음을 지원하지 않습니다.똑똑한, 그래서 너무 싼 것도 당연합니다 ...

방금 구성한 데이터 복구 절차는 다음과 같습니다.

  1. sudo mdadm /dev/md0 --fail /dev/sdb1내가 꺼낼 수 있게 /dev/sdb1.
  2. sudo mdadm /dev/md0 --remove /dev/sdb1/dev/sdb1배열에서 제거합니다 .
  3. /dev/sdc1에 마운트되어 있습니다/media/DtkBk
  4. ext4로 포맷하세요 /dev/sdb1.
  5. /dev/sdb1에 마운트합니다 /media/DtkBkTemp.
  6. cd /media그 분야에서 일하려고요.
  7. sudo chown deltik DtkBkTempdeltik나 (사용자 이름 )에게 파티션에 대한 권한을 부여합니다 .
  8. 모든 파일 및 디렉터리를 복사합니다.sudo rsync -avzHXShP DtkBk/* DtkBkTemp

업데이트(2012년 6월 6일):다음 절차에 따라 badblocks의 파괴적인 쓰기 모드 테스트를 수행했습니다 ./dev/sdc

  1. sudo umount /media/DtkBk어레이를 해체할 수 있도록 합니다.
  2. sudo mdadm --stop /dev/md0배열을 중지합니다.
  3. sudo badblocks -w -p 1 /dev/sdc -s -v의심되는 하드 드라이브를 지우고 그 과정에서 I/O 오류를 확인합니다. I/O 오류가 있는 경우 이는 좋은 징조가 아닙니다. 환불받을 수 있었으면 좋겠습니다...

나는 이제 그것을 확인했다.두 HDD 모두 입출력 문제가 없습니다..

이 모든 조사에서 나의 두 가지 원래 질문은 여전히 ​​​​유효합니다.


내 질문은 다음과 같습니다

  1. 예비 드라이브가 활성 동기화되지 않는 이유는 무엇입니까?
  2. 예비 드라이브를 활성화하려면 어떻게 해야 합니까?

답변1

이렇게 하면 드라이브가 실제로 아무 작업도 수행하지 않고 어레이에 고정됩니다. 즉, 어레이의 구성원이지만 활성화되지는 않습니다. 기본적으로 이는 예비용으로 전환됩니다.

sudo mdadm /dev/md0 --add /dev/sdb1

예비 드라이브가 있는 경우 어레이의 활성 드라이브 수를 강제로 늘려 확장할 수 있습니다. 드라이브 3개와 2개될 것으로 예상됨활성화된 경우 활성 개수를 3으로 늘려야 합니다.

mdadm --grow /dev/md0 --raid-devices=3

RAID 어레이 드라이버는 드라이브가 "부족"하다는 것을 확인한 다음 예비 드라이브를 찾습니다. 스페어를 찾으면 이를 어레이에 활성 드라이브로 통합합니다. 예비 터미널을 열고 이 다소 조잡한 명령줄을 실행하여 재동기화 진행 상황을 계속 확인하세요. 반드시 한 줄로 입력하거나 줄 바꿈(\) 문자를 사용하고, 재구축이 완료되면 터미널에서 Ctrl-C를 입력하면 됩니다.

while true; do sleep 60; clear; sudo mdadm --detail /dev/md0; echo; cat /proc/mdstat; done

이제 어레이에는 동기화된 두 개의 활성 드라이브가 있지만 드라이브가 3개 없기 때문에 100% 깨끗하지는 않습니다. 고장난 드라이브를 제거한 다음 어레이 크기를 조정하십시오. 플래그 --grow는 약간 잘못된 이름입니다. 이는 다음을 의미할 수 있습니다.어느 하나성장 또는 축소:

sudo mdadm /dev/md0 --fail /dev/{failed drive}
sudo mdadm /dev/md0 --remove /dev/{failed drive}
sudo mdadm --grow /dev/md0 --raid-devices=2

오류와 관련하여 드라이브(예: PATA/SATA 포트, 케이블 또는 드라이브 커넥터)의 링크 문제는 핫 스페어의 장애 조치를 트리거하기에 충분하지 않습니다. 커널은 일반적으로 다른 "양호한" 포트를 사용하도록 전환하기 때문입니다. "불량" 드라이브에 대한 링크를 재설정하는 동안 드라이브를 실행합니다. 저는 3개 드라이브 어레이(핫 2개, 스페어 1개)를 실행하고 있는데 드라이브 중 하나가 최근에 로그에 약간의 내용을 표시하기로 결정했기 때문에 이것을 알고 있습니다. 어레이의 모든 드라이브를 테스트했을 때 3개 모두 SMART 테스트의 "긴" 버전을 통과했습니다. 따라서 플래터, 기계 구성 요소 또는 온보드 컨트롤러에는 문제가 없습니다. 이로 인해 불안정한 링크 케이블이나 케이블이 남게 됩니다. SATA 포트 불량. 아마도 이것이 당신이 보고 있는 것일 것입니다. 드라이브를 다른 마더보드 포트로 전환하거나 다른 케이블을 사용해 보고 개선되는지 확인하십시오.


후속 조치: 미러를 3개 드라이브로 확장하고, 오류가 발생하여 md 어레이에서 불안정한 드라이브를 제거하고, 케이블을 새 드라이브로 핫스왑하고(마더보드가 이를 지원함) 드라이브를 다시 추가했습니다. 다시 추가하면 즉시 드라이브 재동기화가 시작되었습니다. 지금까지,로그에 단 하나의 오류도 나타나지 않았습니다드라이브가 많이 사용되고 있음에도 불구하고. 그렇습니다. 드라이브 케이블이 불안정해질 수 있습니다.

답변2

저도 똑같은 문제를 겪었고 제 경우에는 동기화 중에 활성 RAID 디스크에 읽기 오류가 발생한 것을 발견했습니다. 따라서 새 디스크가 더 최근에 성공적으로 동기화되었으므로 예비 디스크로 표시된 상태로 유지되었습니다.

/var/log/messages 및 기타 시스템 로그에서 오류를 확인하고 싶을 수도 있습니다. 또한 디스크의 SMART 상태를 확인하는 것도 좋은 생각일 수 있습니다.
1) 간단한 테스트를 실행합니다.

"smartctl -t 짧은 /dev/sda"

2) 테스트 결과를 표시합니다.

"smartctl -l 자가 테스트 /dev/sda"

내 경우에는 다음과 같은 결과가 반환되었습니다.

=== SMART 데이터 섹션 읽기 시작 ===
SMART 자체 테스트 로그 구조 개정 번호 1
Num Test_Description 상태 남은 수명(시간) LBA_of_first_error
1 확장 오프라인 완료: 읽기 실패 90% 7564 27134728
2 짧은 오프라인 완료: 읽기 실패 90% 7467 1408449701

라이브 배포판을 부팅하고 결함이 있는 디스크의 데이터를 새(현재 "예비") 디스크에 수동으로 복사해야 했습니다.

답변3

나는 똑같은 문제를 겪었고 항상 어레이에 다시 추가하고 싶은 두 번째 디스크에 오류가 있다고 생각했습니다. 하지만 원래 디스크에 읽기 오류가 있었습니다.

를 사용하여 확인 smartctl -t short /dev/sdX하고 몇 분 후에 을 사용하여 결과를 확인할 수 있습니다 smartctl -l selftest /dev/sdX. 나에게는 다음과 같이 보였습니다.

=== START OF READ SMART DATA SECTION ===
SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed: read failure       20%     25151         734566647

이걸로 고치려고 했는데수동. 재미있었어요 :-). 두 디스크 모두에 오류가 있는지 확인했다는 것을 알고 있지만 문제는 여전히 md 배열에 있는 디스크에 읽기 오류가 있어서 두 번째 디스크를 추가하는 데 실패한다는 것입니다.

업데이트

smartctl -a /dev/sdX Current_Pending_Sector > 0이 표시되면 추가로 실행해야 합니다. 뭔가 잘못된 것입니다.

197 Current_Pending_Sector 0x0012 098 098 000 Old_age 항상 - 69

나에게는 테스트를 위해 RAID에서 디스크를 제거했는데 읽기 실패로 인해 재동기화를 수행할 수 없다는 것이 확실히 문제였습니다. 동기화가 중간에 중단되었습니다. 여전히 RAID 어레이에 있는 디스크를 검사했을 때 smartctl에서 문제가 보고되었습니다.

위의 매뉴얼로 문제를 해결할 수 있었고 대기 중인 섹터 수가 줄어드는 것을 확인했습니다. 하지만 너무 많고 절차가 길고 지루해서 백업을 사용하여 다른 서버에 데이터를 복원했습니다.

SMART를 사용할 기회가 없었기 때문에 자체 테스트에서 깨진 섹터가 나타나지 않은 것 같습니다.

저에게는 이것이 교훈입니다. 어레이에서 디스크를 제거하기 전에 디스크를 확인하십시오.

답변4

업데이트(2015년 5월 24일):3년 후, 나는 RAID 1 어레이의 성능 저하의 실제 원인을 조사했습니다.

tl;dr: 드라이브 중 하나가 불량했는데, 좋은 드라이브에 대해서만 전체 표면 테스트를 실행했기 때문에 이 점을 눈치채지 못했습니다.

3년 전에는 I/O 문제에 대한 로그를 확인할 생각이 없었습니다. 확인하려고 생각했다면 어레이 재구축을 포기했을 /var/log/syslog때 다음과 같은 것을 보았을 것입니다 .mdadm

May 24 14:08:32 node51 kernel: [51887.853786] sd 8:0:0:0: [sdi] Unhandled sense code
May 24 14:08:32 node51 kernel: [51887.853794] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853798] Result: hostbyte=DID_OK driverbyte=DRIVER_SENSE
May 24 14:08:32 node51 kernel: [51887.853802] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853805] Sense Key : Medium Error [current]
May 24 14:08:32 node51 kernel: [51887.853812] sd 8:0:0:0: [sdi]
May 24 14:08:32 node51 kernel: [51887.853815] Add. Sense: Unrecovered read error
May 24 14:08:32 node51 kernel: [51887.853819] sd 8:0:0:0: [sdi] CDB:
May 24 14:08:32 node51 kernel: [51887.853822] Read(10): 28 00 00 1b 6e 00 00 00 01 00
May 24 14:08:32 node51 kernel: [51887.853836] end_request: critical medium error, dev sdi, sector 14381056
May 24 14:08:32 node51 kernel: [51887.853849] Buffer I/O error on device sdi, logical block 1797632

로그에서 해당 출력을 얻기 위해 다음 명령을 사용하여 문제가 있는 첫 번째 LBA(제 경우에는 14381058)를 찾았습니다.

root@node51 [~]# dd if=/dev/sdi of=/dev/zero bs=512 count=1 skip=14381058
dd: error reading ‘/dev/sdi’: Input/output error
0+0 records in
0+0 records out
0 bytes (0 B) copied, 7.49287 s, 0.0 kB/s

당연하게도 md포기했습니다! 불량 드라이브에서 어레이를 재구축할 수 없습니다.

새로운 기술(더 나은 smartmontools하드웨어 호환성?)을 통해 다음과 같은 이점을 얻을 수 있었습니다.똑똑한마지막 5개 오류(지금까지 1393개 오류 중)를 포함하여 드라이브 외부 정보:

root@node51 [~]# smartctl -a /dev/sdi
smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build)
Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Hitachi Deskstar 5K3000
Device Model:     Hitachi HDS5C3020ALA632
Serial Number:    ML2220FA040K9E
LU WWN Device Id: 5 000cca 36ac1d394
Firmware Version: ML6OA800
User Capacity:    2,000,398,934,016 bytes [2.00 TB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    5940 rpm
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Sun May 24 14:13:35 2015 CDT
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART STATUS RETURN: incomplete response, ATA output registers missing
SMART overall-health self-assessment test result: PASSED
Warning: This result is based on an Attribute check.

General SMART Values:
Offline data collection status:  (0x84) Offline data collection activity
                                        was suspended by an interrupting command from host.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      (   0) The previous self-test routine completed
                                        without error or no self-test has ever
                                        been run.
Total time to complete Offline
data collection:                (21438) seconds.
Offline data collection
capabilities:                    (0x5b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 358) minutes.
SCT capabilities:              (0x003d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000b   100   100   016    Pre-fail  Always       -       0
  2 Throughput_Performance  0x0005   136   136   054    Pre-fail  Offline      -       93
  3 Spin_Up_Time            0x0007   172   172   024    Pre-fail  Always       -       277 (Average 362)
  4 Start_Stop_Count        0x0012   100   100   000    Old_age   Always       -       174
  5 Reallocated_Sector_Ct   0x0033   100   100   005    Pre-fail  Always       -       8
  7 Seek_Error_Rate         0x000b   100   100   067    Pre-fail  Always       -       0
  8 Seek_Time_Performance   0x0005   146   146   020    Pre-fail  Offline      -       29
  9 Power_On_Hours          0x0012   097   097   000    Old_age   Always       -       22419
 10 Spin_Retry_Count        0x0013   100   100   060    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       161
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       900
193 Load_Cycle_Count        0x0012   100   100   000    Old_age   Always       -       900
194 Temperature_Celsius     0x0002   127   127   000    Old_age   Always       -       47 (Min/Max 19/60)
196 Reallocated_Event_Count 0x0032   100   100   000    Old_age   Always       -       8
197 Current_Pending_Sector  0x0022   100   100   000    Old_age   Always       -       30
198 Offline_Uncorrectable   0x0008   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x000a   200   200   000    Old_age   Always       -       2

SMART Error Log Version: 1
ATA Error Count: 1393 (device log contains only the most recent five errors)
        CR = Command Register [HEX]
        FR = Features Register [HEX]
        SC = Sector Count Register [HEX]
        SN = Sector Number Register [HEX]
        CL = Cylinder Low Register [HEX]
        CH = Cylinder High Register [HEX]
        DH = Device/Head Register [HEX]
        DC = Device Command Register [HEX]
        ER = Error register [HEX]
        ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 1393 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:59:34.096  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:59:30.334  READ DMA EXT
  b0 d5 01 09 4f c2 00 00   1d+03:57:59.057  SMART READ LOG
  b0 d5 01 06 4f c2 00 00   1d+03:57:58.766  SMART READ LOG
  b0 d5 01 01 4f c2 00 00   1d+03:57:58.476  SMART READ LOG

Error 1392 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:59:30.334  READ DMA EXT
  b0 d5 01 09 4f c2 00 00   1d+03:57:59.057  SMART READ LOG
  b0 d5 01 06 4f c2 00 00   1d+03:57:58.766  SMART READ LOG
  b0 d5 01 01 4f c2 00 00   1d+03:57:58.476  SMART READ LOG
  b0 d5 01 00 4f c2 00 00   1d+03:57:58.475  SMART READ LOG

Error 1391 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:28.228  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:24.549  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT

Error 1390 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:24.549  READ DMA EXT
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT
  25 00 10 f0 70 db 40 00   1d+03:56:06.687  READ DMA EXT

Error 1389 occurred at disk power-on lifetime: 22419 hours (934 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  40 51 06 02 70 db 00  Error: UNC 6 sectors at LBA = 0x00db7002 = 14381058

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  25 00 08 00 70 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 10 f0 71 db 40 00   1d+03:56:06.711  READ DMA EXT
  25 00 f0 00 71 db 40 00   1d+03:56:06.710  READ DMA EXT
  25 00 10 f0 70 db 40 00   1d+03:56:06.687  READ DMA EXT
  25 00 f0 00 70 db 40 00   1d+03:56:03.026  READ DMA EXT

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Completed: read failure       90%     21249         14381058

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

아… 그러면 되겠군요.

이제 저는 이 질문을 세 가지 쉬운 단계로 해결했습니다.

  1. 3년 안에 시스템 관리자가 되세요.
  2. 로그를 확인하세요.
  3. 슈퍼유저로 돌아와서 웃으세요3년 전 나의 접근방식.

업데이트(2015년 7월 19일):궁금한 사람이 있다면 드라이브에 다시 매핑할 섹터가 마침내 부족해졌습니다.

root@node51 [~]# smartctl -a /dev/sdg
smartctl 6.2 2013-07-26 r3841 [x86_64-linux-3.13.0-43-generic] (local build)
Copyright (C) 2002-13, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Hitachi Deskstar 5K3000
Device Model:     Hitachi HDS5C3020ALA632
Serial Number:    ML2220FA040K9E
LU WWN Device Id: 5 000cca 36ac1d394
Firmware Version: ML6OA800
User Capacity:    2,000,398,934,016 bytes [2.00 TB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    5940 rpm
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Sun Jul 19 14:00:33 2015 CDT
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART STATUS RETURN: incomplete response, ATA output registers missing
SMART overall-health self-assessment test result: FAILED!
Drive failure expected in less than 24 hours. SAVE ALL DATA.
See vendor-specific Attribute list for failed Attributes.

General SMART Values:
Offline data collection status:  (0x85) Offline data collection activity
                                        was aborted by an interrupting command from host.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      ( 117) The previous self-test completed having
                                        the read element of the test failed.
Total time to complete Offline
data collection:                (21438) seconds.
Offline data collection
capabilities:                    (0x5b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 358) minutes.
SCT capabilities:              (0x003d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000b   099   099   016    Pre-fail  Always       -       2
  2 Throughput_Performance  0x0005   136   136   054    Pre-fail  Offline      -       93
  3 Spin_Up_Time            0x0007   163   163   024    Pre-fail  Always       -       318 (Average 355)
  4 Start_Stop_Count        0x0012   100   100   000    Old_age   Always       -       181
  5 Reallocated_Sector_Ct   0x0033   001   001   005    Pre-fail  Always   FAILING_NOW 1978
  7 Seek_Error_Rate         0x000b   086   086   067    Pre-fail  Always       -       1245192
  8 Seek_Time_Performance   0x0005   146   146   020    Pre-fail  Offline      -       29
  9 Power_On_Hours          0x0012   097   097   000    Old_age   Always       -       23763
 10 Spin_Retry_Count        0x0013   100   100   060    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       167
192 Power-Off_Retract_Count 0x0032   092   092   000    Old_age   Always       -       10251
193 Load_Cycle_Count        0x0012   092   092   000    Old_age   Always       -       10251
194 Temperature_Celsius     0x0002   111   111   000    Old_age   Always       -       54 (Min/Max 19/63)
196 Reallocated_Event_Count 0x0032   001   001   000    Old_age   Always       -       2927
197 Current_Pending_Sector  0x0022   100   100   000    Old_age   Always       -       33
198 Offline_Uncorrectable   0x0008   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x000a   200   200   000    Old_age   Always       -       2

SMART Error Log Version: 1
ATA Error Count: 2240 (device log contains only the most recent five errors)
        CR = Command Register [HEX]
        FR = Features Register [HEX]
        SC = Sector Count Register [HEX]
        SN = Sector Number Register [HEX]
        CL = Cylinder Low Register [HEX]
        CH = Cylinder High Register [HEX]
        DH = Device/Head Register [HEX]
        DC = Device Command Register [HEX]
        ER = Error register [HEX]
        ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 2240 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 f0 18 0f 2f 00  Error: IDNF 240 sectors at LBA = 0x002f0f18 = 3084056

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 18 0f 2f 40 00      00:25:01.942  WRITE DMA EXT
  35 00 f0 28 0e 2f 40 00      00:25:01.168  WRITE DMA EXT
  35 00 f0 38 0d 2f 40 00      00:25:01.157  WRITE DMA EXT
  35 00 f0 48 0c 2f 40 00      00:25:01.147  WRITE DMA EXT
  35 00 f0 58 0b 2f 40 00      00:25:01.136  WRITE DMA EXT

Error 2239 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 5a 4e f7 2e 00  Error: IDNF 90 sectors at LBA = 0x002ef74e = 3077966

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 b8 f6 2e 40 00      00:24:57.967  WRITE DMA EXT
  35 00 f0 c8 f5 2e 40 00      00:24:57.956  WRITE DMA EXT
  35 00 f0 d8 f4 2e 40 00      00:24:57.945  WRITE DMA EXT
  35 00 f0 e8 f3 2e 40 00      00:24:57.934  WRITE DMA EXT
  35 00 f0 f8 f2 2e 40 00      00:24:57.924  WRITE DMA EXT

Error 2238 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 40 a8 c6 2e 00  Error: IDNF 64 sectors at LBA = 0x002ec6a8 = 3065512

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 f8 c5 2e 40 00      00:24:49.444  WRITE DMA EXT
  35 00 f0 08 c5 2e 40 00      00:24:49.433  WRITE DMA EXT
  35 00 f0 18 c4 2e 40 00      00:24:49.422  WRITE DMA EXT
  35 00 f0 28 c3 2e 40 00      00:24:49.412  WRITE DMA EXT
  35 00 f0 38 c2 2e 40 00      00:24:49.401  WRITE DMA EXT

Error 2237 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 ea be ba 2e 00  Error: IDNF 234 sectors at LBA = 0x002ebabe = 3062462

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 b8 ba 2e 40 00      00:24:39.263  WRITE DMA EXT
  35 00 f0 c8 b9 2e 40 00      00:24:38.885  WRITE DMA EXT
  35 00 f0 d8 b8 2e 40 00      00:24:38.874  WRITE DMA EXT
  35 00 f0 e8 b7 2e 40 00      00:24:38.862  WRITE DMA EXT
  35 00 f0 f8 b6 2e 40 00      00:24:38.852  WRITE DMA EXT

Error 2236 occurred at disk power-on lifetime: 23763 hours (990 days + 3 hours)
  When the command that caused the error occurred, the device was active or idle.

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  10 51 86 c2 2a 2e 00  Error: IDNF 134 sectors at LBA = 0x002e2ac2 = 3025602

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  35 00 f0 58 2a 2e 40 00      00:24:25.605  WRITE DMA EXT
  35 00 f0 68 29 2e 40 00      00:24:25.594  WRITE DMA EXT
  35 00 f0 78 28 2e 40 00      00:24:25.583  WRITE DMA EXT
  35 00 f0 88 27 2e 40 00      00:24:25.572  WRITE DMA EXT
  35 00 f0 98 26 2e 40 00      00:24:25.561  WRITE DMA EXT

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short captive       Completed: read failure       50%     23763         869280
# 2  Extended offline    Completed without error       00%     22451         -
# 3  Short offline       Completed without error       00%     22439         -
# 4  Extended offline    Completed: read failure       90%     21249         14381058
1 of 2 failed self-tests are outdated by newer successful extended offline self-test # 2

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

관련 정보