.png)
Ubuntu 12.04 서버에서 약 460GB의 데이터를 저장하는 SSD를 사용하고 있습니다. (드라이브의 용량은 560GB이므로 약 88% 정도 찼습니다.) 데이터에 대한 임의 액세스(쓰기 없음)를 많이 수행하는 프로그램이 있는데, 며칠 전에 (일반적으로) 마지막으로 실행했습니다. 어제 실행해보니 갑자기 이전보다 속도가 많이 느려졌습니다. 프로그램은 드라이브에 무작위로 액세스합니다.
이전에는 초당 약 5000번의 무작위 조회를 수행할 수 있었습니다. 지금은 약 100개만 얻습니다. 이는 HDD에 무작위로 액세스하는 것보다 느립니다. (작년에 몇 가지 문제를 벤치마킹했습니다.)
최근에 내가 한 유일한 일은 gcc 4.7을 설치하고 모든 패키지를 업그레이드하는 것이었습니다. 그러나 나는 clang으로 모든 것을 컴파일하려고 시도했지만 차이점을 발견하지 못했습니다.
드라이브는 ext4
옵션만 있는 으로 포맷됩니다 errors=remount-ro
. 컴퓨터를 재부팅하고 장치를 다듬어 보았지만 상황이 바뀌지 않았습니다. 코드를 프로파일링하면 , open
호출 close
에 모든 시간을 소비하고 있음을 알 수 있습니다 mmap
. (mmap을 직접 호출하지 않는다는 점에 유의하세요. 저는 all C
-style fopen
fseek
및 fread
호출을 사용하고 있습니다.)
무엇이 이런 일을 일으킬 수 있는지 아시나요? 도움이 될 가능성이 있으면 드라이브를 다시 포맷할 수 있습니다.
편집: 다음은 2TB HDD 및 500GB SSD에 대한 일부 벤치마크 데이터입니다.
sudo hdparm -Tt /dev/sdb1
/dev/sdb1:
Timing cached reads: 6814 MB in 2.00 seconds = 3410.05 MB/sec
Timing buffered disk reads: 458 MB in 3.00 seconds = 152.45 MB/sec
sudo hdparm -Tt /dev/sdc1
/dev/sdc1:
Timing cached reads: 6890 MB in 2.00 seconds = 3447.93 MB/sec
Timing buffered disk reads: 780 MB in 3.01 seconds = 259.36 MB/sec
다음의 출력은 다음과 같습니다 smartctl
.
=== START OF INFORMATION SECTION ===
Model Family: Intel 320 Series SSDs
Device Model: INTEL SSDSA2CW600G3
Serial Number: CVPR140004B7600FGN
LU WWN Device Id: 5 001517 9596df196
Firmware Version: 4PC10362
User Capacity: 600,127,266,816 bytes [600 GB]
Sector Size: 512 bytes logical/physical
Device is: In smartctl database [for details use: -P show]
ATA Version is: 8
ATA Standard is: ATA-8-ACS revision 4
Local Time is: Sun Jan 26 16:46:53 2014 MST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled
=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED
General SMART Values:
Offline data collection status: (0x00) Offline data collection activity
was never started.
Auto Offline Data Collection: Disabled.
Self-test execution status: ( 0) The previous self-test routine completed
without error or no self-test has ever
been run.
Total time to complete Offline
data collection: ( 1) seconds.
Offline data collection
capabilities: (0x75) SMART execute Offline immediate.
No Auto Offline data collection support.
Abort Offline collection upon new
command.
No Offline surface scan supported.
Self-test supported.
Conveyance Self-test supported.
Selective Self-test supported.
SMART capabilities: (0x0003) Saves SMART data before entering
power-saving mode.
Supports SMART auto save timer.
Error logging capability: (0x01) Error logging supported.
General Purpose Logging supported.
Short self-test routine
recommended polling time: ( 1) minutes.
Extended self-test routine
recommended polling time: ( 1) minutes.
Conveyance self-test routine
recommended polling time: ( 1) minutes.
SCT capabilities: (0x003d) SCT Status supported.
SCT Error Recovery Control supported.
SCT Feature Control supported.
SCT Data Table supported.
SMART Attributes Data Structure revision number: 5
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME FLAG VALUE WORST THRESH TYPE UPDATED WHEN_FAILED RAW_VALUE
3 Spin_Up_Time 0x0020 100 100 000 Old_age Offline - 0
4 Start_Stop_Count 0x0030 100 100 000 Old_age Offline - 0
5 Reallocated_Sector_Ct 0x0032 100 100 000 Old_age Always - 0
9 Power_On_Hours 0x0032 100 100 000 Old_age Always - 17833
12 Power_Cycle_Count 0x0032 100 100 000 Old_age Always - 13
170 Reserve_Block_Count 0x0033 100 100 010 Pre-fail Always - 0
171 Program_Fail_Count 0x0032 100 100 000 Old_age Always - 0
172 Erase_Fail_Count 0x0032 100 100 000 Old_age Always - 0
183 Runtime_Bad_Block 0x0030 100 100 000 Old_age Offline - 0
184 End-to-End_Error 0x0032 100 100 090 Old_age Always - 0
187 Reported_Uncorrect 0x0032 100 100 000 Old_age Always - 0
192 Unsafe_Shutdown_Count 0x0032 100 100 000 Old_age Always - 5
199 UDMA_CRC_Error_Count 0x0030 100 100 000 Old_age Offline - 0
225 Host_Writes_32MiB 0x0032 100 100 000 Old_age Always - 3236658
226 Workld_Media_Wear_Indic 0x0032 100 100 000 Old_age Always - 4973
227 Workld_Host_Reads_Perc 0x0032 100 100 000 Old_age Always - 65
228 Workload_Minutes 0x0032 100 100 000 Old_age Always - 1067143
232 Available_Reservd_Space 0x0033 100 100 010 Pre-fail Always - 0
233 Media_Wearout_Indicator 0x0032 096 096 000 Old_age Always - 0
241 Host_Writes_32MiB 0x0032 100 100 000 Old_age Always - 3236658
242 Host_Reads_32MiB 0x0032 100 100 000 Old_age Always - 6437718
SMART Error Log Version: 1
No Errors Logged
SMART Self-test log structure revision number 1
No self-tests have been logged. [To run self-tests, use: smartctl -t]
Note: selective self-test log revision number (0) not 1 implies that no selective self-test has ever been run
SMART Selective self-test log data structure revision number 0
Note: revision number not 1 implies that no selective self-test has ever been run
SPAN MIN_LBA MAX_LBA CURRENT_TEST_STATUS
1 0 0 Not_testing
2 0 0 Not_testing
3 0 0 Not_testing
4 0 0 Not_testing
5 0 0 Not_testing
Selective self-test flags (0x0):
After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.
[편집: 나는 백그라운드에서 이 작업을 계속하고 있습니다. 해결되면 여기에 글을 올리겠습니다.]
답변1
그래서 최종 답변이 좀 당황스럽네요. 제가 알아낼 수 있었어야 했는데, 제가 엉뚱한 곳을 찾고 있었거든요. 결정적인 단서는 HDD의 속도에 관한 질문에 있었습니다. 테스트 결과 HDD 속도도 느려진 것으로 나타났습니다.
디스크의 데이터 읽기를 처리하는 클래스에는 내부 버퍼에 대한 기본 읽기 크기가 있습니다. 무작위 액세스를 수행할 때 나중에 버퍼링된 데이터를 사용하지 않을 것이기 때문에 이는 상대적으로 작아야 합니다. 전체 파일에 대해 순차적으로 작업을 수행하는 경우 데이터를 재사용하므로 값이 클수록 성능이 향상됩니다. 이것이 공유 코드의 상수라는 점을 감안할 때 코드를 사용하여 하나의 애플리케이션을 조정하면 본질적으로 무작위 액세스에 대한 조정이 중단되어 제가 경험했던 엄청난 속도 저하가 발생했습니다.