SCVM 배포 완료 후 물리디스크 타입 HDD로 인식되는 증상

KyungSuLee

안녕하세요.

SCVM 배포까지 정상적으로 배포된 후 스토리지 클러스터 구성 단계에서

Glue 메인화면 접속 후 "Primary 장치 추가" 부분에 서버에 있는 디스크들이 모두 HDD 로 인식이 되고 있습니다.

virsh edit 명령을 통해 패스스루된 디스크 구문에 rotation_rate='1' 옵션을 추가하여 다시 확인해보았으나 계속해서

디스크 타입이 HDD로 인식이 되고 있습니다. 이러한 경우에 추가로 조치 및 확인할 부분에 대해서 조언주시면 확인해보도록 하겠습니다.

증상 관련해서 아래 캡처화면 참고부탁드립니다.

-GLUE 상태-

-GLUE 물리디스크 상태-

-iDRC 서버 디스크 상태-

-Cube 상태-

-SCVM XML 수정-

확인 부탁드리겠습니다.

TechFlow-Assistant

rotation_rate='1'만 추가해도 Glue의 디스크 분류가 SSD로 바뀌지는 않습니다. 현재 화면에서는 SCVM이 패스스루 디스크를 QEMU HARDDISK로 인식하고 있으며, OSD는 아직 0개입니다. 먼저 SCVM 내부에서 실제 디스크가 비회전(SSD) 장치로 전달되는지 확인한 뒤 OSD를 추가해야 합니다.

먼저 다음 해결 방법을 적용해 보세요.

OSD를 추가하기 전에 SCVM별 /dev/sda_/dev/sdc가 가상머신 안의 운영체제에서 비회전 SSD로 보고되는지 확인하십시오. Glue 화면의 QEMU HARDDISK 표시는 iDRAC의 실제 SSD 정보가 SCVM까지 그대로 전달되지 않았을 가능성을 보여 줍니다.
SCVM을 정지한 상태에서 수정한 XML이 실제 실행 정의에도 반영되었는지 확인하십시오. 첨부 XML에는 /제품 내부 경로 블록 장치 3개에 rotation_rate='1'이 들어가 있지만, 이 설정만으로 Glue/Ceph 분류가 바뀐다고 볼 수는 없습니다.
SCVM 내부 장치가 계속 HDD로 보이면, OSD를 만들기 전에 SSD 속성이 게스트에 전달되는 패스스루 구성인지 배포 절차와 비교해 수정하십시오. 이미 생성된 OSD의 class 변경을 전제로 처리하지 마십시오.
SCVM 내부에서 SSD로 확인된 뒤 Glue의 “Primary 장치 추가”를 진행하십시오. 성공 기준은 OSD가 생성되고, 클러스터의 작동 중 디스크 수가 0보다 커지며 OSD count 0 경고가 사라지는 것입니다.

첨부해 주신 자료에서는 다음 내용을 확인했습니다.

Glue 호스트 화면에서 scvm1_scvm3은 available이며, 각 호스트의 HDDs는 4, Flash는 0으로 표시됩니다.
Glue 물리 디스크 화면에서 scvm1_scvm3의 /dev/sda_/dev/sdc는 HDD, 벤더 QEMU, 모델 QEMU HARDDISK로 표시됩니다.
iDRAC Physical Disks 화면에서 표시된 디스크의 Media Type은 SSD이며, 일부는 Non-RAID 상태입니다.

이 방법을 먼저 권장하는 이유는 다음과 같습니다.

SCVM에 전달된 가상 블록 장치의 유형 정보가 SSD로 인식되지 않는 상태로 보입니다.
rotation_rate='1'은 Ceph의 기존 또는 이후 OSD 장치 class를 자동으로 SSD로 변경하는 설정으로 확인되지 않습니다.
OSD가 아직 0개이므로, 현재 경고는 SSD/HDD 분류 변경 실패 자체보다는 아직 스토리지 장치 추가가 완료되지 않은 상태와도 일치합니다.

위 조치로 해결되지 않으면 아래 결과를 알려주세요. 이미 제공한 내용은 다시 보내지 않으셔도 됩니다.

SCVM 내부에서 /dev/sda_/dev/sdc의 회전 여부와 장치 모델이 어떻게 표시되는지는 제공되지 않았습니다.
각 SCVM에서 실제로 사용 중인 libvirt 도메인 정의와 수정한 XML 정의가 같은지 확인되지 않았습니다.
현재 OSD가 0개이므로, OSD 생성 후에도 Glue가 HDD로 분류할지는 아직 확인되지 않았습니다.

TechFlow-Assistant

증상

SCVM 배포 후 Glue의 “Primary 장치 추가” 화면에서 디스크가 HDD로 표시되었습니다.
패스스루 디스크 XML에 rotation_rate='1'을 추가했으나 디스크 표시는 계속 HDD였습니다.
Glue 화면에서 데이터 디스크는 벤더 QEMU, 모델 QEMU HARDDISK로 표시되었고, OSD 수는 0개였습니다.
iDRAC 화면에서는 물리 디스크의 Media Type이 SSD로 표시되었습니다.

원인

OSD가 아직 생성되지 않아 SSD OSD class를 확인하거나 사용할 수 없는 상태입니다.
rotation_rate='1'은 Ceph OSD class를 설정하거나 기존 OSD class를 변경하는 설정이 아닙니다.

추가로 필요한 정보

SCVM 내부에서 데이터 디스크의 회전 여부와 모델이 어떻게 인식되는지는 확인되지 않았습니다.
수정한 XML 정의와 실제 실행 중인 SCVM 정의가 동일한지는 확인되지 않았습니다.
제공된 대화에는 이 절차 적용 후 OSD 생성 및 SSD class 확인 결과가 없습니다.
적용 가능한 ABLESTACK 제품 버전 정보는 제공되지 않았습니다.

해결 방법

OSD를 추가하기 전에 각 SCVM에서 /dev/sda, /dev/sdc 등 데이터 디스크가 비회전(SSD) 장치로 인식되는지 확인합니다. Glue 화면의 QEMU HARDDISK 표시는 SCVM에 전달된 가상 블록 장치 정보입니다.
SCVM을 정지한 상태에서 수정한 XML의 rotation_rate='1' 설정이 실제 실행 정의에 반영되었는지 확인합니다. 이 설정만으로 Glue의 디스크 분류가 SSD로 바뀌지는 않습니다.
SCVM 내부에서도 디스크가 HDD로 인식되면 OSD를 만들기 전에 SSD 속성이 전달되는 LUN Passthrough 구성인지 배포 구성과 비교해 수정합니다. SCVM 배포 시 Glue용 디스크는 LUN Passthrough 방식으로 선택해야 합니다.
SCVM 내부에서 SSD로 확인된 디스크만 Glue의 “Primary 장치 추가”로 OSD를 생성합니다. 기존 OSD의 class 변경을 전제로 처리하지 않습니다.
완료 후 OSD가 생성되었는지 확인합니다. 성공 기준은 OSD 수가 0보다 크고, ceph osd stat 및 ceph osd tree에서 OSD 상태와 ssd class를 확인하는 것입니다.

추가 고려사항

SCVM XML의 블록 디스크 대상 sda, sdb, sdc에 rotation_rate='1'이 표시됩니다.
스토리지센터 클러스터 상태에 OSD count 0 < osd_pool_default_size 3 경고와 디스크 0개 작동 중 상태가 표시됩니다.
iDRAC Physical Disks 목록의 디스크 Media Type이 SSD이며 일부 디스크 상태는 Non-RAID로 표시됩니다.
Glue 물리 디스크 목록에서 SCVM 데이터 디스크가 HDD, 벤더 QEMU, 모델 QEMU HARDDISK로 표시됩니다.
scvm1, scvm2, scvm3은 available이며 각 호스트의 HDDs는 4, Flash는 0으로 표시됩니다.

적용 버전

ABLESTACK Diplo

이 문서는 질문자가 해결 답변으로 선택한 내용을 중심으로 TechFlow가 대화를 정리한 Knowledge Base입니다.