Performansı belirleyen etkenler
Ceph'in performansı, yazılım ayarlarından çok donanım ve ağ kararlarıyla belirlenir. Sırasıyla en büyük etkiler:
- Ağ: Ceph her yazmayı ağ üzerinden üç sunucuya gönderir. Birkaç NVMe disk 25 Gbps'yi tek başına doldurur; NVMe kümelerde 100 Gbps gerekir.
- Disk sınıfı: Güç kaybı korumalı (PLP) kurumsal SSD/NVMe şart. Tüketici SSD'lerde yazma gecikmesi çok yüksek olur.
- Disk bağlantısı: HBA; RAID kartı kullanılmaz.
- Denge: Sunucular arasında eşit sayı ve boyutta disk.
- İşlemci ve bellek: NVMe OSD'ler işlemci ister; her OSD için yeterli bellek ayrılmalı.
Yazılım ayarlarıyla kurtarılamayacak bir donanım darboğazı varsa, önce onu çözün. Donanım gereksinimleri
OSD bellek ayarı
Her OSD varsayılan olarak 4 GB bellek hedefler. Proxmox iyi performans için OSD başına en az 8 GB öneriyor. Sunucuda yeterli bellek varsa:
ceph config set osd osd_memory_target 8G
Hiper-yakınsak kümelerde sanal makinelerin belleğiyle birlikte planlayın: Onarım ve yeniden dengeleme sırasında Ceph normalden fazla bellek kullanır; sunucuları sınırına kadar doldurmayın.
PG ve havuzlar
Ceph veriyi yerleşim grupları (PG) halinde dağıtır. PG otomatik ölçekleyicisi açıktır ve sayıyı veri miktarına göre ayarlar.
- Havuzu oluştururken beklenen boyutu (target size ya da target ratio) belirtin; böylece PG sayısı veri gelmeden önce doğru değere ulaşır ve sonradan yeniden dağıtım yaşanmaz.
- Sanal makine havuzlarında size 3, min_size 2 varsayılanını koruyun.
- NVMe ve HDD diskleriniz varsa, cihaz sınıfına göre ayrı yerleşim kuralları ve havuzlar oluşturun; hızlı ve yavaş diskler aynı havuzda karışmasın.
Performansı ölçmek
Kurulumdan sonra ve önemli değişikliklerden önce ölçüm alın; sonraki karşılaştırmalar için referans olur.
# havuz düzeyinde yazma ve okuma (test havuzunda çalıştırın)
rados bench -p test-havuzu 60 write --no-cleanup
rados bench -p test-havuzu 60 seq
rados -p test-havuzu cleanup
Sanal makine içinden gerçek iş yüküne yakın ölçüm için fio kullanın: 4K rastgele okuma/yazma (veritabanı benzeri) ve 1M sıralı (yedek ve dosya benzeri) testleri ayrı ayrı yapın. Tek bir sanal makinenin sonucu kümenin toplam kapasitesini göstermez; birden çok makineden eş zamanlı test edin.
Bakım sırasında
Bir sunucuyu kısa bakım için kapatacaksanız, Ceph'in o sunucudaki diskleri "kayıp" sayıp veriyi yeniden kopyalamasını önleyin:
ceph osd set noout # bakımdan önce
# ... sunucuyu kapat, bakım yap, aç ...
ceph osd unset noout # tüm OSD'ler geri gelince
Aynı anda yalnız bir sunucuya bakım yapın ve sonraki sunucuya geçmeden önce Ceph'in "HEALTH_OK" durumuna dönmesini bekleyin.
Sağlık durumları
| Durum | Anlamı |
|---|---|
| HEALTH_OK | Her şey yolunda. |
| HEALTH_WARN | Dikkat gerektiren durum: degraded veri (bir kopya eksik), noout işareti, saat farkı, doluluk uyarısı. Çoğu kendiliğinden düzelir ya da basit müdahale ister. |
| HEALTH_ERR | Acil müdahale: erişilemeyen veri, dolu OSD. Acil destek |
ceph -s # genel durum
ceph health detail # uyarıların ayrıntısı
ceph osd df tree # disk doluluğu ve dağılımı
Doluluğa dikkat: OSD'lerden biri dolma eşiğine ulaşırsa Ceph yazmayı durdurur. Kullanımı %80'in altında tutun; doluluk artıyorsa disk ya da sunucu eklemeyi önceden planlayın.
İzleme
- Proxmox arayüzü: Ceph ekranı sağlık durumu, OSD'ler, havuzlar ve performans grafiklerini gösterir.
- Harici metrik sunucusu: Proxmox, performans verilerini InfluxDB ya da Graphite'a gönderebilir (Datacenter → Metric Server); Grafana ile uzun dönem grafik ve uyarı kurulur.
- Prometheus: Ceph'in yönetim servisi, Prometheus modülüyle Ceph'e özgü ayrıntılı metrikleri dışarı verebilir.
- Bildirim: Proxmox'un bildirim sistemiyle e-posta ya da webhook uyarıları kurun; "HEALTH_WARN" ve disk arızası gece fark edilsin.
- Disk sağlığı: SMART değerleri ve düzenli scrub sonuçları, arızadan önce uyarı verir.
Ceph sağlık kontrolü
Kümeniz yavaş mı, uyarı mı veriyor? Ağ, disk ve yapılandırmayı inceleyip yazılı rapor ve iyileştirme planı veriyoruz.
Sağlık kontrolüSık sorulan sorular
Ceph neden yavaş?
En sık nedenler: yavaş ya da paylaşılan ağ, güç kaybı koruması olmayan tüketici SSD'ler, RAID kartı arkasındaki diskler, OSD başına yetersiz bellek ve sunucular arasında dengesiz disk dağılımı.
Bakım için sunucuyu kapatırken Ceph veriyi taşımaya başlar mı?
Bir OSD uzun süre kapalı kalırsa Ceph onu kümeden çıkarıp verisini yeniden kopyalamaya başlar. Kısa bakımlarda bunu önlemek için önce "noout" işareti konur, bakım bitince kaldırılır.
PG sayısını elle ayarlamalı mıyım?
Genellikle hayır. Ceph'in PG otomatik ölçekleyicisi havuzlardaki veri miktarına göre PG sayısını ayarlar. Havuzun hedef boyutunu ya da oranını belirtmek, büyümeden önce doğru sayıya ulaşmasını sağlar.