Neden Proxmox üzerinde?
Kubernetes doğrudan fiziksel sunuculara da kurulabilir. Ancak Proxmox üzerinde sanal makinelerde çalıştırmanın pratik avantajları vardır:
- Esneklik: Aynı donanımda birden çok Kubernetes kümesi (üretim, test, geliştirme) ve klasik sanal makineler yan yana çalışır.
- Bakım kolaylığı: Fiziksel sunucu bakıma girerken Kubernetes düğümü olan sanal makine canlı taşınır.
- Hızlı düğüm: Şablondan saniyeler içinde yeni düğüm açılır; bozulan düğüm silinip yenisi kurulur.
- Ortak depolama: Proxmox kümesindeki Ceph, Kubernetes uygulamalarının kalıcı verisini de taşır.
Mimari
| Katman | Bileşen |
|---|---|
| Donanım | 3 ya da daha fazla sunuculu Proxmox VE + Ceph kümesi |
| Kontrol düzlemi | 3 sanal makine (çoğunluk için tek sayı), farklı fiziksel sunuculara dağıtılmış |
| Çalışan düğümler | İş yüküne göre 3 ve üzeri sanal makine |
| Kalıcı depolama | Ceph RBD (blok) ve CephFS (paylaşımlı dosya), ceph-csi ile |
| Yük dengeleme | Kubernetes içinde (ör. MetalLB) ya da harici yük dengeleyici |
Kontrol düzlemini dağıtın: Proxmox'un HA kurallarıyla üç kontrol düzlemi sanal makinesinin aynı fiziksel sunucuda toplanmasını engelleyin. Aksi halde tek bir sunucu arızası tüm Kubernetes kümesini durdurabilir.
Düğüm boyutlandırma
| Rol | Başlangıç | Not |
|---|---|---|
| Kontrol düzlemi | 4 vCPU, 8 GB bellek, 50 GB disk | etcd disk gecikmesine hassas; NVMe üzerinde olmalı |
| Çalışan düğüm | 8–16 vCPU, 32–64 GB bellek | Az sayıda büyük düğüm yerine orta boy ve çok düğüm, arızada etkiyi azaltır |
Sanal makinelerde işlemci tipini host ya da kümedeki ortak model olarak, diskleri VirtIO SCSI ile ayarlayın; QEMU Guest Agent kurun.
Depolama
Kubernetes'te kalıcı veri, CSI sürücüleriyle bağlanır. Proxmox kümesinde Ceph varsa en temiz yol, Ceph projesinin resmi CSI sürücüsü ceph-csi'dir:
- RBD: Veritabanı gibi tek pod'a bağlanan blok depolama.
- CephFS: Birden çok pod'un aynı anda yazabildiği paylaşımlı dosya depolama.
Kubernetes için Ceph'te ayrı bir havuz ve yalnız o havuza yetkili ayrı bir Ceph kullanıcısı oluşturun. Proxmox disklerini doğrudan Kubernetes'e bağlayan topluluk tarafından geliştirilmiş CSI sürücüleri de vardır; bunlar Proxmox tarafından resmi olarak desteklenmez.
Ağ
- Kubernetes düğümlerini ayrı bir VLAN'da toplayın; Ceph'e erişmeleri gerekiyorsa Ceph public ağına da bağlayın.
- Pod ağı (CNI) Kubernetes içinde çalışır; Proxmox tarafında ek yapılandırma gerekmez.
- Yük dengeleyici adresleri için düğüm VLAN'ında ayrılmış bir IP aralığı planlayın.
Ağ yerleşimi için Proxmox ağ tasarımı rehberi.
Otomasyon
Kubernetes düğümlerinin elle kurulması yerine tekrarlanabilir bir yapı önerilir:
- Şablon: cloud-init destekli bir Linux bulut imajından Proxmox şablonu hazırlayın.
- Sanal makineler: Terraform ya da OpenTofu ile düğüm sanal makinelerini tanımlayın. Proxmox için kullanılan Terraform sağlayıcıları topluluk tarafından geliştirilir.
- Kubernetes: Seçtiğiniz dağıtımı (kubeadm, RKE2, k3s, Talos Linux gibi) Ansible ya da dağıtımın kendi aracıyla kurun.
Proxmox'un REST API'si ve API anahtarları bu araçların güvenli şekilde çalışmasını sağlar; otomasyon hesabına yalnız gereken yetkileri verin.
Dikkat edilecekler
- LXC değil sanal makine: Kubernetes düğümlerini sanal makinelerde çalıştırın.
- Çift kopya tuzağı: Ceph veriyi zaten üç kopya tutar. Kubernetes içinde ayrıca kendi kopyalarını tutan bir depolama katmanı (ör. ikinci bir dağıtık depolama) kurmak alanı gereksiz yere katlar.
- Yedek: Sanal makine yedeği Kubernetes uygulamalarının tutarlı yedeği değildir; uygulama verisi için Kubernetes'e özel yedek araçları da kullanın.
- Kaynak ayırma: Proxmox sunucularını Kubernetes düğümleriyle aşırı doldurmayın; bir sunucu arızasında düğümlerin diğer sunucularda açılacak yeri olmalı.
Proxmox üzerinde Kubernetes altyapısı
Proxmox + Ceph kümesi, Kubernetes düğüm şablonları ve Ceph CSI entegrasyonunu birlikte kuruyoruz.
HCI paketleriSık sorulan sorular
Kubernetes'i LXC konteynerlerinde mi, sanal makinelerde mi çalıştırmalı?
Sanal makinelerde. Kubernetes kendi çekirdek modüllerine ve ayarlarına ihtiyaç duyar; sanal makine bu ihtiyaçları güvenli şekilde karşılar ve canlı taşıma, anlık görüntü gibi Proxmox özelliklerinden yararlanır. LXC içinde Kubernetes çalıştırmak ayrıcalıklı konteynerler ve özel ayarlar gerektirir, üretim için önermiyoruz.
Proxmox'ta dahili Kubernetes var mı?
Hayır. Proxmox VE, sanal makine ve LXC konteynerleri yönetir; Kubernetes bu sanal makinelerin üzerine ayrıca kurulur.
Kubernetes için hangi depolamayı kullanmalı?
Proxmox kümesinde Ceph varsa, Ceph projesinin resmi CSI sürücüsü (ceph-csi) ile Kubernetes doğrudan Ceph'ten blok (RBD) ve paylaşımlı dosya (CephFS) depolama alabilir.