ফেজ ৪ — স্টোরেজ (Storage Fundamentals)#

pvs         # ফিজিক্যাল ভলিউম
vgs         # ভলিউম গ্রুপ
lvs         # লজিক্যাল ভলিউম
lvdisplay   # বিস্তারিত

pvcreate /dev/sdb          # নতুন ডিস্ক LVM-এর জন্য প্রস্তুত
vgextend pve /dev/sdb      # পুলে যোগ
lvcreate -L 200G --thinpool data pve    # নতুন thin pool

lvresize -L +20G /dev/pve/vm-100-disk-0 # ডিস্ক বড় করা
# এরপর VM-এর ভেতরে ফাইল সিস্টেমও বড় করতে হবে

# দুইটি ডিস্ক দিয়ে মিরর (RAID-1)
zpool create -f rpool mirror /dev/sdb /dev/sdc

# তিন ডিস্ক দিয়ে RAIDZ (RAID-5-এর মতো)
zpool create datapool raidz /dev/sdb /dev/sdc /dev/sdd

zpool status            # পুলের স্বাস্থ্য
zpool iostat -v 2       # প্রতি ২ সেকেন্ডে I/O

zfs set compression=lz4 rpool    # পুল বানানোর পরপরই দিন
zpool set autotrim=on rpool      # SSD-এর জন্য

zfs create rpool/data
zfs list

# স্ন্যাপশট পাঠিয়ে ব্যাকআপ
zfs snapshot rpool/data@backup-20260518
zfs send rpool/data@backup-20260518 | ssh backup-server zfs recv tank/proxmox

# NFS সার্ভারে
apt install nfs-kernel-server
mkdir -p /exports/proxmox
echo "/exports/proxmox 192.168.10.0/24(rw,sync,no_subtree_check,no_root_squash)" >> /etc/exports
exportfs -ra
systemctl enable --now nfs-server

# প্রক্সমক্স নোডে
mount -t nfs 192.168.10.200:/exports/proxmox /mnt/pve/nfs-storage

pvesm add nfs nfs-backups \
  --server 192.168.10.200 \
  --export /exports/proxmox \
  --content backup,iso

pveceph init --network 10.10.10.0/24
pveceph mon create                  # প্রতিটি নোডে
pveceph osd create /dev/sdb         # প্রতিটি ডিস্কের জন্য
pveceph pool create vm-store --add_storages true

ceph status
ceph osd tree
ceph df

apt install smartmontools
smartctl -t short /dev/sda     # ছোট পরীক্ষা চালান
smartctl -a /dev/sda           # ফলাফল দেখুন

systemctl enable --now smartd  # স্বয়ংক্রিয় নজরদারি

apt install open-iscsi

iscsiadm -m discovery -t sendtargets -p 192.168.10.200
iscsiadm -m node -T iqn.2024-01.com.nas:storage1 -p 192.168.10.200 --login
iscsiadm -m session
lsblk                                # নতুন ডিভাইস দেখা যাবে

pvesm add iscsi iscsi-nas \
  --portal 192.168.10.200 \
  --target iqn.2024-01.com.nas:storage1 \
  --content images

arc_summary | head -30

# ARC সর্বোচ্চ ৮ GB
echo "options zfs zfs_arc_max=8589934592" > /etc/modprobe.d/zfs.conf
update-initramfs -u

# রিবুট ছাড়াই এখনই
echo 8589934592 > /sys/module/zfs/parameters/zfs_arc_max

# NVMe-কে দ্বিতীয় স্তরের ক্যাশ বানানো
zpool add rpool cache /dev/nvme1n1

cat /sys/block/sda/queue/scheduler

# NVMe → none (কার্নেল নিজেই সামলায়)
# SSD  → mq-deadline বা none
# HDD  → mq-deadline বা bfq

echo mq-deadline > /sys/block/sda/queue/scheduler

qm set 100 --virtio0 local-lvm:vm-100-disk-0,cache=none

# VM-এর ভেতরে গতি মাপা
apt install fio
fio --name=randread --ioengine=libaio --iodepth=64 \
  --rw=randread --bs=4k --size=4G --numjobs=4 \
  --runtime=60 --group_reporting