Di Proxmox VE ada dua alat jaringan yang sering tertukar: bridge dan bond. Bridge menyatukan banyak kabel jadi satu saklar; bond menyatukan banyak kabel jadi satu jalur yang tahan putus.

Artikel ini membedakan keduanya dengan bukti dari lab, bukan dari menu. Semua uji dijalankan di dua network namespace terpisah, jadi tidak ada satu pun interface produksi yang tersentuh.

🎯 Tujuan

Setelah membaca dan mempraktikkan artikel ini, kamu bisa:

  • Menjelaskan beda bridge dan bond tanpa melihat menu Proxmox.
  • Membaca urutan lapisan yang benar: NIC fisik β†’ bond β†’ bridge β†’ tap/veth tamu.
  • Membangun bond active-backup dan mengukur waktu failover-nya sendiri.
  • Membuktikan kenapa LACP yang "kelihatan jalan" belum tentu bekerja.
  • Mendiagnosis empat kegagalan khas: tanpa miimon, tanpa partner LACP, mode yang tidak bisa diganti, dan IP di tempat yang salah.

πŸ“ Konteks nyata

Bayangkan lab TKJ dengan satu server Proxmox, satu kabel ke switch, dan delapan tamu: lima VM plus tiga container. Kondisi itu persis yang ada di lab kami saat artikel ini ditulis.

ip -br link di host itu menunjukkan satu NIC fisik enp87s0 dengan kecepatan 100 Mb/s full duplex. Di atasnya ada enam bridge: satu vmbr0 untuk semua tamu, plus lima fwbr* kecil milik firewall per VM.

Yang tidak ada: nol bond. Artinya kalau kabel itu lepas, atau port switch-nya mati, delapan tamu ikut mati bersamaan β€” bukan karena Proxmox-nya rusak, tapi karena cuma ada satu jalan.

πŸ’‘ Tips: bridge itu seperti meja distribusi di terminal bus. Semua colokan tamu ditaruh di meja yang sama, jadi penumpang (paket) bisa pindah jalur tanpa naik bus baru. Bond itu seperti dua jalur tol paralel ke kota yang sama: tujuannya tetap satu, tapi kalau satu jalur ditutup, kendaraan masih sampai.

🧠 Konsep singkat

Bridge menjawab pertanyaan "banyak port, satu jaringan". Bond menjawab pertanyaan "banyak kabel, satu jalur". Dua masalah berbeda, dua alat berbeda.

Bridge adalah switch yang hidup di dalam kernel. Dia belajar MAC address tiap paket yang lewat, menyimpannya di tabel FDB, lalu meneruskan paket hanya ke port yang benar.

Bond adalah satu interface logis yang dibentuk dari beberapa NIC. Menurut dokumen Proxmox, ada 7 mode, dari balance-rr sampai balance-alb. Pilihan mode menentukan apakah kamu dapat cadangan, tambahan kecepatan, atau keduanya.

Masalah yang kamu hadapi Alatnya Contoh nyata
Satu host, banyak tamu, satu kabel Bridge vmbr0 menampung tap semua VM
Kabel atau port switch putus, semua tamu mati Bond dua NIC ke dua switch berbeda
Butuh dua-duanya sekaligus Bond di bawah bridge bridge-ports bond0

πŸ”Ή Bridge itu saklar yang tidak kelihatan

Bridge punya daftar port, tabel MAC, dan aturan sendiri. Di host kami, vmbr0 punya enp87s0 sebagai port fisik, lalu fwpr101p0, fwpr102p0, fwpr104p0 dan seterusnya sebagai port tamu.

Menariknya, enp87s0 tidak punya IP. Alamat 192.168.100.2/24 ada di vmbr0, dan keduanya memakai MAC yang sama: 38:f7:cd:cb:96:05. Itu bukan kebetulan β€” bridge mengambil MAC dari port pertamanya.

Setelan baku Proxmox untuk bridge juga sengaja minimalis: bridge-stp off dan bridge-fd 0. STP dimatikan dan forward delay dinolkan supaya tamu langsung jalan, bukan menunggu 30 detik. Konsekuensinya: kalau kamu membuat loop kabel, tidak ada yang memutusnya.

πŸ“Š Angka penting: satu host Proxmox bisa punya sampai 4094 bridge. Setiap VM dengan firewall aktif mendapat bridge kecil sendiri (fwbr*), jadi jumlah bridge naik cepat walau tamunya sedikit.

πŸ”Ή Bond itu bukan saklar, tapi jalur

Bond mengikat dua NIC atau lebih menjadi satu interface. Setelah terikat, dua hal penting terjadi:

  • Bond meminjam MAC slave pertamanya, lalu menimpa MAC slave lain dengan MAC yang sama. Di lab, dua slave punya MAC ce:c5:7a:94:da:a0 yang identik, padahal Permanent HW addr keduanya berbeda.
  • Switch di seberang melihat satu MAC saja. Karena itu active-backup aman dipakai di switch yang tidak dikonfigurasi apa-apa.

Mode yang butuh bantuan switch adalah 802.3ad (LACP), balance-rr, balance-xor, dan broadcast. Dokumen kernel menyebutnya tegas: mode 802.3ad "requires that the switch have the appropriate ports configured as an 802.3ad aggregation".

Untuk jaringan tamu, Proxmox menyarankan 802.3ad kalau switch mendukung LACP. Kalau tidak, pakai active-backup β€” cadangan tanpa perlu utak-atik switch.

⚠️ Hati-hati: balance-tlb dan balance-alb tidak cocok dipakai bersama bridge yang menampung tamu, karena keduanya butuh tahu alamat lokal yang sebenarnya. Untuk host virtualisasi, pilihannya praktis cuma dua: 802.3ad atau active-backup.

πŸ”Ή Urutan lapisan yang benar

Kesalahan paling mahal bukan salah mode, tapi salah urutan. Susunan yang benar, dari bawah ke atas:

NIC fisik      enp87s0, enp88s0        <- inet manual, tanpa IP
   |
bond0          802.3ad / active-backup <- satu MAC, satu antrean
   |
vmbr0          bridge                  <- di sinilah IP host
   |
tap101i0 ...   port tamu               <- satu MAC per VM

Kebalikannya β€” bridge di bawah bond β€” tidak akan jalan, karena bond butuh slave fisik, bukan port bridge. Di /etc/network/interfaces, susunan ini terlihat sebagai iface bond0 inet manual lalu bridge-ports bond0 di blok bridge.

🧩 Istilah penting

Istilah Arti sederhana Kenapa penting
Bridge Saklar jaringan versi software Menyatukan port fisik dan port tamu
Port Colokan pada bridge Tempat NIC atau tap menempel
FDB Tabel MAC address bridge Menentukan paket dikirim ke port mana
Ageing Umur entri MAC, bawaan 30 detik Entri hilang kalau MAC itu diam
STP Protokol pencegah loop Di PVE dimatikan demi kecepatan
Forward delay Jeda sebelum port meneruskan Di PVE diisi 0
Bond Gabungan beberapa NIC jadi satu Sumber cadangan dan tambahan lebar jalur
Slave NIC anggota bond Kalau satu mati, yang lain ambil alih
Mode bond Aturan pembagian lalu lintas Menentukan butuh switch dikonfigurasi atau tidak
miimon Interval cek status kabel (ms) Tanpa ini, bond tidak tahu kabel putus
LACP Protokol negosiasi 802.3ad Bond dan switch harus sepakat dulu
xmit hash policy Rumus pembagian paket ke slave Menentukan sebaran beban, bukan kecepatan total

πŸ”§ Praktik: membangun bridge dan bond di lab

Lab ini memakai network namespace, bukan interface produksi. Anggap netns sebagai komputer terpisah di dalam komputer: interface di dalamnya tidak terlihat oleh host, dan menghapusnya mengembalikan semuanya seperti semula.

πŸ§ͺ Uji cepat: sebelum mulai, pastikan ip netns list kosong dan jumlah link host tidak berubah setelah lab selesai. Di run kami: 24 link sebelum, 24 link sesudah, 0 netns tersisa.

πŸ”Ή Langkah 1: dua ruang dan empat kabel

Kita butuh satu sisi "server" (l2host) dan satu sisi "switch" (l2sw). Kabelnya dibuat dari pasangan veth.

ip netns add l2sw
ip netns add l2host

ip link add b2a type veth peer name s2a
ip link add b2b type veth peer name s2b
ip link set b2a netns l2host
ip link set b2b netns l2host
ip link set s2a netns l2sw
ip link set s2b netns l2sw

Setelah dipindah, b2a dan s2a adalah dua ujung kabel yang sama. Mencabut b2a sama dengan mencabut kabel di sisi server.

πŸ”Ή Langkah 2: sisi switch, bridge biasa tanpa LACP

ip -n l2sw link add br0 type bridge
ip -n l2sw link set s2a master br0
ip -n l2sw link set s2b master br0
ip -n l2sw addr add 10.99.5.1/24 dev br0
ip -n l2sw link set br0 up
ip -n l2sw link set s2a up
ip -n l2sw link set s2b up

Ini meniru switch murah yang tidak tahu apa-apa soal bonding. Semua port dianggap port biasa.

πŸ”Ή Langkah 3: bond 802.3ad lebih dulu

ip -n l2host link add bond0 type bond mode 802.3ad miimon 100 lacp_rate fast
ip -n l2host link set b2a down
ip -n l2host link set b2a master bond0
ip -n l2host link set b2a up
ip -n l2host link set b2b down
ip -n l2host link set b2b master bond0
ip -n l2host link set b2b up
ip -n l2host addr add 10.99.5.2/24 dev bond0
ip -n l2host link set bond0 up

Tunggu sekitar lima detik supaya LACP sempat mengirim PDU, lalu baca hasilnya.

ip netns exec l2host cat /proc/net/bonding/bond0

πŸ”Ή Langkah 4: bukti bahwa LACP tidak punya partner

Hasil di lab kami, dipotong ke bagian penting:

Bonding Mode: IEEE 802.3ad Dynamic link aggregation
LACP rate: fast
Active Aggregator Info:
        Aggregator ID: 1
        Number of ports: 1
        Partner Mac Address: 00:00:00:00:00:00

Slave Interface: b2a
Aggregator ID: 1
    port state: 79
details partner lacp pdu:
    system mac address: 00:00:00:00:00:00
    port state: 0

Slave Interface: b2b
Aggregator ID: 2
    port state: 71

Tiga hal yang harus kamu baca dari situ:

  • Partner Mac Address: 00:00:00:00:00:00 β€” switch di seberang tidak pernah menjawab LACP.
  • Number of ports: 1 β€” agregator aktif hanya berisi satu port, bukan dua.
  • Aggregator ID berbeda (1 dan 2) β€” tiap slave jadi kelompoknya sendiri, jadi tidak ada penggabungan.

πŸ”₯ Kasus nyata: seorang siswa memasang dua kabel, menyalakan mode 802.3ad, lalu ping tetap 0% loss. Dia menyimpulkan LACP sudah jalan dan menutup tiket. Sebulan kemudian file backup 40 GB tetap butuh waktu yang sama seperti satu kabel β€” karena memang hanya satu kabel yang dipakai.

⚠️ Hati-hati: di kernel 6.8, bond 802.3ad tanpa partner tetap meneruskan paket (state defaulted). Jadi ping yang lancar bukan bukti LACP bekerja. Buktinya ada di Partner Mac Address dan Number of ports, bukan di ping.

πŸ”Ή Langkah 5: kabel yang sama, mode diganti dengan benar

Menulis mode baru ke /sys/class/net/bond0/bonding/mode saat bond sudah punya slave ditolak di lab kami:

sh: 1: echo: echo: I/O error
Bonding Mode: IEEE 802.3ad Dynamic link aggregation

Mode tidak berubah. Cara yang berhasil: hapus bond, lalu buat ulang dengan slave yang sama.

ip -n l2host link del bond0
ip -n l2host link add bond0 type bond mode active-backup miimon 100
ip -n l2host link set b2a down
ip -n l2host link set b2a master bond0
ip -n l2host link set b2a up
ip -n l2host link set b2b down
ip -n l2host link set b2b master bond0
ip -n l2host link set b2b up
ip -n l2host addr add 10.99.5.2/24 dev bond0
ip -n l2host link set bond0 up

Hasilnya: Bonding Mode: fault-tolerance (active-backup), Currently Active Slave: b2a, dan ping tetap 0% loss. Kabel sama, IP sama, hasil berbeda β€” karena modenya berbeda.

πŸ”Ή Langkah 6: ukur failover, jangan cuma percaya tulisan "up"

Jalankan ping cepat di latar, lalu cabut satu kabel di tengah pengujian.

ip netns exec l2host ping -i 0.2 -c 20 10.99.5.1 > /tmp/p2.log 2>&1 &
sleep 1.4
ip -n l2host link set b2a down
wait
grep "packet loss" /tmp/p2.log
ip netns exec l2host grep "Currently Active Slave" /proc/net/bonding/bond0

Dua run di lab memberi angka berbeda: run pertama 24 dari 25 paket sampai (4% loss), run kedua 20 dari 20 (0% loss). Keduanya memindahkan slave aktif ke kabel kedua.

πŸ“Š Angka penting: dengan miimon 100, failover selesai di kisaran 100–200 ms. Untuk SSH itu tidak terasa; untuk game atau panggilan video, itu satu kedipan yang kelihatan. Kalau butuh lebih cepat, turunkan miimon, tapi jangan di bawah 10 ms.

πŸ”Ή Langkah 7: bond tanpa miimon, kegagalan yang paling mahal

Sekarang ulangi dengan bond yang miimon-nya tidak diisi. Ini yang sering terjadi saat orang menulis konfigurasi dari ingatan.

ip -n l2host link add bond1 type bond mode active-backup
ip netns exec l2host grep -E "MII Polling|Currently Active" /proc/net/bonding/bond1

Keluarannya MII Polling Interval (ms): 0. Lalu kabel dicabut saat ping jalan:

20 packets transmitted, 7 received, 65% packet loss, time 3950ms
Currently Active Slave: b2c
MII Status: up

Perhatikan tiga hal. Paket hilang 65%, slave aktif tidak pindah, dan MII Status kedua slave tetap up padahal satu kabel sudah tidak punya carrier. Bond benar-benar tidak tahu ada kabel yang putus.

Dokumen kernel sudah memperingatkan ini: "It is critical that either the miimon or arp_interval … be specified, otherwise serious network degradation will occur during link failures". Setelah dipaksa manual, trafik langsung kembali:

ip netns exec l2host sh -c 'echo b2d > /sys/class/net/bond1/bonding/active_slave'
2 packets transmitted, 2 received, 0% packet loss

πŸ”Ή Langkah 8: bukti bridge bekerja sebagai saklar

Di sisi switch, cek status port dan tabel MAC setelah ada trafik.

ip netns exec l2sw bridge link show
ip netns exec l2sw bridge fdb show br0 | grep -v permanent

Port yang kabelnya dicabut berubah status jadi disabled dan bertanda NO-CARRIER, sementara port lain tetap forwarding. Tabel FDB mencatat MAC bond di salah satu port saja β€” bukti bahwa bridge mengirim paket ke satu tujuan, bukan menyalin ke semua port.

Di host produksi kami, pola yang sama terlihat lebih ramai: MAC dc:2c:6e:5c:c7:16 tercatat di enp87s0 (mesin fisik di LAN), sedangkan MAC bc:24:11:79:8a:96 tercatat di fwpr101p0 (salah satu VM). Satu bridge, banyak pemilik MAC.

πŸ”Ή Langkah 9: bersih-bersih

ip netns del l2sw
ip netns del l2host
ip netns list
ip -br link | wc -l

Kalau jumlah link kembali seperti sebelum lab, berarti tidak ada sisa interface yang menempel di host.

🏭 Dipakai di dunia kerja

  • Sekolah dan lab: satu server PVE melayani lab 30 PC. Kalau kabel uplink lepas saat ujian berbasis komputer, semua VM siswa mati sekaligus β€” bond active-backup memberi waktu untuk memperbaiki tanpa menghentikan ujian.
  • Kantor dan UMKM: server file dan aplikasi kasir berjalan di satu host. Bond ke dua port switch berbeda membuat satu port switch mati tidak berarti toko berhenti melayani.
  • Hosting dan VPS: penyedia sering membatasi jumlah MAC per port. Di situ bond dipakai untuk jalur storage atau migrasi, sementara jaringan tamu dibuat routed, bukan bridge biasa.
  • Klinik dan rumah sakit: aplikasi rekam medis tidak boleh putus saat jam praktik. Bond jadi syarat minimum, dan bridge dibuat terpisah antara jaringan alat medis dan jaringan tamu.
  • Industri dan OT: jaringan kontrol dan jaringan kantor dipisah bridge berbeda; bond dipakai di jalur uplink, bukan di jalur perangkat PLC yang justru butuh switch terkelola.
  • ISP dan NOC: LACP dipakai untuk menambah lebar jalur antar-perangkat, tapi hanya setelah port di switch dikonfigurasi. Tanpa itu, hasilnya satu kabel yang mahal.

βœ… Verifikasi

Jalankan berurutan. Kalau satu baris gagal, jangan lanjut ke baris berikutnya.

Pemeriksaan Perintah Yang benar
Bond ada dan slave lengkap cat /proc/net/bonding/bond0 tiap slave muncul dengan MII Status up
Mode sesuai rencana ip -d link show bond0 mode dan miimon sama dengan konfigurasi
LACP dapat partner grep "Partner Mac" /proc/net/bonding/bond0 bukan 00:00:00:00:00:00
Bridge punya port bridge link show NIC dan tap tamu tercantum
IP ada di bridge ip -br addr show vmbr0 alamat host muncul di bridge, bukan NIC
Port meneruskan bridge link show state forwarding, bukan disabled
MAC tamu terpelajar bridge fdb show br vmbr0 MAC VM muncul di port fwpr atau tap
Konfigurasi tersimpan cat /etc/network/interfaces ada bond-slaves dan bridge-ports

πŸ§ͺ Uji cepat: cara paling jujur membuktikan failover adalah mencabut kabel sungguhan saat ping -i 0.2 berjalan, lalu menghitung loss. Semua angka di artikel ini datang dari cara itu, bukan dari tampilan hijau di dashboard.

⚠️ Kesalahan umum & troubleshooting

Gejala Penyebab paling sering Cek cepat Perbaikan
Bond up, kabel putus tidak beralih miimon tidak diisi MII Polling bernilai 0 tambahkan bond-miimon 100
Dua kabel, kecepatan tidak naik LACP tanpa partner Partner Mac nol konfigurasi port switch jadi LACP
Mode tidak mau berubah diubah saat slave aktif echo balas I/O error hapus bond, buat ulang
Tamu tidak dapat jaringan bridge tanpa port uplink bridge link show kosong tambahkan bridge-ports
Host tidak bisa diakses IP dipasang di NIC, bukan bridge ip -br addr pindahkan IP ke vmbr0
Jaringan kadang putus dua jalur aktif bersamaan MAC sama di dua port satu jalur saja, atau LACP

Beberapa jebakan yang tidak masuk tabel:

  • ifreload -a langsung dari SSH bisa memutus koneksimu sendiri. Siapkan akses console (IPMI, KVM, atau layar fisik) sebelum menyentuh konfigurasi jaringan.
  • File /etc/network/interfaces di Proxmox bertanda "do NOT modify this file directly" β€” perubahan dari GUI akan menimpanya. Pilih satu cara: GUI, atau file, jangan campur.
  • ifenslave sudah usang menurut dokumen kernel. Pakai ip link atau konfigurasi ifupdown2.
  • Bond tidak menambah kecepatan satu koneksi. Satu aliran TCP tetap lewat satu slave; yang bertambah adalah total antar banyak aliran.

πŸ” Catatan keamanan & etika

  • Bridge bukan pemisah keamanan. Semua port di satu bridge berada di satu domain broadcast. Memisahkan tamu butuh VLAN atau firewall, bukan bridge tambahan tanpa aturan.
  • Uji failover di luar jam produksi. Mencabut kabel di jam kerja adalah uji yang benar dengan waktu yang salah.
  • Jangan bagikan inventaris MAC dan topologi port ke grup publik. Data itu peta jalan bagi orang yang ingin masuk.
  • LACP bukan keamanan. Dia protokol negosiasi, bukan autentikasi. Keamanan port diatur di switch lewat port security dan VLAN.
  • Catat perubahan port switch. Kalau kamu mengubah sisi host tanpa mengubah sisi switch, kegagalannya akan muncul sebagai "jaringan lambat" yang sulit dilacak.

πŸ“Œ Kesimpulan

  • Bridge menyatukan port; bond menyatukan kabel. Salah pilih alat, masalahnya tidak selesai.
  • Urutan yang benar: NIC β†’ bond β†’ bridge β†’ tamu. IP host tinggal di bridge.
  • miimon wajib diisi. Tanpa itu bond tetap "up" sambil membuang 65% paket.
  • 802.3ad hanya berguna kalau switch dikonfigurasi. Ping yang lancar bukan buktinya.
  • Failover 100–200 ms itu normal dan terukur β€” bukan angka yang perlu ditakuti, tapi juga bukan nol.

Langkah berikutnya: setelah jalur host beres, uji skenario yang lebih jujur β€” nyalakan satu VM, cabut satu kabel, dan pastikan SSH ke VM tetap hidup. Kalau itu lolos, bond-mu benar-benar bekerja.

πŸ”— Materi terkait

πŸ“š Referensi

  • Proxmox VE Documentation, Host System Administration β€” bagian Linux Bridge, Linux Bond, Routed Configuration. [1]
  • Linux Kernel Documentation, Linux Ethernet Bonding Driver HOWTO β€” mode bonding, syarat switch, dan peringatan miimon/arp_interval. [2]
  • Manual ip-link(8) β€” pembuatan bond, veth, dan bridge lewat netlink.
  • Manual bridge(8) β€” bridge link, bridge fdb, dan bridge vlan.
  • IEEE 802.1AX β€” standar link aggregation yang menjadi dasar LACP.
  • ifupdown2, Network Interface Management β€” kunci konfigurasi bond-slaves, bond-mode, bridge-ports.