Homelab - το υπολογιστικό και δικτυακό οικοσύστημα του σπιτιού μας

[ChriZ]

Σε κάθε περίπτωση και το ίδιο το proxmox δεν είναι τόσο lightwight όπως ο esxi, οπότε προσωπικά πιστεύω ότι και με το ubuntu δεν θα έχει και μεγάλη διαφορά...

[BlueChris]

Σε κάθε περίπτωση και το ίδιο το proxmox δεν είναι τόσο lightwight όπως ο esxi, οπότε προσωπικά πιστεύω ότι και με το ubuntu δεν θα έχει και μεγάλη διαφορά...

Έχει όμως τρομακτικά περισσότερες δυνατότητες σε σπιτικό hardware, κάτι που ο esxi το βλέπει και κλαίει.... εγώ ειλικρινά έχω πάθει πλάκα .. ναι οκ μπορεί να υπάρξει κάνα θεματάκι (όπως εγώ και ο Netblues που μας λειώνει σε high traffic το μηχάνημα) αλλά σιγά σιγά όλα λύνονται.

[BlueChris]

Λοιπόν αφού τα έσπασα, κατάφερα τελικά και ενεργοποίησα το WoL επιτυχώς. Τόσα χρόνια δεν είχα συναντήσει ΜΒ που να μην είχε ρύθμιση καθαρή στην κάρτα δικτύου την Onboard για αυτό οπότε έπρεπε να γίνει κάτι άλλο να αλλάξει η ρύθμιση της κάρτας.

Το συγκεκριμένο παράδειγμά μου είναι από Asus B550 με AMD Cpu.

Καταρχήν όλα τα παπατζιλίκια για εξτρα οικονομία του στυλ ERP, EPU , GreenPower κλπ που έχουν τα ΜΒ σε ειδικό section πρέπει να είναι OFF. Αν είναι ON ακυρώνεται το WoL.
Επίσης θέλουμε ανοιχτό το Power from PCI στο Bios

Τώρα επειδή εγώ είχα Proxmox έπρεπε να δω καταρχήν αν η κάρτα υποστήριζε η Realtek η Onboard Wake on lan οπότε με το command

ethtool enp7s0 (το όνομα της κάρτας που με ένοιαζε με το είδα με ενα απλό ip addr)

και πήρα αυτό σαν αποτέλεσμα

ethtool enp7s0
Settings for enp7s0:
        Supported ports: [ TP    MII ]
        Supported link modes:   10baseT/Half 10baseT/Full
                                100baseT/Half 100baseT/Full
                                1000baseT/Full
                                2500baseT/Full
        Supported pause frame use: Symmetric Receive-only
        Supports auto-negotiation: Yes
        Supported FEC modes: Not reported
        Advertised link modes:  10baseT/Half 10baseT/Full
                                100baseT/Half 100baseT/Full
                                1000baseT/Full
                                2500baseT/Full
        Advertised pause frame use: Symmetric Receive-only
        Advertised auto-negotiation: Yes
        Advertised FEC modes: Not reported
        Link partner advertised link modes:  100baseT/Half 100baseT/Full
                                             1000baseT/Full
                                             2500baseT/Full
        Link partner advertised pause frame use: No
        Link partner advertised auto-negotiation: Yes
        Link partner advertised FEC modes: Not reported
        Speed: 2500Mb/s
        Duplex: Full
        Auto-negotiation: on
        master-slave cfg: preferred slave
        master-slave status: slave
        Port: Twisted Pair
        PHYAD: 0
        Transceiver: external
        MDI-X: Unknown
        Supports Wake-on: pumbg
        Wake-on: d
        Link detected: yes

το θέμα μας εδώ είναι 2 γραμμές, η πρώτη
Supports Wake-on: pumbg
που δηλώνει πως η κάρτα το υποστηρίζει και 2η γραμμή
Wake-on: d
που μας λέει πως είναι Off.

πάμε λοιπόν και δίνουμε ένα command να αλλάξουμε το d σε g για να σωθεί στην κάρτα το WoL on, που στη συγκεκριμένη περίπτωση τη δική μου είναι
ethtool -s enp7s0 wol g

τώρα πλέον στο wake-on λέει g

ethtool enp7s0
Settings for enp7s0:
        Supported ports: [ TP    MII ]
        Supported link modes:   10baseT/Half 10baseT/Full
                                100baseT/Half 100baseT/Full
                                1000baseT/Full
                                2500baseT/Full
        Supported pause frame use: Symmetric Receive-only
        Supports auto-negotiation: Yes
        Supported FEC modes: Not reported
        Advertised link modes:  10baseT/Half 10baseT/Full
                                100baseT/Half 100baseT/Full
                                1000baseT/Full
                                2500baseT/Full
        Advertised pause frame use: Symmetric Receive-only
        Advertised auto-negotiation: Yes
        Advertised FEC modes: Not reported
        Link partner advertised link modes:  100baseT/Half 100baseT/Full
                                             1000baseT/Full
                                             2500baseT/Full
        Link partner advertised pause frame use: No
        Link partner advertised auto-negotiation: Yes
        Link partner advertised FEC modes: Not reported
        Speed: 2500Mb/s
        Duplex: Full
        Auto-negotiation: on
        master-slave cfg: preferred slave
        master-slave status: slave
        Port: Twisted Pair
        PHYAD: 0
        Transceiver: external
        MDI-X: Unknown
        Supports Wake-on: pumbg
        Wake-on: g
        Link detected: yes

από εκεί και πέρα, χωρίς να ξέρω γιατί αλλά αυτό πρέπει να γίνεται κάθε φορά που κάνει boot ο proxmox οπότε πρέπει να μπει μια ρύθμιση μόνιμη σε αυτόν. Για αυτό το λόγο μπαίνει μια γραμμή μετά τη δήλωση του interface στο /etc/network/interfaces που είναι η εξής:

iface enp7s0 inet manual
post-up /sbin/ethtool -s enp7s0 wol g

Έκανα shutdown, έστειλα magic packet και άναψε οπότε λειτουργεί. Μετά το boot τσέκαρα και με το ethtool τη ρύθμιση και ήταν g οπότε όλα οκ.

- - - Updated - - -

Ξέχασα να πω, πως γιατί η Asus πουλάει MB που δεν έχει ρύθμιση καθαρή στο ΜΒ για το WoL αλλά και που έχει την κάρτα να το έχει off... με ξεπερνάει. Τουλάχιστον βρήκα λύση γιατί το AMD το έχω OFF εκτός αν το ανοίξω για να κάνω κάτι γιατί έχει το προσωπικό μου VM Πάνω του.....ε δεν μπορούσα να το κάνω από τη δουλειά που ήθελα να κάνω πειράματα.

[BlueChris]

Λοιπόν, ενημέρωση πέρι Proxmox και τα παγώματα που κάνει σε μεγάλες ταχύτητες με τον virtio driver σε windows 10.

Για δοκιμή πήρα μια άλλη κάρτα, την HP 10/25GB 2-Port 640SFP28 Adapter MCX4121A-ACAT-HP (Mellanox CX-4 MCX4121A-ACAT ). Δεν ήθελα άλλη μια x710 (έχει μέσα τέτοια το MS-01 και κάνει ακριβώς τα ίδια και οι Ε810 είναι πανάκριβες. Ήθελα αλλαγή chipset να δοκιμάσω κάτι άλλο πλην Intel).

Η κάρτα κάνει ακριβώς τα ίδια 100% με τον virtio driver. Παντού σε οποιοδήποτε linux όλα παίζουν λαμπάδα.. στα windows όχι. Την δοκίμασα και passthrough στα windows και κάνει και αυτή τα ίδια... αν δεν της βάλεις τα Queues στα 16 και τα buffer rx/tx σε 4096, δεν ανεβάζει ταχύτητα . Τώρα με passthrough δεν έπαιξα πολύ γιατί η Nvidia έχει στον driver 100 ρυθμίσεις αλλά αυτό που ήθελα το είδα. Θα μείνω με αυτήν κυρίως για το ότι είναι ποιο καινούργια, Gen3 σε σχέση με την HPE 560 Sfp+ που ήταν Gen2, έχει ποιο πολλά features και πάει και 25gbit (Αν προχωρήσω προς τα εκεί).

Με λίγα λόγια ΤΖΙΦΟΣ... πέταξα λεφτά πάλι

Υ.Γ. είμαι ένα κλικ να φύγει το proxmox και να μπουν esxi παντού πάλι... πλέον εφόσον έχω φτιάξει πάλι κανονικό pc για μένα κάνω ότι θέλω..... απλά είναι κρίμα.. τόση προσπάθεια και τόσος κόπος να το στείλω έτσι.
Υ.Γ. Παίζω πλέον με Jumbo packets on στα unifi μου, σε όλους τους proxmox και στα περισσότερα VM που αφορούν δίκτυο ή file services και κέρδισα 5-10% σε ταχύτητα)

- - - Updated - - -

Τέλος του χρόνου έρχονται 2 σημαντικά πράγματα στον Proxmox

1. H Veeam θα κυκλοφορήσει επίσημα το Backup for Proxmox που θα κουμπώνει στο υπάρχων οικοσύστημά της.
2. Θα βγει λογικά και Proxmox Datacenter Manager με βάση του τι λένε οι mods στο forum του proxmox

Υπάρχει και αυτό για manage που ναι δεν είναι αυτό που θα φτιάξει η Proxmox φυσικά και έχει μείνει Alfa έκδοση, αλλά είναι ομορφούλι (δεν μπορείς να κάνεις και πολλά... ούτε καν edit ένα VM)

https://cluster-manager.fr/