Premesso che ESXi non è Linux (al più la parte di management usa una Busybox), il punto è che quella porta è una porta di servizio che ti serve per il corretto funzionamento di ESXi.
La soluzione, al limite, è mettere gli host in una rete di management opportunamente protetta da regole di firewall perimetrali.