Pfsense auf Vmware mit kuriosem Verhalten

Moin Zusammen,

ich bin gerade dabei eine PFSense einzurichten.

Umgebung: ESX 6.5
2xWAN (1&1 DSL und Vodafone Cable)
1&1 mit einer Fritzbox
VF mit dieser komischen Standard-VF-Kabelbox

Dazu hab ich 3 Schnittstellen am Server genommen.
1xVodafone (192.168.0.1) (Schnittstellen-IP der Pfsense: 192.168.0.2)
1x1&1 (192.168.177.1) (Schnittstellen-IP der Pfsense: 192.168.177.2)
1xLAN (192.168.178.7)

Pfsense installiert und Schnittstellen eingerichtet.
Dann hab ich nochmal den PFSense Assi durchlaufen lassen und ich bekomme eine Ping-Antwort von google.de.
Also versucht irgendwas im Web zu machen. Das geht dann nachdem ich den Assi durchgeklickt habe für ca. 15-20 Sekunden und danach ist Schicht im Schacht.
Der Ping läuft indessen munter weiter. Manchmal bricht er irgendwann ab, aber viel später als der Webzugriff.

Lass ich den Assi wieder durchlaufen klappt es wieder für ein paar Sekunden.

Apropos: Das ganze geht überhaupt nur, wenn ich die Vodafonebüchse abklemme und über 1&1 ins Netz gehe. Habe ich beide dran und stelle das Loadbalancing in der pfsense ein geht gar nichts.

Will mir irgendwie nicht in den Kopf was da schief läuft.

Grüße