hjälp med ubuntu server Netplan config

Hej
Summering av problemet;
Ethernet in i lägenhet. Får 4 publika IP av ISP.
Ethernet in i switch, fyra sladdar ut ur switchen.
Från switch går sladd:
1: Router med he.net 6in4 IPV6 tunnel.. Den Router till Port 1 i Ubuntu server
2: Port 2 i Ubuntu Server
3: Port 3 i Ubuntu Server
4: Port 4 i Ubuntu Server

Ubuntu servern har alltså ett nätverkskort med 4 inportar. Dessa 4 portar har olika mac adresser.

Kopplar jag bara in kabeln från routern med IPv6 tunneln, då fungerar alla IPv6 adresser fint.
Jag kan pinga med dem, SSH'a in på dem mm.
Om jag kopplar in de andra sladdarna, då är det som om det blir konflikter och jag får ingen rätsida på vad som fungerar.
Men ipv6 numren fungerar iaf inte rätt.

Vad jag vill:
Ha möjlighet att använda 3 av de 4 publika ipv4 jag får av ISP i min ubuntu server.. samtidigt kunna använda de ca 10 IPv6 nummren jag får genom IPv6 tunneln.

Lagt galet många timmar på detta och hittar inget sätt att lösa det. Någon som har ideer?

Min Netplan(med ändrade privata IP):
network:
version: 2
ethernets:
enp3s0: //Detta interface som är kopplat till router emd IPV6 tunnel
dhcp4: true
dhcp6: no
addresses:
- "2001:0a0:1c:4d2::1/64"
- "2001:0a0:1c:4d2::2/64"
- "2001:0a0:1c:4d2::3/64"
- "2001:0a0:1c:4d2::4/64"
- "2001:0a0:1c:4d2::5/64"
- "2001:0a0:1c:4d2::6/64"
- "2001:0a0:1c:4d2::7/64"
- "2001:0a0:1c:4d2::8/64"
- "2001:0a0:1c:4d2::9/64"
- "2001:0a0:1c:4d2::10/64"
- "2001:0a0:1c:4d2::11/64"
nameservers:
addresses:
- 2001:4860:4860::8888
- 2001:4860:4860::8844
routes:
- to: "::/0"
via: "2001:0a0:1b:4d1::1"
ipv6-privacy: false
enp4s0:
dhcp4: true
dhcp-identifier: mac
nameservers:
addresses:
- 8.8.8.8
- 8.8.4.4
enp5s0:
dhcp4: true
dhcp-identifier: mac
nameservers:
addresses:
- 8.8.8.8
- 8.8.4.4
enp6s0:
dhcp4: true
dhcp-identifier: mac
nameservers:
addresses:
- 8.8.8.8
- 8.8.4.4