Tak se konecne zadarilo.
Zapnul jsme logovani na WAN (LICI:Network\Firewall\Zones\Wan\Edit\Advanced Settings\Enable logging on this zone)
V System logu nalezl toto:
Apr 3 14:58:41 turris kernel: [148384.675379] REJECT wan in: IN=pppoe-wan OUT= MAC= SRC=XXX.XXX.XX.19 DST=ZZZ.ZZZ.ZZZ.150 LEN=88 TOS=0x00 PREC=0x00 TTL=120 ID=8674 PROTO=47
XXX je vzdaleny server
ZZZ muj router
PROTO=47 je ono slavné GRE 
našel jsem ještě tento návod:
doinstaloval kmod-ipt-raw, což samo o sobě nepomohlo.
Přidal jsem pravidlo do firewallu přes LUCI.
Any gre
From IP XXX.XXX.XXX.19 in wan
To any router IP on this device
ACCEPT INPUT
A začalo to fungovat. Teď ještě budu zjišťovat co přesně bylo třeba nastavit(nainstalovat), aby to začalo fungovat.
Díky @peci1 za pomoc.