Das muss so gemacht werden: HTTPS Verbindung zu PMS ab Version 0.9.12.3 mit Fritzbox (DNS-Rebind-Schutz)
Hintergrund ist, dass die Web App und der Plex Server zwei voneinander getrennte Sachen sind. Daher gelten die gleichen Regeln und Einschränkungen wie bei einem Zugriff auf den Server von einer anderen Maschine im lokalen Netzwerk.
Warum das so ist, wird hier im Detail erklärt: https://support.plex.tv/articles/206225077-how-to-use-secure-server-connections/