Hi pmneo,
die Fritz!Fon hat keinen eigenen DNS-Server. Sie leitet lediglich die Anfragen von Deinen Rechnern ans Internet weiter.
Wo Du statische DNS-Einträge erstellen kannst, hängt von Deinem Betriebssystem ab. Unter Linux geht das in /etc/hosts - unter Windows in C:\WINDOWS\system32\drivers\etc\hosts