Je nach verwendetem Betriebssystem auf dem Pi-hole-Rechner wäre diese Fehlermeldung normal, da der Webserver für Pi-hole v5 (lighttpd) betriebssytemspezifisch über verschiedene Varianten konfiguriert wird. ImDebug Log wird auf alle Varianten geprüft, die natürlich nicht alle vorhanden sein können.
Diese Meldung tritt in der Regel auf, wenn das Betriebssystem des Rechners, auf dem Pi-hole läuft, keinen bzw. einen nicht erreichbaren oder verwendbaren DNS-Server konfiguriert hat. Diese Konfiguration ist unabhängig von den Upstream-DNS-Server-Einstellungen in Pi-hole.
Generall haben also beide Meldungen auf Pi-holes Betrieb als DNS-Server zunächst keine Auswirkung.
(Die erste Meldung bezieht sich auf den Webserver, die zweite auf die DNS-Auflösung des Hostsystems.)
Mit Deiner nachstehenden Beobachtung haben sie daher auch nichts zu tun:
Das könnte in der Tat daran liegen, dass Deine Fritzbox ihre eigene IPv6-Adresse als lokalen DNS-Server anpreist.
Fritzboxen lassen sich so konfigurieren, dass sie nur die IPv4-Adresse Deines Pi-hole-Rechners via DHCP anbieten, siehe z.B. Unresolved ipv6 adress in my top list - #4 by Bucking_Horn.