Hallo @alexanderadmin,
da hat @christoph_shop einen guten Punkt. Standardmäßig sollte PrestaShop 8.2.3 keine entscheidenden CSS- oder JS-Dateien blockieren. Die robots.txt-Generierung im Backend (Shop-Parameter -> Traffic & SEO -> Robots.txt generieren) nutzt eine interne Vorlage, die für moderne Shops optimiert ist und Assets im Theme grundsätzlich zulässt.
Dein Problem, dass manuell hinzugefügte Regeln überschrieben werden, ist das erwartete Verhalten. Die Backend-Funktion ist dazu da, die robots.txt komplett neu zu schreiben. Wenn du benutzerdefinierte Regeln dauerhaft einfügen möchtest, hast du zwei Optionen:
- Die Backend-Generierung nutzen und die Regeln danach manuell hinzufügen: Das ist aber fehleranfällig, da bei jeder erneuten Generierung deine Änderungen verloren gehen. Nicht ideal für die Wartung.
- Die automatische Generierung deaktivieren und eine komplett eigene robots.txt hochladen: Du kannst die Datei
robots.txt im Root-Verzeichnis deines Shops manuell erstellen und hochladen. Dann einfach die Backend-Funktion nicht mehr verwenden. Achte darauf, dass du alle wichtigen PrestaShop-Pfade für die Sitemap und Admin-Bereiche zulässt, die standardmäßig drin wären.
Für das Problem mit den blockierten CSS/JS-Dateien: Prüfe bitte den Inhalt deiner aktuellen robots.txt direkt im Browser (deinshop.de/robots.txt). Es ist möglich, dass eine alte oder angepasste Vorlage verwendet wird. Vergewissere dich, dass keine Zeilen wie Disallow: /themes/ oder Disallow: /assets/ enthalten sind. Wenn doch, lade die Datei über das Backend neu und schau, ob das Problem dann behoben ist. Die XML-Sitemap wird übrigens auch im selben Bereich generiert und sollte dann in der Google Search Console eingereicht werden, damit Google alle Seiten deines Shops effizient crawlen kann.