Hallo @sebastian_hamburg und @michaelcloud, das Problem mit der robots.txt und blockierten Assets ist in der Tat ein bekanntes Thema, besonders wenn man die Standardgenerierung nutzt und dann manuell eingreift.
PrestaShop 8.2.5 generiert die robots.txt über Shop-Parameter > Traffic & SEO -> Robots-Datei generieren. Standardmäßig enthält sie Anweisungen, die bestimmte Bereiche wie Suchergebnisse, Warenkorb und Admin-Bereich ausschließen, was auch sinnvoll ist.
Das Problem mit den blockierten CSS/JS-Dateien entsteht meistens, wenn die robots.txt zu aggressiv konfiguriert ist oder manuell Disallow: /themes/ oder ähnliches hinzugefügt wurde. Der PrestaShop-Standard sollte /themes/classic/assets/ oder /themes/hummingbird/assets/ nicht blockieren. Überprüfe bitte, ob in deiner manuell angepassten robots.txt solche Zeilen stehen.
Lösungsvorschlag für robots.txt:
- Generierung: Generiere die
robots.txt einmalig über das Back Office neu.
- Manuelle Anpassung: Lade die generierte Datei herunter und öffne sie. Füge am Ende der Datei deine spezifischen
Disallow-Regeln für Seiten hinzu, die nicht indexiert werden sollen (z.B. CMS-Seiten ohne relevanten Inhalt), aber stelle sicher, dass Allow: /*.css$ und Allow: /*.js$ und die Pfade zu deinen Theme-Assets (z.B. Allow: /themes/classic/assets/) weiterhin vorhanden sind.
- Upload: Lade die manuell angepasste
robots.txt per FTP in das Hauptverzeichnis deines Shops hoch. Achte darauf, dass du sie danach nicht mehr über das Back Office neu generierst, sonst werden deine Änderungen wieder überschrieben.
XML-Sitemap:
Die XML-Sitemap wird standardmäßig vom PrestaShop Core über das Modul "Google Sitemap" (ps_googlesitemap) generiert, das du unter Module > Modul-Manager findest. Hier kannst du einstellen, welche Inhaltstypen in die Sitemap aufgenommen werden sollen. Für spezifische Ausschlüsse von einzelnen URLs gibt es im Standard keine direkte Option, außer die jeweiligen Kategorien, Produkte oder CMS-Seiten auf "nicht indexierbar" zu setzen oder eben manuell aus der generierten Sitemap zu entfernen (was aber bei jeder Regenerierung wieder rückgängig gemacht wird). Das Modul sollte die wichtigsten URLs abdecken. Wenn du feinere Kontrolle brauchst, wäre eine manuelle Sitemap-Pflege oder ein spezialisiertes Modul nötig, aber für die meisten Shops reicht der Standard des Google Sitemap Moduls aus.
Der Fokus liegt darauf, die Assets in der robots.txt nicht zu blockieren, da Google die Seite sonst nicht richtig rendern kann.