SEO: robots.txt einführen

Für search engine optimization und um ungewünschtes Crawlen zu verhindern.

https://developers.google.com/search/docs/crawling-indexing/robots/intro

Müssten wir ggf. gemeinsam klären, was wir hier wollen.