Um Google die Indexierung einer .css Datei zu verbieten, muss folgender Code in die robots.txt:
User-agent: Googlebot
Disallow: /unterordner/cssdatei.css
Man kann auch allen Suchmaschinen die Indexierung von allen CSS-Dateien verbieten:
User-agent: *
Disallow: /*.css$
Es gibt noch eine Vielzahl weiterer Robots, Crawler und Spider. Eine Liste dazu findet man auf robotstxt.org in der Robots Database. Mit den
Google Webmaster-Tools kann man seine robots.txt testen.