So verhindern Sie,  dass die meisten Webcrawler von Suchmaschinen eine Seite indizieren:

Name: Roboter

Inhalt: noindex

<meta name="robots" content="noindex">

HTM

So verhindern Sie, dass nur Google-Webcrawler eine Seite indizieren:

Name: Googlebot

Inhalt: noindex

<meta name="googlebot" content="noindex">

HTML