# Alle Suchmaschinen aussperren # User-agent: * # Disallow: / # Crawl delay für slurp -> suche ddos User-agent: Slurp Crawl-delay: 20 # Keine Erlaubnis fürs /suche da hierüber auch die Artikel angezeigt werden. User-agent: * Disallow: */suche Disallow: */pic Disallow: */werke Disallow: */newsletter Disallow: */ww_allgemeines_und_alltag Disallow: */ww_brockhaus_enzyklopaedie Disallow: */ww_computer_und_technik Disallow: */ww_geld_und_wirtschaft Disallow: */ww_geschichte_und_politik Disallow: */ww_koerper_und_geist Disallow: */ww_kunst_und_kultur Disallow: */ww_naturwissenschaften Disallow: */ww_sprache_und_wortschatz