Etiket: robots.txt

Arama motorları sitenizi taramaz ve indexlemez. User-agent: * Disallow: / Admin klasörü arama motoru botları tarafından taranmaz ve indexlenmez. User-agent: * Disallow: /admin .gif uzantılı dosyaların taranmasını engeller. User-agent: * Disallow: /*.gif$