Tüm Arama Motoru Botlarının Siteyi İndexlemesini Engelleme

Arama motorları sitenizi taramaz ve indexlemez.
User-agent: *
Disallow: /

Admin klasörü arama motoru botları tarafından taranmaz ve indexlenmez.
User-agent: *
Disallow: /admin

.gif uzantılı dosyaların taranmasını engeller.
User-agent: *
Disallow: /*.gif$