http://webtools.live2support.com/se_robots.php тук най отдоло има форма за правене на тази файл иначе най лесно може да го направиш по този начин
User-agent: *
Disallow: /директорията или директорията и файла който нетрябва да се индексират
ПРИМЕР
User-agent: *
Disallow: /admin
Disallow: /pic/admin.jpg
......