User-agent: *
Disallow: /cgi-bin
# запрещаем индексацию системных папок
Disallow: /blog/wp-admin
Disallow: /blog/wp-includes
Disallow: /blog/wp-content/plugins
Disallow: /blog/wp-content/cache
Disallow: /blog/wp-content/themes
# запрещаем индексацию страницы входа и регистрации
Disallow: /blog/wp-login.php
Disallow: /blog/wp-register.php
# разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком
Allow: /blog/wp-content/uploads
# разрешаем индексацию контента
Allow: /*
Allow: /articles/*
Allow: /blog/*
Allow: /blog/index.php*
Allow: /blog/?p=*
Sitemap: http://sander.ru/sitemap.xml


User-agent: yandex
Disallow: /cgi-bin
# запрещаем индексацию системных папок
Disallow: /blog/wp-admin
Disallow: /blog/wp-includes
Disallow: /blog/wp-content/plugins
Disallow: /blog/wp-content/cache
Disallow: /blog/wp-content/themes
# запрещаем индексацию страницы входа и регистрации
Disallow: /blog/wp-login.php
Disallow: /blog/wp-register.php
# разрешаем индексацию вложений, особо мнительным можно запретить папку wp-content целиком
Allow: /blog/wp-content/uploads
# разрешаем индексацию контента
Allow: /*
Allow: /articles/*
Allow: /blog/*
Allow: /blog/index.php*
Allow: /blog/?p=*
Sitemap: http://sander.ru/sitemap.xml

User-agent: Googlebot-Image
Disallow:
# разрешаем индексацию контента
Allow: /*
Allow: /articles/*
Allow: /blog/*
Allow: /blog/index.php*
Allow: /blog/?p=*
# разрешаем индексировать изображения
Sitemap: http://sander.ru/sitemap.xml

User-agent: YandexBlog
Disallow:
# разрешаем индексацию контента
Allow: /*
Allow: /articles/*
Allow: /blog/*
Allow: /blog/index.php*
Allow: /blog/?p=*
# разрешаем индексировать rss-ленту
Sitemap: http://sander.ru/sitemap.xml