ifhub.club/robots.txt

User-agent: *
Disallow: /auth/
Disallow: /rss
Disallow: /search/
Disallow: /stream
Disallow: /feed
Disallow: /ajax
Disallow: /admin
Disallow: /subscribe/
Disallow: /tag/$
Disallow: /page/$
Disallow: /error/$
Disallow: /settings/$
Disallow: /content/$
Disallow: /talk/$
# Sitemap: http://example.com/sitemap.xml
Fixes #216: robots.txt 2013-05-22 10:43:00 +03:00			`User-agent: *`
Перенос экшенов Login и Registration в экшен Auth 2015-02-18 10:04:34 +02:00			`Disallow: /auth/`
Fixes #216: robots.txt 2013-05-22 10:43:00 +03:00			`Disallow: /rss`
			`Disallow: /search/`
			`Disallow: /stream`
			`Disallow: /feed`
			`Disallow: /ajax`
			`Disallow: /admin`
			`Disallow: /subscribe/`
			`Disallow: /tag/$`
			`Disallow: /page/$`
			`Disallow: /error/$`
			`Disallow: /settings/$`
Переработка типов топиков, теперь типы можно создавать самому, удаление функционала старого фотосета Обновление framework Фикс комментариев 2014-01-11 18:27:27 +02:00			`Disallow: /content/$`
Поддержка sitemap 2017-03-30 12:08:25 +03:00			`Disallow: /talk/$`
			`# Sitemap: http://example.com/sitemap.xml`