Все материалы журнала по этому тегу.
Киселев Александр28 июл 2025Как настроить robots.txt: синтаксис директив User-agent, Disallow, Allow, Sitemap, различия Google и Яндекса, примеры и частые ошибки.
Киселев Александр11 июн 2025Готовые примеры robots.txt для WordPress, Bitrix, Tilda и других CMS: что закрывать от индексации, а что открывать для Google и Яндекса.
Екатерина Киселева11 июн 2025Разбираем, зачем нужен robots.txt, как он влияет на индексацию сайта в Яндексе и Google, и как правильно настроить его для WordPress и WooCommerce.
Киселев Александр26 дек 2023PHP-скрипт и правила .htaccess для отдачи уникальных robots.txt и sitemap.xml на каждом домене мультисайта.
