
Google: инструмент «Параметры URL» – это не замена robots.txt
- Статистика 179 1
- Автор: admin
- Раздел: SEO, Продвижение сайта.Копирайт, Статьи
- Комментарии: Комментариев нет

На днях сотрудник Google Джон Мюллер объяснил в Twitter, что инструмент «Параметры URL» в Search Console – это не замена файлу robots.txt.
Один из вебмастеров поинтересовался, использует ли Google инструмент «Параметры URL», доступный в старой версии GSC.
Мюллер ответил утвердительно.
На это Мюллер ответил, что она не является заменой файлу robots.txt. Поэтому, чтобы что-то точно не сканировалось, его нужно должным образом заблокировать – т.е., использовать robots.txt.
It's not a replacement for the robots.txt — if you need to be sure that something's not crawled, then block it properly.
— 🍌 John 🍌 (@JohnMu) May 29, 2020
Отправить ответ