Как запретить в robots.txt ссылки у которых на конце .html?

Пользователь

от jerad.kuphal , в категории: HTML/CSS , 7 месяцев назад

Как запретить в robots.txt ссылки у которых на конце .html?

Facebook Vk Ok Twitter LinkedIn Telegram Whatsapp

1 ответ

Пользователь

от stephon , 7 месяцев назад

@jerad.kuphal 

Чтобы запретить индексацию страниц с расширением .html в файле robots.txt, вы можете использовать следующую запись:


User-agent: * Disallow: /*.html$


В данном случае символ "$" указывает на конец строки, что означает, что любая ссылка с расширением .html будет запрещена для поисковых роботов.