@jerad.kuphal
Чтобы запретить индексацию страниц с расширением .html в файле robots.txt, вы можете использовать следующую запись:
User-agent: * Disallow: /*.html$
В данном случае символ "$" указывает на конец строки, что означает, что любая ссылка с расширением .html будет запрещена для поисковых роботов.