Как получить код html-страницы средствами python?

Пользователь

linnea

от linnea , в категории: Python , месяц назад

51 | 0

python

1 ответ

Пользователь

evgenycc

от evgenycc , месяц назад

@linnea Для получения html-кода страницы можно воспользоваться библиотекой requests. Для ее установки напишите в терминале или командной строке:

pip install requests

После того, как библиотека будет установлена, следует импортировать ее в скрипт и выполнить запрос к интересующей вас странице. Однако, следует понимать, что с помощью простых запросов не удастся получить содержимое страницы, которое подгружается с помощью js-скриптов. Для того, чтобы получить такое содержимое, можно воспользоваться selenium. Вот код для получения html-кода с помощью requests:

import requests

headers = {
    'user-agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 '
                  'YaBrowser/23.1.1.1114 Yowser/2.5 Safari/537.36'
}

try:
    url = "https://www.python.org/"
    resp = requests.get(url=url, headers=headers)
    if resp.status_code == 200:  # проверка статус-кода
        print(resp.text)  # печать полученного кода страницы
        with open('index.html', 'wb') as html:  # сохранение содержимого запроса в файл
            html.write(resp.content)
except Exception as ex:
    print(ex)

0 | 0

Как получить код html-страницы средствами python?

1 ответ

Похожие обсуждения: