Заголовки HTTP-запросов несут в себе важную информацию для сервера. Они позволяют настраивать параметры запроса, передавать данные в теле, аутентифицировать пользователя. В статье мы рассмотрим, как использовать библиотеку cURL в PHP для отправки запросов с кастомными заголовками.
Основы работы с заголовками в cURL
Заголовки HTTP представляют собой строки текста, которые передаются в запросах и ответах протокола HTTP между клиентом и сервером. Они несут различную служебную информацию, позволяющую корректно обработать запрос и подготовить ответ.
Рассмотрим наиболее важные заголовки:
- User-Agent - идентифицирует клиентское приложение (браузер, скрипт)
- Referer - адрес предыдущей страницы, откуда последовал переход
- Authorization - данные для аутентификации пользователя
- Content-Type - тип данных в теле запроса (JSON, форма и т.д.)
- Accept - форматы ответа, поддерживаемые клиентом (HTML, JSON и т.д.)
Для работы с заголовками в PHP используется библиотека cURL. Основные функции:
- curl_init() - инициализировать новый сеанс cURL
- curl_setopt() - установка параметров запроса
- curl_exec() - отправка запроса и получение ответа
- curl_getinfo() - получение информации о запросе
- curl_close() - закрытие сеанса cURL
Для установки заголовков запроса используется параметр CURLOPT_HTTPHEADER. Ему передается массив строк с именами и значениями заголовков:
$headers = [ 'User-Agent: MyUserAgent', 'Accept: application/json', ]; curl_setopt($ch, CURLOPT_HTTPHEADER, $headers); Рассмотрим пример установки некоторых распространенных заголовков запроса в cURL:
User-Agent
curl_setopt($ch, CURLOPT_USERAGENT, 'MyCustomUserAgent 1.0'); 
Referer
$referer = 'https://example.com/previous'; curl_setopt($ch, CURLOPT_REFERER, $referer); Content-Type
$data = ['key' => 'value']; // данные запроса curl_setopt($ch, CURLOPT_POSTFIELDS, json_encode($data)); curl_setopt($ch, CURLOPT_HTTPHEADER, ['Content-Type: application/json']); После отправки запроса методом curl_exec(), заголовки ответа сервера будут содержаться в переменной $response. Чтобы получить только заголовки ответа, необходимо установить параметр CURLOPT_HEADER:
curl_setopt($ch, CURLOPT_HEADER, true); $response = curl_exec($ch); // только заголовки Также важно правильно обрабатывать ошибки cURL запросов. Функция curl_error($ch) вернет текст последней ошибки. Код ответа сервера можно получить с помощью curl_getinfo($ch, CURLINFO_HTTP_CODE):
if(curl_errno($ch)) { echo 'Ошибка: ' . curl_error($ch); } $code = curl_getinfo($ch, CURLINFO_HTTP_CODE); if ($code >= 400) { echo 'Неверный ответ сервера: ' . $code; } Таким образом, мы рассмотрели основные способы работы с заголовками HTTP в библиотеке cURL PHP - их установку и получение, отправку запросов и обработку ошибок. Далее перейдем к более продвинутым возможностям.
Расширенные возможности заголовков
Помимо установки базовых заголовков запроса, cURL позволяет решать более сложные задачи:
- Работа с cookie
- Аутентификация пользователей
- Защита от парсинга сайтов
- Использование прокси-серверов
- Отправка пакетных и многопоточных запросов
Работа с cookie
Для сохранения и передачи куки между запросами в cURL используются параметры CURLOPT_COOKIEFILE и CURLOPT_COOKIEJAR:
curl_setopt($ch, CURLOPT_COOKIEFILE, 'cookies.txt'); // чтение curl_setopt($ch, CURLOPT_COOKIEJAR, 'cookies.txt'); // сохранение // куки будут автоматически сохраняться и отправляться между запросами Аутентификация пользователей
Для аутентификации на веб-сервере в cURL можно использовать несколько механизмов:
Basic auth
$login = 'mylogin'; $pass = 'mypass'; curl_setopt($ch, CURLOPT_USERPWD, "$login:$pass"); Digest auth
$login = 'mylogin'; $pass = 'mypass'; curl_setopt($ch, CURLOPT_HTTPAUTH, CURLAUTH_DIGEST); curl_setopt($ch, CURLOPT_USERPWD, "$login:$pass"); Также возможна аутентификация с помощью протоколов OAuth, Auth0 и других. Для этого заголовок Authorization формируется в специальном формате.
Защита от парсинга сайтов
Чтобы обойти некоторые методы защиты от парсинга, можно подменить заголовки User-Agent, Accept, Accept-Language, чтобы сервер считал запрос выполненным из браузера.
$headers = [ 'User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:109.0) Gecko/20100101 Firefox/110.0', 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,*/*;q=0.8', 'Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3' ]; curl_setopt($ch, CURLOPT_HTTPHEADER, $headers); Однако при использовании Javascript и продвинутой защиты этого может быть недостаточно.
Работа через прокси
Чтобы выполнить запросы через прокси-сервер, в cURL можно указать его адрес и порт:
$proxy = 'Proxy_IP:Proxy_Port'; curl_setopt($ch, CURLOPT_PROXY, $proxy); При необходимости также можно задать параметры аутентификации на прокси-сервере.
В целом, у cURL есть гибкие средства для решения различных задач при работе с заголовками HTTP. Это позволяет использовать библиотеку для реализации взаимодействия с веб-серверами в PHP сценариях.
