2

Как парсить сайты через https? Пытаюсь подключиться к веб-интерфейсу elastix-asterisk. Использую код:

    $curl = curl_init();
    curl_setopt($curl, CURLOPT_FAILONERROR, 1);
    curl_setopt($curl, CURLOPT_FOLLOWLOCATION, 1); // allow redirects
    curl_setopt($curl, CURLOPT_TIMEOUT, 10); // times out after 4s
    curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1); // return into a variable
    curl_setopt($curl, CURLOPT_URL, "https://192.168.0.18/");
    curl_setopt($curl, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.1.5) Gecko/20091102 Firefox/3.5.5 GTB6");
    curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, false);

    $data = curl_exec($curl);

    print_r($data);

Причем часть сайтов парсится например яндекс, твитер и хабр. А здесь возникает ошибка:

Warning: file_get_contents(): SSL operation failed with code 1. OpenSSL Error messages: error:14090086:SSL routines:ssl3_get_server_certificate:certificate verify failed in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

Warning: file_get_contents(): Failed to enable crypto in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

Warning: file_get_contents(https://192.168.0.18/): failed to open stream: operation failed in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

В файрфоксе пишет при подключении:

192.168.0.18 использует недействительный сертификат безопасности. К сертификату нет доверия, так как он является самоподписанным. Сертификат действителен только для localhost.localdomain Код ошибки: SEC_ERROR_UNKNOWN_ISSUER

Тогда я взял сертификат и добавил его к остальным, но опять же появляется ошибка:

Warning: file_get_contents(): Peer certificate CN=localhost.localdomain' did not match expected CN=192.168.0.18' in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

Warning: file_get_contents(): Failed to enable crypto in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

Warning: file_get_contents(https://192.168.0.18/): failed to open stream: operation failed in C:\OpenServer\domains\parser.loc\simple_html_dom.php on line 75

То есть сертификат выпущен для localhost.localdomainn. Как быть дальше? С эластиксом получилось, а сдругим сайтом не выходит пишет при заходе на сайт:

ошибка в firefox

как парсить такие сайты?

1 ответ 1

4

Отключите проверку сертификатов.

curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($curl, CURLOPT_SSL_VERIFYHOST, false);
4
  • да, действительно, получилось с эластиксом, с другим сайтом не получается так.
    – Batan112
    21 июл 2016 в 10:06
  • 1
    Значит с другим сайтом проблема глубже, чем неверный сертификат. Например он вовсе не доступен по https
    – iosp
    21 июл 2016 в 10:51
  • с другим сайтом разобрался через iframe и javascript) спасибо)
    – Batan112
    23 июл 2016 в 12:53
  • С другим сайтом и правда было сложнее, нужно было добавить поддержку ГОСТ в SSL, по этой инструкции сделал zubuntu.ru/…
    – Batan112
    26 июл 2016 в 6:31

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими пользовательским соглашением, политикой конфиденциальности и политикой о куки

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.