PHP. Параллельные запросы

[Port_Artur]

Исходные данные: VPS с 10-12 ядрами.

PHP код:

for( $i = 1; $i <= 10; $i++ )

{

$content=file_get_contents("https://****/$i/***/");

} 


Время выполнения цикла 3,65 секунды.

Задача.
Нужно все 10 file_get_contents выполнить одновременно, сократив время в 10 раз.

Вопрос.
Как?

[pastuhoff]

Ищите по запросу "multicurl".

[Port_Artur]

Попробовал:

curl_multi_init();

curl_multi_exec();

curl_multi_close();

Время:1,68 сек.

Прогресс есть, но всего в 2 раза быстрее.
Маловато.

добавлено через 29 минут
Первый раз был удачней. Сейчас стабильно 2 секунды.

[Шуранов]

Ненулевая вероятность, что это время параллельного отклика. На ваши запросы должен сформироваться ответ, идущий, к тому-же через защищенное соединение.
Можете вместо curl_multi сделать pcntl_fork несколько раз, получите параллельное исполнение в виде нескольких процессов.

[Port_Artur]

Шуранов, а как будет через pcntl_fork выглядеть вот этот пример:

PHP код:

$urls = array(
   'http://www.google.ru/',
   'http://www.altavista.com/',
   'http://www.yahoo.com/'
    );
$mh = curl_multi_init();
foreach ($urls as $i => $url) {
    $conn[$i]=curl_init($url);
    curl_setopt($conn[$i],CURLOPT_RETURNTRANSFER,1);  //ничего в браузер не давать
    curl_setopt($conn[$i],CURLOPT_CONNECTTIMEOUT,10); //таймаут соединения
    curl_multi_add_handle ($mh,$conn[$i]);
}
//Пока все соединения не отработают
do { curl_multi_exec($mh,$active); } while ($active);
//разбор полетов
for ($i = 0; $i < count($urls); $i++) {
    //ответ сервера в переменную
    $res[$i] = curl_multi_getcontent($conn[$i]); 
    curl_multi_remove_handle($mh, $conn[$i]);
    curl_close($conn[$i]);
}
curl_multi_close($mh);
print_r($res); 


Я и с curl_multi не работал никогда, просто нашёл пример удачный, а вот с pcntl_fork вообще никак.
Помогите пожалуйста.

[Drow]

Попробуй неблокирующие сокеты. В сети есть примеры.

[Port_Artur]

Направление, - это хорошо. Но лучше бы рабочий пример по условию темы.

[Vitaliy]

Мне когда такое понадобилось - просто сделал дополнительный скрипт-запускалку параллельных процессов. Вот такой примерно:

PHP код:

<?php
for ($i=0;$i<10;$i++){
    $headers="GET $path HTTP/1.1\r\n";
    $headers .="Host: $host\r\n";
    $headers .="Connection: Close\r\n\r\n";
        
    $sock=fsockopen($host,80);
    fputs($sock,$headers);
    fclose($sock);
}
?>

$path - это адрес вашего скрипта с для которого нужны параллельные процессы.

Он за доли секунды запускает сколько указать в цикле параллельных процессов.

[Port_Artur]

А $host ?

Полученные данные как сохранить?

PHP код:

$content=file_get_contents("https://****/$i/***/"); 


[Vitaliy]

Сообщение от Port_Artur

А $host ?

Полученные данные как сохранить?

PHP код:

$content=file_get_contents("https://****/$i/***/"); 


$host - это домен вашего сайта (или можно по ip).

А на счет сохранить - как вам надо так и сохраняете. Вариантов масса. Например, каждый поток может сохранять в свой файл. Чтобы названия файлов отличались можно вызывать эти потоки пронумеровано, например так:

PHP код:

<?php
$host="domain.com"; 
$script_name="/script.php"; //имя вашего скрипта

for ($i=0;$i<10;$i++){
    
    $path=$script_name."?n=$i";
    
    $headers="GET $path HTTP/1.1\r\n";
    $headers .="Host: $host\r\n";
    $headers .="Connection: Close\r\n\r\n";
        
    $sock=fsockopen($host,80);
    fputs($sock,$headers);
    fclose($sock);
}
?>

А в свой вызываемый скрипт вносите дополнение, чтобы он определял с каким номером его вызвали и с тем же номером создавал файл. Всё просто и понятно вроде...