Обновление Rolling Curl

13 сентября 2010

Обновился rolling-curl — PHP-класс для параллельного выполнения большого количества асинхронных HTTP-запросов при помощи curl, который я начал поддерживать в мае 2010.

Пример использования можно посмотреть в анонсе библиотеки. Сегодня я остановлюсь на изменениях, сделанных в основном LionsAd, за что ему огромное спасибо.

Исправлена ошибка, не позволяющая перезаписать значения из конфигурации CURL по умолчанию.
Теперь используется curl_multi_select, что должно убрать излишнюю нагрузку на процессор.
В параметры обработчика теперь передаётся $request, содержащий соответствующий объект запроса.
Класс Request переименован в RollingCurlRequest.
Добавлен функционал для работы с группами запросов. Смотрите RollingCurlGroup и README.
Теперь можно настроить таймаут для curl_multi_select.
single_curl теперь возвращает true.
Улучшенный README с дополнениями.

Пробуем и обновляемся

Комментарии RSS по email OK

№3097

Тормоз 13 сент. 2010 г., 2:04:14

Apache License - это что? Можно вкратце? Какие права и обязанности?
№3098

Ali 13 сент. 2010 г., 7:31:44

Возможно свободное изменение, распространение измененных копий за исключением названия, что тут понимать то?
№3099

Sam 13 сент. 2010 г., 12:09:24

Apache License 2.0 ну или коротко и ясно в wiki.
№3101

Сергей 13 сент. 2010 г., 18:52:31

А ещё есть библиотека Текст ссылки
№3102

Тормоз 13 сент. 2010 г., 19:11:14

Блин, нифига себе коротко.
№3103

Сергей 13 сент. 2010 г., 22:12:59

Теперь используется curl_multi_select, что должно убрать излишнюю нагрузку на процессор.

Т.е. теперь эта проблема решена?
№3104

mihdan 13 сент. 2010 г., 23:14:53

Неплохая либа, часто юзаю - доволен. Хотя и есть траблы на шараварных хостингах - но это мелочи.
№3105

mihdan 13 сент. 2010 г., 23:20:03

Кнопки в хроме 6-м очень страшные - не помешали бы padiing или font-size поменьше

http://clip2net.com/clip/m42230/1284405519-clipxm9114-9kb.png
№3106

Sam 13 сент. 2010 г., 23:49:32

Тормоз

В общем, можно делать всё, что угодно, кроме вырезания копирайтов.

Сергей

Должна быть решена. Проверьте.
№3129

Николай 17 сент. 2010 г., 12:05:22

и чем оно лучше http://code.google.com/p/phpmulticurl/ ?
№3131

Sam 17 сент. 2010 г., 14:59:43

Николай

Не знаю, я phpmulticurl не использовал.
№3149

akuba 23 сент. 2010 г., 11:50:17

а есть еще MultiCurl.class.php от Vadym Timofeyev
№3340

Tedeus 03 нояб. 2010 г., 2:33:57

а как на счет включить в библиотеку перебор CURLOPT_USERAGENTв заданом масиве? думаю будет полезно...
№3347

Sam 04 нояб. 2010 г., 0:54:59

UA можно задать при добавлении URL.
№3764

kolyuchy 19 янв. 2011 г., 11:42:28

Скажите, для изменения таймаута между соединениями, достаточно изменить переменную "$timeout = 10;" в файле RollingCurl.php?
№3765

Sam 19 янв. 2011 г., 12:57:23

Это таймаут, а не пауза. Таймаута, насколько я помню, не предусмотрено.
№3766

kolyuchy 19 янв. 2011 г., 13:55:34

т.е. получается что запросы идут один за одним и это невозможно отрегулировать?
№3767

Сергей 19 янв. 2011 г., 13:57:33

См. http://code.google.com/p/multirequest/ там у MultiRequest_Handler есть опция requestingDelay
№3768

kolyuchy 19 янв. 2011 г., 14:02:21

2 Сергей: у меня уже используется rollingcurl, переход на другую библиотеку невозможен
№3769

Sam 19 янв. 2011 г., 18:59:16

kolyuchy, получается, что так. По крайней мере на данный момент.
№6917

Макс 28 окт. 2012 г., 2:12:20
Для тех, кому нужен RollingCurl, но с поддержкой работы со списками прокси-серверов "на лету", а так же имеющий бонусы в виде:
- загрузка proxy-list из файла/массива
- проверка работоспособности прокси
- проверка отдаваемого прокси-сервером контента
- загрузка useragent-list из файла/массива
- подмена proxy/useragent «на лету»
- режим «веб-консоли»
- логирование действий
и прочее - можете посмотреть в сторону класса на php Текст ссылки, написанного на основе ныне не поддерживающегося Rolling Curl.