От автора: в этом уроке мы с вами продолжим работу с библиотекой phpQuery, которая значительно упрощает парсинг сайтов. Ранее мы использовали функцию file_get_contents для получения контента по запрошенному адресу. В этом уроке мы начнем знакомиться с библиотекой cURL, которая гораздо более продвинута в плане получения удаленного контента.
Из урока вы узнаете, как работать с библиотекой cURL для получения контента удаленного сайта. Узнаете, как получить отдельно заголовки сайта и отдельно его контент, как записать контент в файл или переменную, или же просто вывести на экран.
В результате урока мы напишем отдельную функцию, которая будет получать и возвращать контент средствами библиотеки cURL и используем написанную функцию в нашей функции parser().
Фреймворк YII2. Быстрая разработка с современным PHP фреймворком
Узнай тонкости современной веб-разработки с помощью фреймворка YII2
Узнать подробнее
Хотите изучить регулярные выражения на PHP?
Прямо сейчас посмотрите 12-ти часовой курс по регулярным выражениям на PHP!
Смотреть курс
А как записать в файл, все что мы получили при помощи phpQuery?
У меня получается только всю страницу записать
Функциея file_put_contents, к примеру, позволяет писать в файл. Если у Вас записывается вся страница, значит Вы и записываете всю страницу. Записывать надо только то, что нужно.
Так же хотелось бы увидеть:
1. Поддержка проксей;
2. Поддержка авторизации;
3. Мультипоточность..
Поддерживаю предложение! А так же добавлю:
…
4. Парсинг с инициализацией скриптов типа fancybox и подобных..