PHP сканирует сайт, который использует cloudflare
Я хочу сканировать некоторые конкретные значения (например, newstext) с веб-сайта (который не принадлежит мне).
file_get_contents()
не работает, возможно заблокирован php.ini.
Поэтому я попытался сделать это с помощью curl, проблема в том, что:
Все, что я получаю, это текст перенаправления из cloudflare.
Мой сканер должен сделать что-то вроде:
перейдите на страницу -> подождите 5secs cloudflare redirect -> сверните страницу.
Любые идеи, как сканировать страницу после времени ожидания cloudfare? (в PHP)
редактировать: так что я много чего пробовал, проблема все та же ..
более конкретно: он сканирует только страницу перенаправления cloudflare. (таким образом, я получаю страницу, которая перенаправляет на хост, cloudflare находится впереди. когда я свернулся на localhost, он принимает localhost, так что перенаправление не работает.) Нет ли способа начать сохранение повторно сохраняемых данных после 5secs "curling" ?