я есть сайт с 2000 страницами, и я хочу перебирать каждую страницу для создания карты сайта, используяfile_get_html() функция и регулярные выражения.

Очевидно, что это не может быть выполнено за одно выполнение на стороне сервера, так как у него закончится время из-за максимального времени выполнения. Я предполагаю, что он должен выполнить меньшие действия, сохранить прогресс в базе данных и затем поставить в очередь следующую задачу. Какие-либо предложения?