Привет.
У меня есть задача пропарсить сайт, вытянуть несколько полей.

Сначала мне необходимо собрать все ссылки на товар.
Потом перейти по этим ссылкам на товары, вытянуть несколько полей и сохранить их в файл.

Я хотел спросить как решаются подобные задачи. Я не пойму порядок дейтсвий.

Сначала найти и сохранить все ссылке на товар например в БД.
Потом по крону запускать файл обработчик этих ссылок?
или
Для этого пишутся какие то демоны?