скрипт который обращается к урлу парсит между тем то и тем то инфу и сохраняет, меняет лимит итд знаю что есть, не могу найти
недавно тоже понадобелось так и смог что то найти, написал сам за 15 минут если надо то могу выложить - на php(ignore_user_abort(1), set_time_limit(0)