TODO.txt

1. парсить Google Shopping
2. сохранять в первой таблице имена доменов, урлы и найденные на сайте емейлы
3. поиск емейлов вести не глубже 2 уровня (1 ссылка с home page,  как правило это Contacts)
4. в первой таблице иметь столбец Exclude, if Exclude==1 то не парсить это сайт. Пользователь может ставить 1 в процессе работы краулера. Необходимо сохранять исключенные домены (в отдельной таблице?) для следующих прогонов