Список доменов Яндекс.Каталога (2014)

База в формате: xls, xlsx

Файл: YaCa_02.2014.xls.zip

(1903 скачиваний)

База из списка доменов в Яндекс.Каталога. Предоставляется в виде одного .xls файла разбитого на листы/категории.
Всего доменов: ~159000

Описание полей в таблице:

1. Название категории в Яндекс каталоге, вида: категория/подкатегория/субкатегория/… полный уровень вложенности
2. Количество сайтов присутствующих в данной категории на момент парсинга
3. URL адрес категории в ЯК
4. URL адрес сайта
5. ТИц сайта (по яндекс бару)
6. Google PageRank сайта
7. Присвоенный регион (по яндекс бару)
8. Присвоенная тематика (по яндекс бару)
9. Название сайта в каталоге
10. Описание сайта в каталоге
11. Ссылка на скриншот сайта в каталоге
12. Ссылка на Whois данные сайта (для поддоменов и различных экзотических доменных зон ссылка может быть некорректна)

Особенности:

[li]С целью уменьшения количества дублей в процессе парсинга были исключены ссылки на категории, содержащие в себе /synt2/ и /geo/[/li][li]База почищена на дубли (по полному совпадению URL)[/li]

[li]Hi-Tech - 11104[/li][li]Работа - 1133[/li][li]Учёба - 10323[/li][li]Дом - 31148[/li][li]Общество - 5586[/li][li]Развлечения - 4756[/li][li]Отдых - 9637[/li][li]Культура - 16518[/li][li]Спорт - 6827[/li][li]СМИ - 3577[/li][li]Бизнес - 47052[/li][li]Справки - 3789[/li][li]Авто - 5779[/li][li]Порталы - 823[/li][li]Универсальное - 1000.[/li]

[li]Новые сайты - 1000[/li][li]Мобильный ЯК - 1394[/li]

[li]основной ЯК - 159052[/li][li]мобильный ЯК - 1394[/li]