Список доменов Яндекс.Каталога (2014)

Список доменов Яндекс.Каталога (2014)

База в формате: xls

Актуально на дату: 2014

Поделиться:
База из списка доменов в Яндекс.Каталога. Предоставляется в виде одного .xls файла разбитого на листы/категории.
Всего доменов: ~159000

Описание полей в таблице:

1. Название категории в Яндекс каталоге, вида: категория/подкатегория/субкатегория/… полный уровень вложенности
2. Количество сайтов присутствующих в данной категории на момент парсинга
3. URL адрес категории в ЯК
4. URL адрес сайта
5. ТИц сайта (по яндекс бару)
6. Google PageRank сайта
7. Присвоенный регион (по яндекс бару)
8. Присвоенная тематика (по яндекс бару)
9. Название сайта в каталоге
10. Описание сайта в каталоге
11. Ссылка на скриншот сайта в каталоге
12. Ссылка на Whois данные сайта (для поддоменов и различных экзотических доменных зон ссылка может быть некорректна)

Особенности:
  • С целью уменьшения количества дублей в процессе парсинга были исключены ссылки на категории, содержащие в себе /synt2/ и /geo/
  • База почищена на дубли (по полному совпадению URL)
Статистика записей:
 
  • Hi-Tech - 11104
  • Работа - 1133
  • Учёба - 10323
  • Дом - 31148
  • Общество - 5586
  • Развлечения - 4756
  • Отдых - 9637
  • Культура - 16518
  • Спорт - 6827
  • СМИ - 3577
  • Бизнес - 47052
  • Справки - 3789
  • Авто - 5779
  • Порталы - 823
  • Универсальное - 1000.

Дополнительная выборка:
  • Новые сайты - 1000
  • Мобильный ЯК - 1394

Всего (URL адресов):
  • основной ЯК - 159052
  • мобильный ЯК - 1394