Перейти к содержанию

Шаблоны

Сайты, где сбор данных разрешён правилами и robots.txt: открытые данные, наука, учебные песочницы. Для своих сайтов сохраните шаблон в панели и поделитесь ссылкой.

Песочницы

books.toscrape.comкнопка «Далее»

Книжный магазин-песочница

1000 вымышленных книг с ценой, наличием и рейтингом, по 20 на странице. Идеальный первый шаблон: учит собирать карточки и проходить по кнопке «Далее».

  • Название
  • Цена
  • Наличие
  • Рейтинг
  • +2
quotes.toscrape.comкнопка «Далее»

Цитаты: песочница

Цитаты известных людей с автором и тегами, постраничный вывод. Показывает, как собирать списковые элементы с несколькими тегами.

  • Цитата
  • Автор
  • Теги
  • Ссылка на автора
quotes.toscrape.comбесконечная прокрутка

Цитаты: бесконечная прокрутка

Те же цитаты, но новые подгружаются при прокрутке. Шаблон для отработки сбора со страниц с бесконечной лентой.

  • Цитата
  • Автор
  • Теги
webscraper.io«Показать ещё»

Каталог авто: кнопка «Показать ещё»

Тестовый каталог автомобилей с годом, страной, пробегом и ценой; товары догружаются кнопкой «Load More». Учит работать с кнопкой подгрузки.

  • Название
  • Описание
  • Год
  • Страна
  • +4
webscraper.ioбесконечная прокрутка

Каталог авто: бесконечная прокрутка

Тот же тестовый каталог авто, но позиции подгружаются при прокрутке. Удобно проверить, что расширение дожидается новых карточек.

  • Название
  • Описание
  • Год
  • Страна
  • +4
scrapethissite.comномера страниц

Статистика хоккейных команд

Таблица сезонной статистики хоккейных команд с номерами страниц и поиском. Шаблон для таблиц с пагинацией через номера страниц.

  • Команда
  • Год
  • Победы
  • Поражения
  • +5
scrapethissite.comодна страница

Страны мира: песочница

Около 250 стран со столицей, населением и площадью на одной странице. Самый простой шаблон «одна страница — одна таблица».

  • Страна
  • Столица
  • Население
  • Площадь, км²

Открытые данные

en.wikipedia.orgодна страница

Википедия: страны по населению

Таблица стран и территорий с населением, долей от мирового, датой и источником оценки. Готовая база для аналитики и инфографики.

  • Страна/территория
  • Население
  • % от мира
  • Дата
  • +2
ru.wikipedia.orgодна страница

Википедия: города-миллионеры России

Города России с населением более миллиона: место, численность, прирост к переписи 2010 года. Короткая и аккуратная таблица на русском.

  • Место
  • Город
  • Население на 01.01.2021, тыс.
  • Прирост к переписи 2010
  • +1
data.worldbank.orgодна страница

Всемирный банк: перечень индикаторов

Индикаторы Всемирного банка, сгруппированные по 20 темам, со ссылками на данные. Удобная карта показателей для исследований и отчётов.

  • Тема
  • Индикатор
  • Ссылка
wiki.openstreetmap.orgодна страница

OpenStreetMap: справочник тегов

Справочник основных тегов OpenStreetMap: ключ, значение, тип объекта и описание. Нужен всем, кто готовит выгрузки или фильтры по OSM.

  • Ключ
  • Значение
  • Тип элемента
  • Описание

Госданные

catalog.data.gov«Показать ещё»

Data.gov: каталог наборов данных США

Более 400 тыс. открытых наборов данных США: название, ведомство, дата обновления и форматы. Помогает быстро составить подборку датасетов по теме.

  • Название
  • Организация
  • Уровень (федеральный/штат/город)
  • Дата обновления
  • +2
mintrans.gov.ruодна страница

Минтранс России: открытые данные

Перечень наборов открытых данных Минтранса (около 36, все в CSV) на одной странице. Отправная точка для транспортной аналитики.

  • №
  • Название набора
  • Формат
  • Ссылка
minfin.gov.ruодна страница

Минфин России: реестр открытых данных

Реестр из 100+ наборов открытых данных Минфина со статусом, числом скачиваний и датой обновления. Удобно найти актуальные финансовые датасеты.

  • №
  • Наименование
  • Статус
  • Скачивания
  • +3
mchs.gov.ruодна страница

МЧС России: открытые данные

Таблица наборов открытых данных МЧС с просмотрами, скачиваниями и датой обновления. Небольшой, но аккуратный шаблон для госпорталов с такой же вёрсткой.

  • №
  • Название
  • Просмотры
  • Скачивания
  • +3

Наука

Технологии

Разное