Данные и источники

Не начинайте с «нам нужен дашборд».

Сначала сформулируйте вопрос, на который должен отвечать результат.

Хорошая задача содержит:

• кто будет использовать результат;
• какое решение он принимает;
• какие показатели для этого нужны;
• откуда берутся данные;
• какой результат можно проверить.

Например:

Нужно сравнивать показатель X по регионам Казахстана, видеть изменение по годам и для каждого значения показывать источник, период и ограничения.

Первый этап лучше ограничить одним вопросом и одним полным сценарием от источника до публикации.

Для каждого источника зафиксируйте:

• название;
• владельца;
• первичный URL;
• что содержит;
• географию;
• доступные периоды;
• формат;
• режим обновления;
• дату проверки;
• ограничения.

Источник должен быть отдельной сущностью, а не ссылкой, скопированной в десятки страниц.

Так можно обновить адрес или статус в одном месте и сохранить связи с показателями.

Проверьте:

• кто публикует данные;
• понятно ли определение;
• насколько стабилен формат;
• есть ли история публикаций;
• покрывает ли источник нужную географию и период;
• менялась ли методика;
• есть ли ограничения использования.

«Официальный сайт» сам по себе не гарантирует пригодность конкретного набора для вашего вопроса.

У показателя должен быть человек или роль, способные подтвердить смысл расчёта.

Владелец методики отвечает за:

• определение;
• выбор источника;
• допустимость сравнения;
• правила расчёта;
• ограничения интерпретации.

Разработчик может реализовать формулу, но не должен самостоятельно решать, что означает отраслевой показатель.

Минимальный паспорт:

• название;
• определение;
• единица;
• период;
• география;
• источник;
• метод расчёта, если есть;
• ограничения;
• дата проверки.

Определение не должно просто повторять название.

Если число рассчитано Qaz Support, это указывается отдельно от значений, опубликованных первичным источником.

Период отвечает на вопрос «к какому времени относится значение».

Дата публикации источником – когда данные были выпущены.

Проверено Qaz Support – когда источник сверялся.

Обновлено на сайте – когда изменилась публичная страница.

Они могут различаться на месяцы и не должны заменять друг друга.

Пользователь должен понимать цепочку:

первичный источник → конкретная версия → преобразование → опубликованное значение.

Если значение взято напрямую – скажите это.

Если рассчитано – покажите методику.

Если используются несколько источников – перечислите роль каждого.

Если метод расчёта изменился, укажите:

• что изменилось;
• с какого периода;
• можно ли сравнивать старые и новые значения;
• пересчитана ли история;
• какая версия методики действует сейчас.

Не рисуйте непрерывный временной ряд, если данные перестали быть сопоставимы.

Показатель может описывать только часть явления.

Не делайте причинный вывод из простой корреляции. Не принимайте зарегистрированные случаи за реальную распространённость без проверки методики. Не сравнивайте территории с разным покрытием.

Рядом с числом полезно коротко объяснять наиболее вероятную ошибочную интерпретацию.

Различайте:

• значение равно нулю;
• значение отсутствует;
• показатель не применим;
• источник не публикует значение;
• запись требует проверки.

Не заменяйте пропуск нулём, предыдущим значением или средним без методического основания.

Версия меняется, если источник пересмотрел данные, изменилась методика или Qaz Support исправил обработку.

Текущая версия должна быть очевидна. Предыдущие версии сохраняются, когда они имеют исследовательскую или проверочную ценность.