В статье упоминается конвертор... на практикуме рассматривается механизм его написания или же принимаем как данность и используем как существующую наработку для наполнения БД?

Nestor_Siherti May 22 at 09:23

Тут разные инструменты использовались на разных этапах развития. На самом первом этапе я перепробовал полтора десятка разных общедоступных PDF конвертеров, прежде чем нашел приемлемый под эти задачи. И это была истинная каторга. Сейчас мы используем собственные Python инструменты для этих целей, которые никак не обсуждались и не подвергались коллективному использованию в мастерской. Возможно мы проведем в будущем мастерскую по конвертации данных из PDF в таблицы. Это на усмотрение команды, если будет сочтено интересным. Но у нас была еще одна мастерская по обработке сырых данных и агрегации таблиц. Она была достаточно востребованной и резонансной. Но там я участвовал "самым краешком". Если автор и инициатор той мастерской (Антон Ермолин) захочет о ней рассказать читателям Хабра, то я буду очень рад. Вообще обработка данных это отдельная большая тема. Там свои премудрости и свои курьезы. Вот один из таких курьезов. При подготовке к к первой мастерской был выявлен "Феномен Чеченской Республики" (так мы назвали это явление) Некоторые онкологические показатели в Чечне были в сотни раз иногда в тысячи таз выше соседних регионов. Оказалось, что многие таблицы были свёрстаны в логике бумажного формата А4 и часто разбиты на две страницы. И этот "разрыв списка территорий" как раз приходился на строчку "Республика Чечня" и конвертер каждый раз номер страницы распознавал как цифры и по своей какой то дремучей логике добавлял две - три цифры номера страниц к какому ни будь онкологическому показателю в Чечне увеличивая его на 2- 3 порядка. Выявили, откорректировали, но перепуг был не шуточный. Конвертация данных, дело тонкое....

Ryzhikov114 May 22 at 10:23

Данные о состоянии здоровья в стране, должны быть достоянием и предметом общественного обсуждения (изучения). И дашборды для этого, в отличии от плоских таблиц, весьма подходящий инструмент. Мнение фаната дашбордов и одного из авторов =))

OlgaDS May 22 at 10:35

Андрей, отличная статья! Рада была работать над этим проектом в прошлых Мастерских - и буду рада работать над ним в новой Мастерской.

Практикуму очень повезло, что ты в нем учился и продолжаешь развиваться сам и развивать Мастерскую.

yulyauertas May 22 at 20:42

Я очень надеюсь, что в ближайшем будущем Вам удастся достучаться до тех, кому этот инструмент поможет в работе и таким образом чья-то жизнь будет спасена.

Iulia2309 May 24 at 23:14

Замечательная статья, Андрей! Благодарю за возможность поучаствовать в столь важном для всех людей деле!

Хочется, чтобы как можно больше специалистов, да и простых людей, узнали о проекте.

Nestor_Siherti Jun 18 at 18:17

Уважаемые коллеги, дорогие читатели.
С момента выхода статьи прошло не так уж много времени, но в проекте произошли очень существенные изменения. Запущен веб сайт https://webmedstat.ru по визуализации данных медицинской статистики. Запущен телеграм канал https://t.me/WEBmedSTAT На нем анонсируются новости проекта и статьи по анализу выполненной визуализации данных. Приглашаем всех заходить, читать, подписываться. Уверены, будет интересно. Надеемся на живое участие в обсуждении: комментарии, реакции эмодзи приветствуются. Отдельное спасибо за рекомендации канала друзьям и знакомым, всем кому небезинтересна тема визуального отображения медицинской статистики. Заканчивается третья мастерская по визуализации данных медицинской статистики, по результатам которой мы непременно напишем и опубликуем еще одну статью.