29 июня стартовала летняя онлайн-школа ИМиКН «Интеллектуальный анализ данных». Первый образовательный кейс «Computer vision» под руководством старшего преподавателя кафедры программного обеспечения Юрия Егорова посвящен изучению основных методов обработки и анализа изображений — теории машинного обучения в целом, принципа работы сверточных нейронных сетей, методологии отбора данных, изучения инструментов для анализа. Лекционные занятия чередовались с проектной работой в группах, где участники закрепляли изученный материал под наставничеством модераторов – студентов МОАИС (Метелева Елена, Филицин Андрей, Ряполова Екатерина, Беженарь Александр, Гасанов Александр, Боровик Алена, Конева Дарья, Бильдин Сергей, Рустам Якубов). Руководитель команды модераторов — Ольга Иваненко, ведущий программист ООО «Контакт», сертифицированный специалист по разработке сложных информационных систем.
На первой неделе были изучены инструменты, необходимые для создания своего проекта, и участниками для закрепления проведен отбор данных для двух предложенных студентами проектов — определения утопающих людей на изображении и распознавания языка жестов.
В течение второй недели группы разрабатывали свои собственные проекты, начиная с идеи и заканчивая представлением обученной модели нейронной сети и результатов её работы.
Командам в начале школы были назначены цвета, которые впоследствии использовались в качестве названий команд.
На итоговом выступлении образовательного кейса «Computer vision» было представлено 6 проектов от 6 команд школы: бирюзовой, желтой, красной, оранжевой, синей и фиолетовой.
Сразу после выступлений было проведена оценка проектов по критериям оригинальности идеи, качества презентации и различным аспектам технической проработке проекта. В оценивании участвовали как участники школы, так и модераторы и экспертная команда преподавателей кафедры программного обеспечения и ИТ-работодателей.
Проект оранжевой команды заключался в обнаружении повреждений дорожного полотна по изображениям, полученным с автомобильного видеорегистратора, для более качественной агрегации данных о состоянии дорог.
Желтая команда представила проект по распознаванию повреждений костей по рентгеновским снимкам. Предлагаемая система может помочь уменьшить вероятность ошибки диагноза, представляя дополнительную проверку в дополнение к человеческой.
Красная команда, в отличие от других команд, работала не с отдельными изображениями, а с видеорядом.
Их проект заключался в поиске фейерверков на видео. Подобные разработки могут помочь в автоматической разметке и индексации видеоконтента.
Бирюзовая команда разрабатывала модель для классификации дорожных знаков. Рассматривался сценарий получения изображений с видеорегистраторов, где сам дорожный знак занимает очень малую часть изображения. Поэтому, модель команды отличалась работой с низкодетализированными изображениями.
Синяя команда представила модель для распознавания изменений в легких на флюорографических снимках. Разработка может помочь улучшить качество диагноза. При разработке команда экспериментировала с различными способами предобработки данных и представила анализ производительности модели при различных подходах.
Фиолетовая команда реализовала модель для распознавания людей с оружием.
Дополнительно к классификации с двумя классами «с оружием»/«без оружия» команда провела попытку расширения задачи классификации добавив класс «дети с оружием».
С понедельника участники школы приступили к изучению новой предметной области — задачам анализа текста (Natural language processing). Защита проектов по данной теме пройдет 24 июля.
Летняя онлайн школа «Интеллектуальный анализ данных» проводится при финансовой поддержке РФФИ в рамках научного проекта № 19-37-51028 «Создание, исследование, реализация методов и технологий машинного обучения для сопровождения индивидуальных образовательных траекторий на основе анализа цифрового следа обучающихся» и НТУ «Сириус».
