Победа! Члены Бизнес-кластера “РАЭК / Digital” заняли первое место в онлайн-хакатоне "Цифровой прорыв"
Дата публикации: 15 июня 2020
На прошлой неделе стали известны результаты хакатона "Цифровой прорыв": команда "Фирмачи"( разработчики digital-интегратора DD Planet и выпускники ТулГУ) заняли первое месте в кейсе Ассоциации больших данных и Сбербанка.
В задании Ассоциации больших данных и Сбербанка командам требовалось разработать интеллектуальную систему предобработки почтовых адресов, не подвергающуюся разложению существующим Нормализатором банка.
Нормализатор адресов – программа, которая на вход принимает произвольную строку адреса с перечисленными через разделитель составляющими (город, улица, дом и др.), а на выходе – структурированную запись с разложенными показателями. Результатом предложенного решения должен был стать алгоритм, корректирующий адрес так, чтобы он успешно обрабатывался Нормализатором.
Лучшее решение было представлено командой из разработчиков digital-интегратора DD Planet (компания является членом Бизнес-кластера “РАЭК / Digital) и выпускников ТулГУ. Команда выступила под названием «Фирмачи» во главе с ведущим программистом DD Planet Юрием Басаловым.
Предложенное решение позволяет структурировать адреса, убирает лишние знаки препинания, незначимые или мешающие распознаванию блоки и приводит адрес к стандартному виду. Алгоритм основан на выявленных с помощью статистического анализа плохих и хороших адресах и позволяет компаниям с большой базой данных быстро их актуализировать. Решение является автоматическим, что обеспечивает минимум вложений для его поддержки.
В ходе разработки алгоритма мы столкнулись с проблемой – не могли проверять свое решение на Нормализаторе Сбербанка.
Поэтому наша команда создала классификационную модель, которая с точностью более 98% определяет, распознает ли Нормализатор адрес или нет. Благодаря статистическому анализу мы определили блоки адреса, которые «ломают» Нормализатор. Их мы удаляли или преобразовывали. Такой подход позволил нам получить более 67% распознанных плохих адресов с минимальной потерей информации. Мы сразу адаптировали свое решение к высоким нагрузкам, реализовав его на Java + Apache Spark.
Напомним, что 7 июня состоялся финал первого онлайн-хакатона конкурса «Цифровой прорыв» – флагманского проекта президентской платформы «Россия – страна возможностей». Команды разработчиков со всей России решали задачи от ведущих IT-компаний, стартапов и региональных ведомств. Разработанные решения участники представляли в прямом эфире. Победители разделили денежный приз в 1,5 миллиона рублей и получили поддержку от партнеров конкурса.
DD Planet
DD Planet – IT-компания, digital-интегратор. Компания основана в 2004 году, специализируется на создании digital-сервисов и информационно-аналитических систем. Реализует высоконагруженные веб-сервисы, корпоративные порталы и мобильные приложения. Среди собственных проектов – отраслевые порталы Выберу.ру и МирКвартир.ру. DD Planet является участником кластера Digital РАЭК, занимает 17 место в рейтинге веб-разработчиков и интеграторов Tagline 2018, победитель отраслевых конкурсов «Премия Рунета», «Золотой сайт», Tagline Awards и ComNews Awards.
О Бизнес-кластере “РАЭК / Digital”
Кластер – это инициатива РАЭК, которая объединяет компании со всей России, оказывающие услуги конечным клиентам в области digital-маркетинга (веб-студии, SEO-компании, агентства, SMM-компании и т.п.). Имея большое представительство агентств и сервисных компаний среди участников кластера, РАЭК сможет эффективнее следовать своей миссии, представляя интересы большей доли компаний рынка. На сегодняшний момент возглавляет и координирует кластер digital-агентство AGIMA.
Подробнее: https://raec.ru/clusters/digital/