Почта Банк обновил корпоративное хранилище данных

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Почта Банк реализовал масштабный проект по рефакторингу корпоративного хранилища данных (КХД). Он заключался в полной переработке архитектуры, создании оперативного слоя данных и их унифицированной модели, выстраивании процессов Data Governance.

В результате в КХД увеличилась производительность расчетов, унифицированы их алгоритмы, сократились финансовые расходы, повысилась актуальность и безопасность данных. Значительно улучшено общее качество данных в КХД и других системах, что ведет к повышению уровня клиентского обслуживания.

В ходе проекта команда Почта Банка при поддержке компании «Философия.ИТ» (входит в Лигу Цифровой Экономики) создала качественно новую архитектуру КХД, которая позволяет получать данные из ключевых систем-источников в режиме онлайн и обеспечивает инкрементальное обновление всех слоев хранилища. Параллельно развивалось и старое КХД, содержащее в себе огромные объемы legacy-кода, накопленные за более чем пятилетнюю историю.

«Для конкурентоспособности банка важна прежде всего скорость внедрения новых продуктов и масштабирования систем. Поэтому возрастает потребность в современном и производительном хранилище данных. Сегодня очень популярен термин data-driven, но вы не станете дата-ориентированной компанией только за счет накопления объемов данных или реализации ad hoc-выгрузок по мере возникновения задач. Без надежной базы дата-аналитики организации могут тратить до 80% времени на подготовку данных вместо их анализа», — рассказывает Василий Король, руководитель службы по управлению данными (Chief Data Officer) Почта Банка.

По словам эксперта, работа в этом направлении продуктивна только тогда, когда выстроен фундамент: отлажены процессы сбора, очистки, унификации, хранения, управления и использования всего объема генерируемых данных. «При этом проект по выстраиванию такого фундамента всегда тяжелый и длительный, тем более если вы реализуете его на «живой», постоянно работающей системе, от которой зависят все процессы компании. Но в наших силах сделать его эффективным», — говорит Василий Король.

В первую очередь была разработана и согласована концепция развития управления данными в Почта Банке. В рамках этой концепции был выстроен полный цикл управления изменениями корпоративного хранилища, коснувшийся взаимодействия как внутри команды, так и с подрядчиками и заказчиками. Была выстроена гибридная система реализации задач и проектов (scrum и waterfall), что позволило прийти к высокой регулярности релизов КХД (минимум раз в две недели) без значительных потерь в качестве.

Была реализована система контроля качества данных, внедрены и согласованы регламенты взаимодействия с системами-источниками. Осуществлен перевод системы мониторинга КХД на роботизированное ПО (push-уведомления, автоматические звонки). В новой архитектуре созданы операционный (блок витрин для систем-приемников) и аналитический слои КХД (где внедрена и развивается единая модель данных). Реализована ролевая модель доступа к BI-отчетности и данным хранилища.

Были улучшены параметры быстродействия и надежности КХД, снижены затраты на его развитие и поддержку, а также совокупная стоимость владения. Увеличена скорость расчета и предоставления информации бизнес-заказчикам (большая часть ключевых витрин готовы до 8 утра дня, следующего за отчетным). Обеспечено выполнение более жестких SLA как по скорости готовности, так и по качеству данных.

В части технико-процессных аспектов и архитектуры осуществлен переход на инкрементальные расчеты, проведена дедубликация данных и бизнес-процессов. Также был выполнен перенос ключевой ресурсоемкой функциональности пользовательского финансового хранилища в новое единое КХД.

Автор не входит в состав редакции iXBT.com (подробнее »)

8 комментариев

Добавить комментарий

P
где людей учат использовать столько взаимосвязанных умных слов без передачи хоть какого-то смысла?
l
« создала качественно новую архитектуру КХД, которая позволяет получать данные из ключевых систем-источников в режиме онлайн и обеспечивает инкрементальное обновление всех слоев хранилища.» или « большая часть ключевых витрин готовы до 8 утра дня, следующего за отчетным». Тут уж или трусы, или крестик.
C
Много умных слов.
Остается загадкой, как они до этого работали?
k
Этот недобанк ещё жив?)
-
Оу, так вот оно какое – маркетинговый bullshit...
Прям эталон.
PuhKiringa
Теперь представьте как все это на скамеечке Гармаш рассказывает пенсионерам

Добавить комментарий

Сейчас на главной

Новости

Публикации

Отпечатки пальцев этого животного почти невозможно отличить от человеческих! И это не обезьяна

Отпечатки пальцев человека уникальны: у каждого свои линии, завитки и узоры, которые не повторяются у других людей. Именно поэтому их используют в криминалистике, системах безопасности и даже для...

Как появился и что скрывает Батагайка — самый большой провал в вечной мерзлоте на планете

В Верхоянском районе Якутии, в 660 км к северо-востоку от Якутска, земля буквально расползается изнутри. Батагайский провал, который в обиходе зовут просто «Батагайка», а журналисты окрестили его...

7 покупок, о которых можно пожалеть, даже если на них скидка 90%

Большая красная надпись «Скидка 90%» способна заставить купить даже то, о чём ещё вчера не задумывался. Кажется, что отказаться от такой выгоды просто невозможно: вещь стоит копейки, а...

Зачем перед советским телевизором ставили линзу, наполненную водой

У раннего домашнего телевизора мог быть внушительный деревянный корпус и совсем небольшой экран. У КВН-49, массовый выпуск которого начался в 1949 году, видимая картинка занимала примерно 14 на...

«Альпинист»: чем был интересен туристический приёмник СССР

Это был массовый туристический приёмник четвёртого класса, собранный на семи транзисторах, — дешёвый, лёгкий и на удивление живучий. В СССР такие вещи ценили не за внешний лоск, а за...

✦ ИИ  Блок питания на «честные 800 Вт» за 2500 рублей: инженерный разбор того, как дешёвый БП убивает видеокарту

Недавно знакомый попросил посмотреть, почему его новый ПК вырубается в играх — заглянул внутрь и снова увидел классику. Самая дорогая ошибка при сборке ПК — взять...