Всем привет! Когда мы говорим про модели данных в Хранилище Данных, мне приходит на ум - Dimensional Modelling, Data Vault и тп. И пару топ книг Инмона и Кимбала. Если попадалась какая полезная информа и интересная (книги, статьи или туториал) скиньте в комменты, добавлю в git с ресурсами.
Совместная научная статья моего бывшего руководителя (Николая Голова) и создателя Anchor Modelling (более строгий Data Vault) Lars Rönnbäck про сам Anchor и причины быбора в его пользу конкретно в Авито. https://www.sciencedirect.com/science/article/abs/pii/S0920548917300363 Статью могу прислать в личку. На сегодняшний день статья уже немного устарела и мы в Авито ушли на некоторое количество шагов вперед. В том числе, реализовали фреймворк похожий на тот, что описывался в паре постов выше про автоматизацию Data Vault в Snowflake. К слову, сам Коля уйдя из Авито (будучи сначала архитектором DWH, затем отвечал за всю Data Platform в компании) в прошлом году в стартап, занимающийся чат-ботами, в ходе тестов сделал выбор в пользу Snowflake вместо Vertica и Exasol, потому что вся инфраструктура компании была в AWS.
(более строгий Data Vault) Lars Rönnbäck про сам Anchor и причины быбора в его пользу конкретно в Авито. https://www.sciencedirect.com/science/article/abs/pii/S0920548917300363
Статью могу прислать в личку.
На сегодняшний день статья уже немного устарела и мы в Авито ушли на некоторое количество шагов вперед. В том числе, реализовали фреймворк похожий на тот, что описывался в паре постов выше про автоматизацию Data Vault в Snowflake.
К слову, сам Коля уйдя из Авито (будучи сначала архитектором DWH, затем отвечал за всю Data Platform в компании) в прошлом году в стартап, занимающийся чат-ботами, в ходе тестов сделал выбор в пользу Snowflake вместо Vertica и Exasol, потому что вся инфраструктура компании была в AWS.
Вот тут немного проще рассказано и с картинками)