Worum es bei uns geht

Сообщество для всех, кто интересуется горизонтально-масштабируемыми СУБД и движками обработки данных и для тех, кто готов поделиться своим опытом с коллегами.
На встречах будем обсуждать кейсы, сравнивать разные подходы и технологии, делиться результатами тестов.
При создании горизонтально масштабируемой платформы данных мы сталкиваемся с многочисленными задачами выбора:

• какая СУБД (MPP RDBMS, key-value, column-family) показывает наилучшую производительность в том или ином коридоре задач;

• какие компоненты из экосистемы Hadoop развиваются, а какие отходят на второй план;• на каком движке организовать распределённый кэш;

• сколь хорошо работают вместе выбранные по результатам (1) и (3) компоненты.

Группа посвящена всем аспектам сравнения движков и СУБД: бенчмарки, результаты на продуктивных нагрузках, поиск узких мест в отдельных компонентах и интеграционных конструкциях — делимся опытом, накопленным по результатам тестирований и эксплуатации.

Bevorstehende Events (1)

Применение Greenplum в корпоративном секторе

Друзья, вот и пришло время для нашего пятого митапа из серии Scale-out databases and engines - на этот раз на тему «Применение Greenplum в корпоративном секторе»! Уже 12 декабря мы хотим встретиться с вами, чтобы обсудить всю подноготную Greenplum, поделиться техническими инсайтами и примерами внедрения технологии. Всё это в ламповой атмосфере и с вкусной пиццей. В 19:30 в X5 Retail Group (Москва, ул. Коровий Вал, 5, БЦ «Оазис») с вами начнут знакомиться трое наших спикеров: - Павел Денисенко, главный архитектор данных X5 Retail Group; - Алексей Рябов, архитектор DWH в Tinkoff; - Дмитрий Павлов, директор по продуктам Arenadata. ПОДРОБНЕЕ О СПИКЕРАХ И ДОКЛАДАХ: Павел Денисенко, главный архитектор данных X5 Retail Group, занимался проектированием логической архитектуры аналитических платформ, моделей и потоков данных. За его плечами проекты построения DWH в МегаФоне, М.Видео, Tinkoff, Икано Банке, X5 Retail Group. На нашем митапе Павел выступит с докладом «Адаптация методологии DataVault 2.0 для задачи построения Enterprise Data Warehouse в X5». Ключевые моменты: - как выглядит целевая логическая архитектура EDW; - какую роль в EDW играет DataVault 2.0; - опыт применения DV2: вопросы/ решения, не описанные в книжках; - автоматизация разработки DV2; - открытые вопросы. ----------------- Сфера деятельности Алексея Рябова, архитектора DWH в Tinkoff, включает репликацию данных из операционных источников в несколько кластеров Greenplum, синхронизацию данных между несколькими кластерами Greenplum и другие инфраструктурные проекты DWH. Его доклад «Проект DUET: синхронизация данных между несколькими кластерами Greenpum. Опыт в Tinkoff» приоткроет завесу тайны над тем, как Tinkoff синхронизирует данные между несколькими кластерами, какие средства использует и чего достиг. ----------------- Дмитрий Павлов, директор по продуктам Arenadata, с 2009 года тесно работает с масштабными кластерными системами, начиная с высокопроизводительных GPU-ориентированных кластеров и заканчивая распределёнными аналитическими СУБД. С 2013 по 2017 годы он руководил отделом эксплуатации Хранилища Данных банка Tinkoff. А с 2017 года строит высоконагруженные аналитические системы для любимых заказчиков. Его сфера интереса включает (но не ограничивается): аналитические СУБД, мониторинг и визуализацию, потоки данных, кейсы аналитических систем. В докладе «Greenplum vs Clickhouse: Fight! Или нет?» Дмитрий поведает о двух, появившихся почти одновременно несколько лет назад на пространстве open-source проектов, распределённых СУБД. Обе колоночные, обе аналитические, обе очень крутые. Мог ли в такой ситуации не возникнуть многолетний холивар? Спикер предлагает сначала подлить масла в огонь войны, а затем самим же его потушить: - особенности Greenplum; - особенности Clickhouse; - сравнение производительности и функционала; - совместное использование обеих технологий в стеке Arenadata. Срочно бронируйте в календарях 12 декабря, и регистрируйтесь на наш митап! P.S. Если[masked] не сможете зайти на митап, например, не оформлен пропуск, звоните[masked] - Илья. -------------------- Спасибо нашему информационному спонсору Телеграм каналу @ITMeeting - cледите за отраслевыми митапами в телеграмм-канале https://t.me/ITMeeting

Vergangene Events (4)

Open-source в Enterprise: это фантастика?

Пространство DI Telegraph

Fotos (24)