Многие слышали про Redash? Это такое приложение, как BI иснтрумент, где все завязано на SQL запросах + элементы визуализации. Очень популярен в амазон, позволяет работать с клиентскими данными (красные данные), и позволяет создать единый интерфейс с SQL для хранилища данных (Redshift) и озера данных (Athena/Spectrum). Используем open source.

Так вот его приобрел Databricks. Наверно будет крутая платформа. https://blog.redash.io/redash-joins-databricks/