Databricksは、カルフォルニア州立大学バークレー校において、CEO兼共同設立者のアリ・ゴディシ(Ali Ghodsi)氏をはじめ、データとAIなどを研究するOSSの分散処理フレームワーク「Apache Spark」のクリエイター20人により、2013年にサンフランシスコで創業した。

これまでの記事では、KafkaやConfluent Cloudの基本操作、Schema Registry、Kafka Connectを通じた外部システム連携を学んできました。いよいよ本記事では、KafkaのストリームデータをDatabricksに取り込み、Structured Streamingでリアルタイム分析を行う 実践的なシナリオを ...

株式会社メソドロジック(本社東京都港区麻布台代表取締役 大西俊幸 以下、メソドロジック)は、ユーザ企業のデータ分析基盤の構築を支援していくために、Apache Spark及びDelta Lakeの開発元であり、『統合データ分析プラットフォーム』を提供する、米国 ...

『ゼロから触ってわかった！ Snowflake × Databricksでつくる次世代データ基盤 - 比較・共存・連携 非公式ガイド』 SnowflakeとDatabricks――二つのクラウドデータ基盤は、これまで「どちらを選ぶか」で語られることが多くありました。 しかし、実際の現場では ...