Azure Databricksは、 MicrosoftAzureクラウドサービスプラットフォーム用に最適化されたApacheSparkベースの分析プラットフォームです。ビッグデータパイプラインの場合、データ（生または構造化）はAzure Data Factoryを介してバッチでAzureに取り込まれるか、Kafka、Event Hub、またはIoTHubを使用してほぼリアルタイムでストリーミングされます。

上記のほかに、DatabricksはMicrosoftが所有していますか？ 1年ちょっと前、マイクロソフトはサンフランシスコを拠点とするDatabricksと提携して、クラウドの顧客が大量のデータをすばやく解析できるように支援しました。今日、マイクロソフトはデータブリックスの最新の投資家です。 Databricksの2,000のグローバル企業顧客には、Nielsen、Hotels.com、Overstock、Bechtel、Shell、HPがあります。

このように、スパーククラスターとは何ですか？

クラスターは、 Sparkをインストールするためのプラットフォームに他なりません。 Apache Sparkは、ビッグデータ処理用のエンジンです。クラスター上で分散モードでSparkを実行できます。クラスターには、マスターとn個のワーカーがあります。クラスタを形成するホストマシンのリソースをスケジュールして分割します。

SparkはHadoopとどう違うのですか？

Hadoopはバッチ処理を効率的に処理するように設計されていますが、 Sparkはリアルタイムデータを効率的に処理するように設計されています。 Hadoopは高遅延コンピューティングフレームワークであり、インタラクティブモードはありませんが、 Sparkは低遅延コンピューティングであり、データをインタラクティブに処理できます。