分散データ処理プラットフォーム「Bacalhau」を開発する"Expanso"がSeedで$7.5Mを調達

Expansoは、General CatalystとHetz Venturesが共同リードするSeedで$7.5Mを調達した。

シアトル拠点で分散処理によってデータを扱うより良い方法をチームに提供するExpansoは、調達した資金でデータ処理プラットフォーム「Bacalhau」の開発を加速させ、さらに多くの企業ユーザーに提供し、情報をその場で処理できるようにする計画です。

データは現代ビジネスの活力源ですが、その活用は容易ではありません。企業は、さまざまなソースから入ってくる情報を（すべてではないにせよ）最大限に活用するために、多くの手順を踏まなければなりません。

「たとえ世界中に分散していたとしても、データのある場所に対応するために構築されたインフラは、長い間待ち望まれていました。ExpansoがBacalhauで構築しているのは、ビッグデータの処理方法とグローバル・コンピューティング・ジョブの実行方法に革命を起こすと同時に、まったく新しいクラスのアプリケーションのロックを解除することを意図しています」と、同社の創設者兼CEOは声明で述べています。

現在の企業では、複雑なETLパイプラインを通じて膨大な量のデータをネットワーク経由で移動させ、すべてをクラウド・データ・プラットフォームに集中させることで、膨大な量のデータから価値を引き出しています。この(BI/AIアプリケーションを可能にする)アプローチはうまく機能するが、同時に多くの時間と財源を必要とします。

Kubernetesの最初の非創設プロダクト・マネージャーであり、Googleのリード・プロダクト・マネージャーでもあったExpansoの創設者兼CEOは、キャリアのさまざまな段階において、こうしたグローバルに分散されたワークロードの課題を指摘しています。

「顧客は、グローバルに分散したワークロードの問題を解決するために、自分たちで構築しなければならないソリューションを何度も何度も持ち出してきました。その上、ネットワークの成長に比べ、企業データの急速な爆発は、このケースを助けるものでもありません。最後に勤務したProtocol Lab社では、10エクサバイト（EB）を超えるデータがネットワーク全体に広がっていました。標準的な10GBpsのネットワークでは、これだけのデータをクラウドプラットフォームに移行するには数十億年かかります。」と彼は説明します。

この課題に取り組むため、データが保存されているローカルで計算ジョブを実行させるプロジェクトを立ち上げ、最終的にExpansoへと発展させました。

Expansonは、同社のオープンソースプロジェクトをBacalhauと呼んでいます。このプロジェクトは、組織がすでに導入している(あるいは導入予定の)分散システム上で実行され、データが存在する場所で、そのデータに対してコンピューティング・ジョブをスケジューリングします。Bacalhauエージェントをマシンにインストールし、パブリック／プライベート・クラウド・ネットワークに参加させるコマンドを実行するだけです。分析ニーズが高まるにつれて、Bacalhauノードを追加プロビジョニングすることで容量を増やすことができます。

この製品を使用すると、チームは既存のインフラと一緒にインストールされた軽量のBacalhauノードを使用して、ローカルデータを即座に分析することができます。データセンターの複製やクラウド間のデータ移動の管理といった運用上のオーバーヘッドが削減され、組織はアイドル状態のエッジ・コンピューティング・リソースを利用できるため、さらなるコスト削減につながります。最も重要なことは、データをその場で処理することで、セキュリティとスピードが向上し、規制による罰金のリスクが軽減されることです。

現在、Bacalhauは、ソースでのアプリケーション・ログのサニタイズと処理、リモート・デバイス間での分散MLトレーニングの実行から、ストレージやさまざまなリージョンに分散したファイル・データの処理、分散デバイス・フリートの管理まで、さまざまなデータ・タスクに対応しています。

今年初めに公開デモを開始して以来、Bacalhauはユースケース全体で200万以上のジョブを実行するために使用されています。同社は正確な収益の伸び率については明かしてませんが、米海軍、カリフォルニア工科大学、メリーランド大学、プレリンガー・ラボ、WeatherXMなどの大企業と協力していると説明しています。

今後、同社はこれまでの成果を基に、Bacalhauを進化させ、さらなる企業ユースケースをサポートし、主要な顧客ニーズに対応したいと考えています。また、現在月間5万件以上のCLIがダウンロードされている同プラットフォームのユーザーベースの拡大も計画しています。