AI Data PlatformのVAST Data、世界初のリアルタイムイベントストリーミングエンジンを発表

VAST Dataは、AIエージェントが即座にデータを処理し、リアルタイムのインテリジェンスと自動化を実現する新機能「VAST Event Broker」を発表しました。この新技術は、Kafka互換のAPIを提供し、イベントストリーミング、シームレスなデータ分析、AIを統合した高性能なデータプラットフォームを実現します。これにより、従来のイベントストリーミングアーキテクチャの制約を取り除き、AIによる即時のデータ分析と意思決定を可能にします。

従来のイベントストリーミング技術は、複雑なアーキテクチャやデータのサイロ化により、トランザクション処理と分析処理が分断され、リアルタイム分析の遅延を引き起こしていました。特に、Kafkaのような一般的なデータストリーミングツールでは、イベントデータが分散し、インフラコストの増加やバッチETL処理によるリアルタイム性の欠如といった課題が発生していました。VAST Dataの新しいVAST Event Brokerは、VAST DataEngineに統合され、ストレージ、データベース、仮想化コンピュートエンジンサービスを組み合わせた統合AIオペレーティングシステムを構築します。これにより、リアルタイム分析、AI/MLパイプライン、イベント駆動型ワークフローを実現し、管理の簡素化、可視化ツールの強化、SQLクエリ機能の拡張、システムの高耐障害性を提供します。

VAST Event Brokerの特長
• 10倍以上のパフォーマンスとリニアスケーリング
従来のイベントストリーミングは拡張性に課題があり、大量のインフラ投資が必要でした。VAST Event Brokerは、同じハードウェア構成でKafkaの10倍以上の性能を発揮し、無制限のスケーリングを実現。現在、最大のVASTクラスタでは1秒間に5億メッセージ以上を処理可能です。
• あらゆるデータを統合する無制限のスケール
VAST DataStoreは、エクサバイト規模のストレージ基盤を提供し、ファイル、オブジェクト、ブロック、テーブルを統合したコスト効率の高いフラッシュストレージを実現。VAST Event Brokerを通じて、ストリーミングデータ（構造化・非構造化）を即時に処理し、分析に活用できます。
• すべてのワークロードを1つのプラットフォームで統合
VAST DataBaseは、トランザクション処理と分析処理を統合し、分離されたデータシステムを不要にします。VAST Event Brokerは、データ到着時に自動で計算を開始し、生データを即座にインサイトへ変換。イベント駆動型の処理により、AIアプリケーションがリアルタイムで意思決定を行い、継続的なイノベーションを推進します。
• AI/MLワークロードに最適化
GPU-Direct機能を搭載し、ストレージとGPU間の高速データ転送を可能にすることで、大規模なデータセットをシームレスに処理。AI/MLモデルの学習と推論を加速します。

VAST Event Brokerは2024年3月より提供開始予定で、AIインフラの複雑性を削減し、リアルタイムデータ分析をより効率的に実行できるよう設計されています。

VAST Dataについて
VAST Dataは、AI時代のために設計されたデータプラットフォーム企業です。エンタープライズ向けAIインフラの新たなスタンダードとして、VAST Dataのプラットフォームは、データ集約型のコンピューティングニーズに対応し、シンプルでスケーラブルなAIインフラを提供します。ディープラーニングやGPUアクセラレーションを活用するデータセンターやクラウド環境向けに最適化されたソリューションを提供し、2019年の創業以来、史上最速で成長するデータインフラ企業となっています。