Snowflakeの後に出現したスタートアップ　イスラエルがデータイノベーションのグラウンドゼロである理由

この10年間、テクノロジーが経済の大部分を占めるようになり、競争の場が物理的な世界からデジタルの世界へと移っていく中で、私たちは優れた企業がデータを活用して勝利を収めるのを目の当たりにしてきました。DoorDash、OpenDoor、Stitch Fixなどの企業は、設立当初から大量のデータを収集・分析する独自の能力をビジネスモデルに組み込んでおり、NikeやCapital Oneなどの既存企業は、デジタルファースト戦略への移行を推進するために数百人規模のデータチームを構築しました。一方、Google、Facebook、Amazonなどのデジタルジャイアントは、想像を絶する大量のインターネットデータ、消費者データ、購買データ、人口統計データを解析し、瞬時に行動に移す能力を持つ巨大企業となりました。

現在、企業はデータの莫大な価値を認識していますが、世界のDoorDashやNikeに匹敵するデータチームやインフラを構築する知識やリソースを持っている企業はほとんどありません。現在、世界中で流通しているデータは79ゼタバイト（1ゼタバイトは1兆ギガバイト）を超え、2025年には181ゼタバイトになると予想されています。企業は、ビジネスの推進力となるデータを取得し、分析し、理解することが急務となっています。

しかし、データサイエンティストやエンジニアを雇用する資金があったとしても、彼らを見つけることは非常に困難です。データサイエンティストやエンジニアの人材は圧倒的に不足しており、雇用の増加が新規参入者の増加を上回っているため、この状況はさらに悪化すると考えられます。データ解析のニーズとデータサイエンティストの不足のギャップを埋めるために、企業は膨大なデータセットをよりよく把握し、分析し、活用するための使いやすいツールを緊急に必要としています。データインフラアプリケーションやローコードまたはノーコードのツールを提供し、大規模なデータチームを雇用することなく、企業がデータから価値を引き出せるようにする新興企業が続々と登場しています。

代表的なデータ関連のスタートアップ企業のいくつかは、イスラエルにルーツを持ち、創業者たちはデータ、セキュリティ、AI、機械学習に関する深い専門知識を活用して、柔軟な次世代データツールを構築しています。

データの状況
Snowflake（評価額770億ドル以上）のような公共のデータインフラ企業や、Databricks（評価額280億ドル以上）のような民間のデータインフラ企業は、今日のデータの難問の大部分を解決しました。これらの企業は、これまでオンプレミスのデータウェアハウスの規模や範囲に制約されていた企業が、真に膨大な量のデータをクラウドに保存し、技術チームがそれにアクセスして計算や分析を行うことを可能にしました。しかし、このような素晴らしい成功を収めている企業でも、すべての人にすべてを提供することはできません。1社ではできないのです。SnowflakeとDatabricksは、多くの企業が大量のデータを保存できるようにしたことで、次の2つの大きな課題を解決するための新興企業の機会を生み出しました。すなわち、発見可能性、ガバナンス、観測可能性、コンプライアンス、モデリングなどを含むデータエンジニアリングの改善と簡素化、そしてデータ消費の拡大により、企業内のより多くの部門や人々がデータへの投資を活用できるようにすることです。SnowflakeやDatabricksの成功により、データエンジニアリングやデータ消費に関する課題に取り組む新興企業のエコシステムが形成されました。例えば、データの一貫性を確保するためのモニタリング、データサイエンティストやビジネスユーザーがデータを発見できるようにすること、下流の消費者が使用できるようにデータをモデル化することなどが挙げられます。

これまで、データエンジニアリングの作業はほとんどが手作業で行われてきましたが、これでは拡張性がなく、スキル不足に陥ってしまいます。また、企業に大規模なデータチームがあっても、複雑なプラットフォームを構築するための十分な帯域がないことが多いのです。多くのデータエンジニアリングチームは、ヘルプデスクとしての役割に多くの時間を費やしています。下流のデータ利用者がデータの信頼性に問題を感じたり、必要なデータセットが見つからなかったりすると、データエンジニアリングに問い合わせます。

また、データエンジニアリングだけでなく、企業の最終目標であるビジネス価値の向上を実現するための、データ利用を促進するツールも不足しています。ほとんどの企業では、ダッシュボードを作成できる従業員はごく一部で、ビジネスの成長に大きな影響を与える機械学習モデルを構築することはおろか、理解することさえできません。このようなデータのボトルネックは、SnowflakeやDatabricksが解決したストレージや計算から、エンジニアリングや消費へと移行しており、新興企業がその解決に乗り出しています。

データスタートアップのためのグリーンフィールド
新興のデータ・スタートアップ企業にとってのチャンスは、「データ・エンジニアリングのunbundle」と「下流でのデータ利用の改善および拡大」の2つに大別されると考えている。

データエンジニアは手狭になっており、新興企業は彼らのルーチンワークの一部をunbundleして製品化するツールを提供することで、より価値の高い仕事に専念できるようになる。この分野に取り組む新興企業のひとつがMonte Carlo社です。イスラエルの技術者Barr MosesとLior Gavishが2019年に設立したMonte Carloは、データの観測性に取り組み、企業のデータを監視して「データダウンタイム」が発生しないようにすることで、エンジニアがこの作業に費やす時間を30％以上削減しています。また、データエンジニアリングのためのポイントとなるソリューションを提供するスタートアップには、FivetranとBigIDがあり、それぞれ既製のデータパイプラインと、データガバナンスとプライバシーのためのツールを提供しています。

また、データを消費する側の新興企業にもチャンスがあります。ビジネスユーザーには、データをより簡単に分析するためのノーコードまたはローコードのツールを提供し、データサイエンティストやアナリストには、組織全体でより簡単にデータを共有するための使いやすいツールを提供します。現在、ほとんどのデータ利用は、専門的なスキルを持ったデータアナリストやデータサイエンティストによってその場限りで行われており、調査結果の解釈も難しいままです。

これでは、企業はデータの一部しか有意義に活用できていないことになります。イスラエルのPecan社は、データアナリストが機械学習の専門知識がなくても予測モデルを構築できるように、使いやすいプラットフォームを提供しています。また、SisenseやMetabaseもこの分野に積極的で、エンドユーザー向けに組み込み型の分析機能を提供したり、技術者ではないユーザーがデータベース言語のSQLを知らなくてもダブルクリックで操作できるビジュアライゼーションを提供したりしています。

特にイスラエルは、次の企業を立ち上げるシリアルアントレプレナー、軍事訓練で磨かれた深い技術的専門知識を持つデータエキスパート、そしてGoogle、Airbnb、Facebookなどのデータドリブンな企業から生まれた全く新しいクラスのファウンダーなど、イノベーションのための肥沃な土地です。イスラエルは、まさにデータ・イノベーションのためのグラウンドゼロなのです。

企業は、データ駆動型になることを約束し、データインフラと人材に投資してきましたが、データスタックの欠点が見え始めているという、ユニークな時期にあります。技術者ではないユーザーがデータをよりよく理解し、データから価値を引き出せるよう支援し、エンジニアリングチームがデータの観測性、コンプライアンス、セキュリティなどを管理するために必要なツールを提供する新興企業が、トップに立つことになるでしょう。