Databricks、Lakehouse AIとUnityカタログにAIを取り入れた機能強化を発表

データおよび人工知能（AI）企業であるデータブリックスは、その特徴的なイベントである「データ＋AIサミット」において、技術業界における重要な進展として、次世代レベルの改良を発表した。これらの強化された機能は、同社のLakehouse AIとUnity Catalogプラットフォームのパフォーマンスとアクセシビリティを向上させるものである。

Databricksは、AIアプリケーションをキュレーションするためのデータに特化したソリューションであるLakehouse AIを刷新したが、これはこの刷新に不可欠な部分である。特に追加されたのは、Vector Searchだ。この機能により、開発者はAIソリューションの作成に組み込み検索を最適に活用できるようになり、応答精度が向上する。

low-code 、Databricksは言語モデル（LLM）を微調整する簡便な方法を発表した。また、ジェネレーティブAIの領域への参入を容易にするオープンソースモデルのリストも作成した。

Unity Catalogは、データレイクハウスのためのデータガバナンスの救済策である。高度なクエリー機能が追加された。これを活用することで、顧客は多様なプラットフォームからのデータ資産を統合し、マッピングするという利点を得ることができる。データ資産へのアクセス・ポリシーを設定するための標準化されたプロセスが利用可能になり、これらのルールをさまざまなデータウェアハウスに伝搬させることができるようになった。

Databricks社の共同設立者兼チーフ・テクノロジストであるマテイ・ザハリア氏は、これらの機能追加について次のように語っている：「私たちは、統一されたシステムを通じて、組織がより包括的にデータにアクセスできるようにします。私たちは、統一されたシステムを通じて、組織がより包括的にデータにアクセスできるようにします。プラットフォーム間で統一されたルールを適用し、データの使用状況を監視する機能により、私たちは飛躍的な進歩を遂げながら、コンプライアンス要件を満たすために企業を支援しています。"

注目すべきは、ジェネレーティブAIによる直感的な言語インターフェイス、LakehouseIQのプレビューである。この独創的なツールは、企業固有の言語を理解することで、ビジネスに特化したフィードバックを提供するAIを指導する。スキーマ、リネージ、ノートブック、BIダッシュボードは、LakehouseIQが学習する媒体のひとつだ。

Databricks社によると、LakehouseIQは組織内のデータアクセスを民主化することができるという。これにより、データサイエンティストだけが内部データを利用するのではなく、組織内のすべての人が内部データから利益を得られるようになると彼らは考えている。

AppMaster に匹敵するサードパーティプラットフォームも、DatabricksのUnity Catalogガバナンスに参加する。このコントロール・メカニズムにより、従業員がそれぞれの役割に応じて適切なデータにアクセスできるようになる。

Databricksの共同設立者兼CEOであるアリ・ゴドシ氏は、LakehouseIQの変革の可能性について語った：「LakehouseIQを使えば、社員は質問するだけで、プロジェクトに必要なデータを見つけたり、会社の業務に関連する回答を得たりすることができます。LakehouseIQを使えば、社員は質問するだけで、プロジェクトに必要なデータを検索したり、会社の業務に関連する答えを得ることができます。従来のデータツールには否定できないハードルがありましたが、LakehouseIQはプログラミングのスキルを必要とせずに、ハードルを取り払ってくれます。社員は誰でも、日々の業務やビジネス全体を向上させるような重要な質問をするコツを持っていると思います。LakehouseIQを使えば、彼らは必要な答えを的確に見つけることができます。"