【要約】Unity Catalogの「ページ」を試す: 社内用語がGenieオントロジーになる [Qiita_Trend] | Summary by TechDistill
> Source: Qiita_Trend
Execute Primary Source
// Problem
データ分析基盤において、AI(Genie)が社内独自のKPIや専門用語を正しく解釈できない課題がある。データエンジニアやアナリストは、以下の問題に直面している。
- ・AIが一般知識で回答するため、独自の計算式を無視する。
- ・物理的なカタログ階層では、ビジネス領域ごとの横断的な整理が困難である。
- ・用語定義が各分析スペースに分散し、一元的な管理ができない。
// Approach
Databricksは、物理階層に依存しない論理的な整理軸として「ドメイン」と「ページ」を導入した。具体的には、以下のステップでビジネスコンテキストを注入する。
- ・ドメインを作成し、タグポリシーを用いてビジネス領域の境界を定義する。
- ・アセットにタグを付与し、ドメインへ論理的に所属させる。
- ・「ページ」に用語、計算式、同義語、注意書きを記述する。
- ・Genieがページを「人間がモデル化したレイヤー」として参照する仕組みを構築する。
// Result
検証の結果、Genieは社内独自の造語に対しても、定義や計算式を即答できるようになった。具体的には、以下の改善が確認された。
- ・定義だけでなく、ページ内の「利用上の注意」まで文単位で正確に引用する。
- ・ページの見出し構成が、そのままAIの回答構成として反映される。
- ・回答に引用元(ページ)が明示され、回答の根拠が誰でも確認可能になった。
Senior Engineer Insight
> AIエージェントへの知識注入を、データカタログ層で実現する極めて実践的な設計だ。運用上の注意点は以下の通り。
- ・ページはプレーンテキスト保存のため、機密情報の記載は厳禁である。
- ・ドメインの実体はタグポリシーであり、アカウント上限に注意が必要だ。
- ・「ページ構成=AIの回答構成」となるため、ドキュメント作成がプロンプトエンジニアリングの役割を担う。