【要約】ロールケーキに穴を開けたら、優等生のIsomapは壊れるのか。「数字は無事なのに、地図は歪む」を見た [Zenn_Python] | Summary by TechDistill
> Source: Zenn_Python
Execute Primary Source
// Problem
著者は、次元圧縮の評価指標が持つ限界に直面した。統計的な数値が正常でも、データの構造が壊れる懸念がある。\n・単一の相関指標では、局所的な歪みや欠損を検知できない。\n・Isomapの前提である測地線近似が、データの欠損でどう変化するか不明であった。\n・指標の安定が、必ずしもデータの健全性を保証しない。
// Approach
著者は、スイスロール状のデータに穴を開け、次元圧縮手法の挙動を比較した。\n・穴の半径を0、4、8の3条件で設定し、1500点のデータを作成。\n・Isomap、LLE、t-SNEを用い、埋め込み軸と巻き位置の相関を算出。\n・kNNグラフの最短路により、測地線の迂回率を定量的に測定。\n・穴の半径を19段階で変化させ、指標の推移を継続的に観察。
// Result
実験の結果、Isomapは局所的な歪みを許容し、大域構造を維持する頑健性を示した。\n・Isomapは穴の大きさに関わらず、相関0.99前後の高い値を維持。\n・LLEは穴が消失し、t-SNEはシートが断裂する挙動を確認。\n・穴をまたぐ測地線の水増し率は、中央値1.10倍、最大1.43倍。\n・「指標の正常」が「中身の正常」を意味しないことが実証された。
Senior Engineer Insight
> KPIの「守備範囲」を理解する重要性を説く、実践的な考察である。\n・単一メトリクスの安定が、内部構造の健全性を保証しない。\n・Isomapの頑健性は、局所的なノイズに対し大域構造を守る強みとなる。\n・監視設計では、指標の「見落とし」を考慮した多角的な評価が不可欠である。