[[メトリクスの時系列の変化点に基づくクラスタリング]]を部位評価するには、次の2点を評価する。
1. 変化点検知アルゴリズムの正確性
2. クラスタリングアルゴリズムの正確性
1.については、Sock Shop/TrainTicketから、cpu/memory hogそれぞれについて根本原因メトリクスをすべて抽出し、変化点の正解を与える。
正解に対する正答率と、正解との変化点の近さを考慮する。
2.のクラスタリングアルゴリズムの正確性を評価するには、正解クラスタ集合を用意する必要があるが、正解かどうかの境界が曖昧なこともあるので難しい。