[[メトリクスの時系列の変化点に基づくクラスタリング]]を部位評価するには、次の2点を評価する。 1. 変化点検知アルゴリズムの正確性 2. クラスタリングアルゴリズムの正確性 1.については、Sock Shop/TrainTicketから、cpu/memory hogそれぞれについて根本原因メトリクスをすべて抽出し、変化点の正解を与える。 正解に対する正答率と、正解との変化点の近さを考慮する。 2.のクラスタリングアルゴリズムの正確性を評価するには、正解クラスタ集合を用意する必要があるが、正解かどうかの境界が曖昧なこともあるので難しい。