Wekaでは、テストセットとトレーニングセットの両方で評価された学習曲線を描画する方法は？

Question

これは、過剰なギャップを見つけるためだけです。
最初の調査の後、テストセットの評価を使用して学習曲線を描画する方法のみを見つけることができます。ただし、トレーニングセットと2つの学習曲線で評価することはできませんでした。

Answer 1

これは、KnowledgeFlowでのみ可能です。 wekamanual.pdf（Wekaパッケージに含まれています）バージョン3.7.12の場合、第7.4.2章「複数のROC曲線のプロット」と段階的な指示を含む例があります。他のWekaバージョンについても同じです。適切な章を見つけてください。

それがどうなるかについて印象を与えるために、私はマニュアルから写真を抽出しました。 2つの分類子に対して2つの曲線を描画します。あなたの質問については非常に似ています。 1つの分類子を使用してから、Trainingsetを1つのClassifierPerformanceEvaluatorに接続し、テストセットを別の分類に接続します。