Le coefficient de corrélation (Fleiss' Kappa, Alpha Krippendorff etc) API Java?

Question

Je travaille sur la construction d'une question de classification / réponse à corps comme une partie de ma thèse de maîtrise. Je cherche à évaluer ma taxonomie type de réponse attendue par rapport à un accord interévaluateurs / fiabilité, et je me demandais: Quelqu'un sait-il d'un décent (de préférence gratuit) API Java (s) qui peut le faire

Je suis raisonnablement certain tout ce que je besoin est Fleiss de Kappa Alpha et de Krippendorff à ce stade.

Weka fournit une statistique kappa dans son package d'évaluation, mais je pense qu'il ne peut évaluer un classificateur et je ne suis pas à ce stade encore (parce que je suis toujours la construction de l'ensemble des données et des classes).

Merci.

Answer 1

Je ne pouvais pas trouver une API Java existant dans le temps pour mes recherches, je fini par mettre en œuvre à la fois Fleiss' Kappa Alpha et moi-même de Krippendorff. Les résultats préliminaires de notre recherche, consultez dans cet article .

Answer 2

Vérifier QDAP (Université Pittsburg) Ouvrir le code source.

Answer 3

Je Ported une implémentation Matlab de kappa de Fleiss à Python / numpy.

http://code.google. com / p / HYDRAT / source / browse / src / HYDRAT / common / fleiss.py

Il est difficile de ne pas mettre en œuvre, peut-être vous pourrions porter à Java vous.