我正在建立一个问题分类/答案语料库，作为我的硕士论文的一部分。我正在评估有关评估者之间的协议/可靠性的预期答案类型分类法，我想知道：是否有人知道任何可以做到这一点的体面（最好是免费的）Java API？
我可以肯定地说，此时我需要的只是Fleiss的Kappa和Krippendorff的Alpha。
Weka的评估包中提供了kappa统计信息，但我认为它只能评估分类器，而我还没有进入该阶段（因为我仍在构建数据集和类）。
谢谢。
最佳答案
检查QDAP（匹兹堡大学）开放源代码。
我正在建立一个问题分类/答案语料库，作为我的硕士论文的一部分。我正在评估有关评估者之间的协议/可靠性的预期答案类型分类法，我想知道：是否有人知道任何可以做到这一点的体面（最好是免费的）Java API？
我可以肯定地说，此时我需要的只是Fleiss的Kappa和Krippendorff的Alpha。
Weka的评估包中提供了kappa统计信息，但我认为它只能评估分类器，而我还没有进入该阶段（因为我仍在构建数据集和类）。
谢谢。
最佳答案
检查QDAP（匹兹堡大学）开放源代码。