h2o_sonar.evaluators package ============================ Submodules ---------- h2o_sonar.evaluators.abc_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.abc_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.bleu_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.bleu_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.classification_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.classification_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.contact_information_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.contact_information_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.fairness_bias_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.fairness_bias_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.gptscore_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.gptscore_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.gptscore_machine_translation_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.gptscore_machine_translation_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.gptscore_question_answering_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.gptscore_question_answering_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.gptscore_summary_without_reference_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.gptscore_summary_without_reference_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.gptscore_summary_with_reference_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.gptscore_summary_with_reference_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.language_mismatch_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.language_mismatch_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.parameterizable_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.parameterizable_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.perplexity_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.perplexity_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.pii_leakage_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.pii_leakage_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_answer_correctness_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_answer_correctness_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_answer_relevancy_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_answer_relevancy_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_answer_relevancy_no_judge_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_answer_relevancy_no_judge_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_answer_similarity_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_answer_similarity_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_chunk_relevancy_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_chunk_relevancy_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_context_precision_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_context_precision_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_context_recall_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_context_recall_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_context_relevancy_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_context_relevancy_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_faithfulness_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_faithfulness_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_groundedness_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_groundedness_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_hallucination_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_hallucination_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_ragas_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_ragas_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rag_tokens_presence_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rag_tokens_presence_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.rouge_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.rouge_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.sensitive_data_leakage_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.sensitive_data_leakage_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.sexism_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.sexism_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.stereotype_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.stereotype_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.summarization_byop_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.summarization_byop_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.summarization_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.summarization_evaluator :members: :undoc-members: :show-inheritance: h2o_sonar.evaluators.toxicity_evaluator module ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ .. automodule:: h2o_sonar.evaluators.toxicity_evaluator :members: :undoc-members: :show-inheritance: Module contents --------------- .. automodule:: h2o_sonar.explainers :members: :undoc-members: :show-inheritance: