Оценка языковых моделей с помощью Azure Databricks
Средний уровень
Инженер по анализу и обработке данных
Azure Databricks
Узнайте, как сравнить большие языковые модели (LLM) и традиционные оценки Машинное обучение (ML), понять их связь с оценкой системы ИИ и изучить различные метрики оценки LLM и конкретные оценки, связанные с задачами.
Цели обучения
В этом модуле вы узнаете, как:
- Сравнение вычислений LLM и традиционных вычислений машинного обучения.
- Опишите связь между оценкой LLM и оценкой всей системы ИИ.
- Описать универсальные метрики оценки LLM, такие как точность, неуверенность и токсичные данные.
- Описание LLM-as-a-судьи для оценки.
Предварительные требования
Перед запуском этого модуля необходимо ознакомиться с Azure Databricks. Прежде чем запускать этот модуль, рассмотрите возможность изучения Azure Databricks .