Икономически университет – Варна

Оценка на качеството и ефективността на генеративния ИИ: методи, метрики и добри практики

Качеството и надеждността на съдържанието, генерирано от изкуствен интелект, е от приоритетна важност за научната общност. За разлика от традиционните системи, големите езикови модели (LLMs) създават променливи резултати, които предизвикват обикновените методи за оценка на качеството.

Как могат доставчиците и институциите да изградят стриктна рамка за оценка на акуратността, релевантността и достоверността в академичния контекст?

Този уебинар ще изследва ключови предизвикателства и решения при оценяването на работата и ефективността на генеративния ИИ, черпейки от продуктовото развитие и продължаващите изследвания на Clarivate Analytics.

Теми:

  • Основни предизвикателства в оценката на работата на ИИ: Непоследователност в резултатите; ограничения при човешката проверка и нуждата от усъвършенстващи се методи за оценка.
  • Ключови метрики за оценка на качеството: Установяване на структуриран модел, доказващ академичните стандарти за релевантност и авторитетност на генерираното съдържание от ИИ.
  • Човешка срещу автоматизирана оценка: Намиране на правилния баланс между човешкия надзор и автоматизирания качествен контрол на ИИ.
  • Реални приложения: Методологията на Clarivate за оценка на ИИ – Clarivate Academic AI quality evaluation.

Кога: 26 март 2025 г., 17:00 ч.
Къде: Онлайн.
Лектори: Christine Stohn & Marta Enciso.

24 мар 2025



Подобни