آموزش ارزیابی مدل‌های مولد: روش‌ها، معیارها و ابزارها - آخرین آپدیت

سرفصل ها و درس ها

مقدمه Introduction

• معرفی Introduction

درس 1 Lesson 1

• آشنایی با LLMها و روش‌های ارزیابی آن‌ها Introduction to LLMs and their evaluation methods

• مزایا و چالش‌های روش‌های ارزیابی LLM Benefits and Challenges of LLM Evaluation Methods

• ارزیابی LLM در Vertex AI LLM Evaluation on Vertex AI

درس 2 Lesson 2

• معیارهای خودکار Automatic Metrics

• نمایش معیارهای خودکار Automatic Metrics Demo

• AutoSxS AutoSxS

• نمایش AutoSxS AutoSxS Demo

درس 3 Lesson 3

• مدل‌های ارزیابی مبتنی بر متن - قسمت 1 Text-based Evaluation Models-part1

• مدل‌های ارزیابی مبتنی بر متن - قسمت 2 Text-based Evaluation Models-part2

• ارزیابی مدل‌های هوش مصنوعی مولد غیر متنی Evaluation of non-text Generative AI Models

• نکات پایانی - اهمیت ارزیابی انسانی Final Notes-Importance of Human Evaluation

پایان Outro

• پایان Outro