آموزش ارزیابی عامل‌های هوش مصنوعی - آخرین آپدیت

سرفصل ها و درس ها

Introduction

• مقدمه Introduction

• عامل‌های هوش مصنوعی چیستند؟ What Are AI Agents?

• مبانی ارزیابی عامل‌ها و LLMها Agent & LLM Evaluations 101

• اجزای سازنده عامل‌های هوش مصنوعی Building Blocks of AI Agents

• چرا عامل‌های هوش مصنوعی را ارزیابی کنیم؟ Why Evaluate AI Agents?

• توضیح معماری عامل هوش مصنوعی به یک ذی‌نفع فنی Explaining AI Agent Architecture to a Technical Stakeholder

• ساخت یک عامل هوش مصنوعی ساده (عملی) Build a Simple AI Agent (Hands-on)

چگونه عامل‌های خود را ارزیابی کنیم؟ How to evaluate your Agents?

• معیارهای ارزیابی برای عامل‌های شما Evaluation Metrics for your Agents

• طراحی معیارهای عامل Designing Agent Metrics

• ابزارهای محبوب برای ارزیابی عامل Popular tools for Agent Evaluation

• پیاده‌سازی ارزیابی Patronus برای عامل ما Implementing Patronus Evaluation for our Agent

• دانش خود را بیازمایید Test your knowledge

تکنیک‌های پیشرفته ارزیابی Advanced Evaluation Techniques

• ردیابی و قابلیت مشاهده Tracing & Observability

• LLM به عنوان یک قاضی LLM as a Judge

• ارزیابی‌های ساختاری Structural Evaluations

• خلاصه Summary

• طراحی یک چارچوب ارزیابی برای عامل هوش مصنوعی خدمات مشتری Design an Evaluation Framework for a Customer Service AI Agent