آموزش ساخت اپلیکیشن RAG با زبان پایتون - آخرین آپدیت

سرفصل ها و درس ها

مقدمه Introduction

• مقدمه Introduction

• نصب پایتون Installing Python

• نصب محیط توسعه (IDE) Installing an IDE

• اشتباهات؛ همه ما مرتکب می‌شویم Mistakes - we all make them

شروع به کار: چت با مدل زبانی (LLM) Getting Started: Chatting with the LLM

• راه‌اندازی یک اپلیکیشن پایه پایتون Setting up a basic Python application

• تنظیم کدهای مدل زبانی (LLM) Setting up the LLM code

• راه‌اندازی رابط خط فرمان (CLI) Setting up the CLI

• دریافت مدل از Ollama و تست اولیه Pulling a model from Ollama and trying things out

راه‌اندازی ذخیره‌ساز برداری Setting up the Vector Store

• شروع کار با ذخیره‌ساز برداری Getting started with the Vector Store

• راه‌اندازی Postgres Setting up Postgres

• تعریف قرارداد (Contract) ذخیره‌ساز برداری Define the vector store contract

• پیاده‌سازی ذخیره‌ساز Postgres بخش اول Implementing the Postgres store I

• پیاده‌سازی ذخیره‌ساز Postgres بخش دوم Implementing the Postgres store II

• اتصال اجزا به یکدیگر Wiring things up

• تست و بررسی Trying things out

راه‌اندازی خط لوله وارد کردن داده‌ها Setting up the Ingestion Pipleline

• شروع به کار Getting started

• راه‌اندازی منطق قطعه‌بندی (Chunking) Setting up our chunking logic

• ایجاد جاسازی‌ها (Embeddings) از قطعات Creating embeddings from chunks

• تست مدل جاسازی Trying out our embedder

• راه‌اندازی واردکننده داده‌ها (Ingestor) Setting up the ingestor

• اتصال CLI به واردکننده داده‌ها Wire up the CLI for the ingestor

• تست خط لوله وارد کردن داده‌ها Trying out the ingestion pipeline

راه‌اندازی سیستم بازیابی Setting up Retrieval

• شروع کار با بازیابی (Retrieval) Getting started with retrieval

• پیاده‌سازی جستجو در ذخیره‌ساز برداری Postgres Implementing search in the postgres vector store

• تنظیم پرس‌وجو (Query) Setting up the query

• تست عملیات بازیابی Trying out retrieval

پیاده‌سازی RAG: تجمیع کلیت پروژه Implementing RAG: Bringing it all together

• شروع به کار: پرامپت سیستم Getting started: the system prompt

• بسته‌بندی بازیابی در قالب پیام کاربر Wrapping retrieval into a user message

• پیاده‌سازی دستور ask — اجرای کامل RAG در یک تابع Implement an ask command — RAG end-to-end in one function

• استفاده از پرامپت سیستم خارجی Using an external system prompt

• اصلاح دستور chat برای استفاده از RAG Modifying the chat command to use RAG

• افزودن نشانگر انتظار (Spinner) Adding a spinner

• بهبود نشانگر انتظار Improving the spinner

خودکارسازی وارد کردن داده‌ها Automating Ingestion

• شروع به کار: جابجایی فایل‌های پردازش شده Getting started: moving processed files

• بررسی ایمنی: جلوگیری از اجرای مجدد وارد کردن فایل‌ها Safety check: prevent re-triggering ingest of files

• اسکن دایرکتوری اسناد هنگام اجرای برنامه Scanning the documents directory on app startup

• راه‌اندازی هندلر Debouncing Setting up a debouncing handler

• شروع نظارت‌کننده برای یافتن فایل‌های پردازشی Starting our watcher to look for files to process

• افزودن دستور watch Adding the watch command

• تست و بررسی Trying things out

جستجو و بازیابی ترکیبی Hybrid Search & Retrieval

• شروع به کار: تبدیل متد جستجوی Postgres به حالت ترکیبی Getting started: making the Postgres search method hybrid

• مرور کد و تست بازیابی ترکیبی Reviewing the code and trying hybrid retrieval

متاداده‌ها (Metadata) Metadata

• شروع به کار: اصلاح رابط انتزاعی برای متاداده‌ها Getting started: Modifying the abstract interface for metadata

• به‌روزرسانی ذخیره‌ساز برداری Postgres برای متاداده‌ها Updating the Postgres vector store for metadata

• به‌روزرسانی متد جستجو برای متاداده‌ها Updating the search method for metadata

• پر کردن متاداده‌ها Populating metadata

Weaviate: یک ذخیره‌ساز برداری جایگزین Weaviate: An alternative vector store

• شروع به کار: اجرای Weaviate و افزودن وابستگی‌ها Getting started: starting weaviate and adding the dependency

• شروع کار با ذخیره‌ساز Weaviate و تنظیمات پیکربندی Getting started with the weaviate store with config entries

• راه‌اندازی ذخیره‌ساز Weaviate: بخش اول Setting up the Weaviate Store: Part I

• پیاده‌سازی has_document Setting up has_document

• پیاده‌سازی upsert_document Setting up upsert_document

• پیاده‌سازی delete_document Setting up delete_document

• پیاده‌سازی جستجو Setting up search

• تست و بررسی Trying things out

راه‌اندازی رابط کاربری وب Setting up a Web Interface

• افزودن وابستگی‌های پروژه Adding project dependencies

• شروع کار با اپلیکیشن وب Getting started with our web application

• راه‌اندازی اپلیکیشن FastAPI و اولین Route Setting up the FastAPI application and one route

• بررسی فایل index.html Going through index.html

• راه‌اندازی End-point چت Setting up the chat endpoint

• راه‌اندازی End-point آپلود در ذخیره‌ساز برداری Setting up the endpoint to upload to the vector store

بهبود بخش بازنویس پرس‌وجو Improving the Rewriter

• مشکلی که قصد رفع آن را داریم The problem we want to address

• شروع به کار با بازنویسی پرس‌وجو Getting started with rewriting the query

• استفاده از بازنویس در چت CLI Using our rewriter in the CLI chat

• استفاده از بازنویس در چت وب Using our rewriter in the Web chat

افزودن پشتیبانی از تصاویر Adding Support for Images

• شروع به کار Getting started

• به‌روزرسانی تنظیمات برای تصاویر Updating config for images

• پیاده‌سازی فراخوانی مدل بینایی و تبدیل فرمت Implementing the vision call and the format-conversion

• دریافت مدل بینایی و تست اولیه Getting a vision model and trying things out

• به‌روزرسانی واردکننده داده‌ها برای تصاویر Updating the ingestor for images

• اصلاح پرس‌وجو برای تصاویر: بخش اول Modifying the query for images: Part I

• اصلاح پرس‌وجو برای تصاویر: بخش دوم Modifying the query for images: Part II

• به‌روزرسانی وب‌اپلیکیشن برای تصاویر: بخش اول Updating the web app for images: Part I

• به‌روزرسانی وب‌اپلیکیشن برای تصاویر: بخش دوم Updating the web app for images: Part II

• تست و بررسی Trying things out

• تغییرات نهایی Final changes