آموزش پردازش زبان طبیعی برای جمع بندی متن

سرفصل ها و درس ها

معرفی Introduction

• محتوای دوره Course content

• مقدمه ای بر پردازش زبان طبیعی Introduction to natural language processing

• کد منبع و اسلایدها Source code and slides

الگوریتم مبتنی بر فرکانس Frequency-based algorithm

• طرح حمله Plan of attack

• الگوریتم - شهود Algorithm - intuition

• پیش پردازش متون 1 Preprocessing the texts 1

• پیش پردازش متون 2 Preprocessing the texts 2

• فرکانس کلمات Word frequency

• فرکانس وزنی کلمات Weighted word frequency

• علامت گذاری نشانه Sentence tokenization

• تولید خلاصه Generating the summary

• تجسم خلاصه در HTML Visualizing the summary in HTML

• استخراج متون از اینترنت Extracting texts from the Internet

• عملکرد خلاصه کردن متون Function to summarize the texts

• عملکردی برای تجسم نتایج Function to visualize the results

• جمع بندی چند متن Summarizing multiple texts

الگوریتم لوهن Luhn algorithm

• طرح حمله Plan of attack

• آماده سازی محیط Preparing the environment

• پیاده سازی 1 Implementation 1

• پیاده سازی 2 Implementation 2

• پیاده سازی 3 Implementation 3

• پیاده سازی 4 Implementation 4

• پیاده سازی 5 Implementation 5

• استخراج متون از اینترنت Extracting texts from the Internet

• خواندن مقالات از خوراک RSS Reading articles from RSS feeds

• ابر کلمه Word cloud

• استخراج موجودیت های نامگذاری شده Extracting named entities

• جمع بندی مقالات از فید Summarizing articles from feed

• خلاصه در فایل های HTML Summary in HTML files

شباهت به کسینوس Cosine similarity

• طرح حمله Plan of attack

• آماده سازی محیط Preparing the environment

• شباهت بین جملات 1 Similarity between sentences 1

• شباهت بین جملات 2 Similarity between sentences 2

• ماتریس شباهت Similarity matrix

• خلاصه متون Summarizing texts

• استخراج متون از اینترنت Extracting texts from the Internet

• استخراج متون از اینترنت Extracting texts from the Internet

کتابخانه ها برای جمع بندی متن Libraries for text summarization

• طرح حمله Plan of attack

• طرح حمله Plan of attack

• آماده سازی محیط Preparing the environment

• کتابخانه سومی Sumy library

• کتابخانه جمع بندی مجدد Pysummarization library

• کتابخانه خلاصه گر BERT BERT summarizer library

• مطالب اضافی: خلاصه چکیده Additional content: abstractive summarization

نکات پایانی Final remarks

• نکات پایانی Final remarks