Суммаризация

term_id: summarization

Category: application_paradigms

Definition

Текстовая суммаризация сокращает большие объемы текста до более коротких версий без потери критически важного смысла. Она может быть извлекающей (extractive), когда выбираются важные предложения из исходного текста, или абстрактной (abstractive), когда генерируются новые фразы.

Summary

Задача обработки естественного языка (NLP), заключающаяся в создании краткого и связного резюме длинного текста с сохранением его ключевой информации.

Key Concepts

  • Извлекающая суммаризация
  • Абстрактная суммаризация
  • Плотность информации
  • Связность текста

Use Cases

  • Сжатие новостных статей
  • Генерация протоколов совещаний
  • Обзор юридических документов

Code Example

1
2
3
from transformers import pipeline
summarizer = pipeline("summarization")
result = summarizer("AI is transforming industries...", max_length=50, min_length=10)[0]['summary_text']