Zeichenverarbeitung
term_id: character_computing
Category: basic_concepts
Definition
Dieses Konzept konzentriert sich auf die Manipulation von Text, wobei die grundlegende Einheit der Berechnung ein einzelnes Zeichen ist. Es wird häufig in Aufgaben eingesetzt, die eine feinkörnige Textanalyse erfordern, wie z. B. die Rechtschreibprüfung.
Summary
Zeichenverarbeitung umfasst die Verarbeitung, Generierung oder Analyse von Text auf individueller Zeichenebene anstelle der Wort- oder Satzebene.
Key Concepts
- Tokenisierung
- Textgenerierung
- Feinkörnige Analyse
- Subword-Einheiten
Use Cases
- Handschrifterkennung (OCR)
- Sprachmodellierung für ressourcenarme Sprachen
- Kryptanalyse