Document ID: /fineweb-2-swissfilter-quality_10-filterrobots/filtered/03566.jsonl.gz/1055

Das Wikipedia-Korpus enthält Volltexte aus den Artikeln aus der deutschsprachigen Wikipedia auf der Basis des Datenbank-Abzugs vom 1. 10. 2022 (via Archivalia):
«Texte aus anderen Seitenarten (Diskussionen etc.) wurden nicht aufgenommen.
Das Korpus wurde so konzipiert, dass es sich insbesondere für die Recherche nach (fach)sprachlichen lexikographischen Belegen eignet. Deshalb wurden bei der automatischen Korpuskuration die Artikeltexte so weit wie möglich um Textteile bereinigt, die nicht satzförmig oder nicht deutschsprachig sind. Dies betrifft unter anderem Überschriften, Listen, Tabellen, Literaturangaben und fremdsprachliche Zitate, soweit diese in den Wikipedia-Quellen als solche ausgezeichnet sind.»