urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:	edition	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1	body	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.1	p	In den vergangenen Jahren konnte die automatisierte Erkennung sowohl handschriftlicher als auch alter Druckschriften stark verbessert werden. Sowohl für Handschriften als auch für alte Drucke hat sich der Einsatz von Handwritten Text Recognition (HTR) bewährt, die auf dem Einsatz neuronaler Netze beruht.<ref xmlns="http://www.tei-c.org/ns/1.0" n="1" target="ftn1" /> Führend in der Implementierung der Technologie ist die Plattform Transkribus, die im Rahmen von Projekt READ zwischen 2016 und 2019 stetig weiter entwickelt wurde <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"acG6h6sq","properties":{"formattedCitation":"(Muehlberger u.//uc0//u160{}a. 2019)","plainCitation":"(Muehlberger u. a. 2019)","noteIndex":0},"citationItems":[{"id":17597,"uris":["http://zotero.org/users/534029/items/QM846BIY"],"uri":["http://zotero.org/users/534029/items/QM846BIY"],"itemData":{"id":17597,"type":"article-journal","title":"Transforming scholarship in the archives through handwritten text recognition : Transkribus as a case study","container-title":"Journal of Documentation","page":"Epub ahead of print","volume":"ahead-of","issue":"ahead-of-p","source":"www.zora.uzh.ch","abstract":"Purpose: An overview of the current use of handwritten text recognition (HTR) on archival manuscript material, as provided by the EU H2020 funded Transkribus platform. It explains HTR, demonstrates Transkribus, gives examples of use cases, highlights the affect HTR may have on scholarship, and evidences this turning point of the advanced use of digitised heritage content. The paper aims to discuss these issues. - Design/methodology/approach: This paper adopts a case study approach, using the development and delivery of the one openly available HTR platform for manuscript material. - Findings: Transkribus has demonstrated that HTR is now a useable technology that can be employed in conjunction with mass digitisation to generate accurate transcripts of archival material. Use cases are demonstrated, and a cooperative model is suggested as a way to ensure sustainability and scaling of the platform. However, funding and resourcing issues are identified. - Research limitations/implications: The paper presents results from projects: further user studies could be undertaken involving interviews, surveys, etc. - Practical implications: Only HTR provided via Transkribus is covered: however, this is the only publicly available platform for HTR on individual collections of historical documents at time of writing and it represents the current state-of-the-art in this field. - Social implications: The increased access to information contained within historical texts has the potential to be transformational for both institutions and individuals. - Originality/value: This is the first published overview of how HTR is used by a wide archival studies community, reporting and showcasing current application of handwriting technology in the cultural heritage sector.","DOI":"10.1108/jd-07-2018-0114","ISSN":"0022-0418","title-short":"Transforming scholarship in the archives through handwritten text recognition","language":"eng","author":[{"family":"Muehlberger","given":"Guenter"},{"family":"Seaward","given":"Louise"},{"family":"Terras","given":"Melissa"},{"family":"Ares Oliveira","given":"Sofia"},{"family":"Bosch","given":"Vicente"},{"family":"Bryan","given":"Maximilian"},{"family":"Colutto","given":"Sebastian"},{"family":"Déjean","given":"Hervé"},{"family":"Diem","given":"Markus"},{"family":"Fiel","given":"Stefan"},{"family":"Gatos","given":"Basilis"},{"family":"Greinoecker","given":"Albert"},{"family":"Grüning","given":"Tobias"},{"family":"Hackl","given":"Guenter"},{"family":"Haukkovaara","given":"Vili"},{"family":"Heyer","given":"Gerhard"},{"family":"Hirvonen","given":"Lauri"},{"family":"Hodel","given":"Tobias"},{"family":"Jokinen","given":"Matti"},{"family":"Kahle","given":"Philip"},{"family":"Kallio","given":"Mario"},{"family":"Kaplan","given":"Frederic"},{"family":"Kleber","given":"Florian"},{"family":"Labahn","given":"Roger"},{"family":"Lang","given":"Eva Maria"},{"family":"Laube","given":"Sören"},{"family":"Leifert","given":"Gundram"},{"family":"Louloudis","given":"Georgios"},{"family":"McNicholl","given":"Rory"},{"family":"Meunier","given":"Jean-Luc"},{"family":"Michael","given":"Johannes"},{"family":"Mühlbauer","given":"Elena"},{"family":"Philipp","given":"Nathanael"},{"family":"Pratikakis","given":"Ioannis"},{"family":"Puigcerver Pérez","given":"Joan"},{"family":"Putz","given":"Hannelore"},{"family":"Retsinas","given":"George"},{"family":"Romero","given":"Verónica"},{"family":"Sablatnig","given":"Robert"},{"family":"Sánchez","given":"Joan Andreu"},{"family":"Schofield","given":"Philip"},{"family":"Sfikas","given":"Giorgos"},{"family":"Sieber","given":"Christian"},{"family":"Stamatopoulos","given":"Nikolaos"},{"family":"Strauss","given":"Tobias"},{"family":"Terbul","given":"Tamara"},{"family":"Toselli","given":"Alejandro Héctor"},{"family":"Ulreich","given":"Berthold"},{"family":"Villegas","given":"Mauricio"},{"family":"Vidal","given":"Enrique"},{"family":"Walcher","given":"Johanna"},{"family":"Weidemann","given":"Max"},{"family":"Wurster","given":"Herbert"},{"family":"Zagoris","given":"Konstantinos"}],"issued":{"date-parts":[["2019",7,24]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>(Muehlberger u. a. 2019) und auf der mittlerweile (Stand Ende 2019) mehr als 1‘000‘000 Dokumentenseiten bearbeitet wurden.<ref xmlns="http://www.tei-c.org/ns/1.0" n="2" target="ftn2" /> Die Verbesserung der Technologie führte gleichzeitig zur Einführung von unterstützenden Tools und Methoden, die reine Texte entweder mit höherer Genauigkeit suchbar machen oder strukturierende Maßnahmen ermöglichen. Es spielt also eine Rolle, welche Resultate erreicht werden sollen und welche Ziele der vorgesehene Zugriff hat. Im Rahmen des Papers werden drei Herangehensweisen skizziert, die ausgehend von unterschiedlichen Zielvorstellungen andere Aufbereitungsschritte und die Allokation von Ressourcen an verschiedenen Stellen nötig machen. Das Paper fokussiert auf die Nutzung von Transkribus, da die Software frei nutzbar und aufgrund des GUI innerhalb von zwei Arbeitstagen ohne Vorkenntnisse erlernbar ist (siehe dazu auch die How-To Guides: <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"UujlFHGI","properties":{"formattedCitation":"(O//uc0//u160{}A o.//uc0//u160{}J.)","plainCitation":"(O A o. J.)","noteIndex":0},"citationItems":[{"id":17607,"uris":["http://zotero.org/users/534029/items/PLZ7B5Z9"],"uri":["http://zotero.org/users/534029/items/PLZ7B5Z9"],"itemData":{"id":17607,"type":"webpage","title":"READ: Transkribus","URL":"https://read.transkribus.eu/transkribus/","language":"en-GB","accessed":{"date-parts":[["2019",9,12]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>READ 2019). Darin eingeschlossen ist die Anfertigung eigener Modelle zur Erkennung von Handschriften bzw. alter Drucke.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.2	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.2.1	p	Handschriftenerkennung ist seit den 1990er Jahren und dem Aufkommen der OCR (Optical Character Recognition) ein Forschungsfeld der Computerwissenschaften. Nach einer frühen Euphorie folgte bis vor fünf Jahren eine Ernüchterung, da die erzielten Resultate, die häufig auf statistischen Modellen (insbesondere Hidden Markov Models) basierten, für den Einsatz in der Praxis ungenügend waren. Zeichenfehlerquoten von bestenfalls 16% CER (Character Error Rate) zeigten zwar die Chancen auf, der erkannte Text war aber weder lesbar noch sinnvoll durch Postkorrektion aufzubereiten <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"6fIZP925","properties":{"formattedCitation":"(S//uc0//u225{}nchez u.//uc0//u160{}a. 2013)","plainCitation":"(Sánchez u. a. 2013)","noteIndex":0},"citationItems":[{"id":17599,"uris":["http://zotero.org/users/534029/items/UEXUG5QX"],"uri":["http://zotero.org/users/534029/items/UEXUG5QX"],"itemData":{"id":17599,"type":"paper-conference","title":"TranScriptorium: a European Project on Handwritten Text Recognition.","container-title":"ACM Symposium on Document Engineering DOCENG","publisher":"ACM","page":"227-228","note":"Citation Key: conf/doceng/SanchezMGSDDVD13 /nbibtex*[crossref=conf/doceng/2013]","author":[{"family":"Sánchez","given":"J.A."},{"family":"Mühlberger","given":"G."},{"family":"Gatos","given":"B."},{"family":"Schofield","given":"P."},{"family":"Depuydt","given":"K."},{"family":"Davis","given":"R.M."},{"family":"Vidal","given":"E."},{"family":"Does","given":"J.","non-dropping-particle":"de"}],"editor":[{"family":"Marinai","given":"Simone"},{"family":"Marriott","given":"Kim"}],"issued":{"date-parts":[["2013"]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>(Sánchez et al. 2013). Erst der Einsatz neuronaler Netze (erst rekursive, später konvolutionale) führte dazu, dass die Fehlerquote auf unter 12% CER gedrückt werden konnte <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"nIaH7Hd1","properties":{"formattedCitation":"(Leifert u.//uc0//u160{}a. 2016)","plainCitation":"(Leifert u. a. 2016)","noteIndex":0},"citationItems":[{"id":13563,"uris":["http://zotero.org/users/534029/items/G63TNVHV"],"uri":["http://zotero.org/users/534029/items/G63TNVHV"],"itemData":{"id":13563,"type":"article-journal","title":"Cells in Multidimensional Recurrent Neural Networks","container-title":"Journal of Machine Learning Research","page":"97:1–97:37","volume":"17","source":"DBLP Computer Science Bibliography","author":[{"family":"Leifert","given":"Gundram"},{"family":"Straubeta","given":"Tobias"},{"family":"Grüning","given":"Tobias"},{"family":"Wustlich","given":"Welf"},{"family":"Labahn","given":"Roger"}],"issued":{"date-parts":[["2016"]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>(Leifert et al. 2016). Ab der Schwelle um 12% wird die Korrektur von erkanntem Text gegenüber von händisch erstellten Transkriptionen ökonomisch sinnvoll. Gleichzeitig sind die Resultate ab 12% für Menschen insofern nützlich, da die Navigation im Text, insbesondere für Personen mit Kenntnissen der Dokumente, rasch und zielsicher möglich ist.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.3	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.3.1	p	Obwohl geisteswissenschaftliche Forschung häufig „Text“ im Fokus hat, ist die Diskussion, was darunter verstanden wird, bereits mehrfach in Bezug zu digitalen Editionsformen in den Digital Humanities breitgetreten worden <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"QbZJHP4I","properties":{"formattedCitation":"(Sahle 2013)","plainCitation":"(Sahle 2013)","noteIndex":0},"citationItems":[{"id":2912,"uris":["http://zotero.org/users/534029/items/ZPKN3URN"],"uri":["http://zotero.org/users/534029/items/ZPKN3URN"],"itemData":{"id":2912,"type":"book","title":"Digitale Editionsformen. Zum Umgang mit der Überlieferung unter den Bedingungen des Medienwandels. Teil 2: Befunde, Theorie und Methodik.","collection-title":"Schriften des IDE","collection-number":"8","publisher":"BoD","publisher-place":"Norderstedt","volume":"2","number-of-volumes":"3","source":"kups.ub.uni-koeln.de","event-place":"Norderstedt","abstract":"Die neuen Technologien und Medien sind auch für die wissenschaftliche Edition eine Herausforderung. Die Entwicklung unterschiedlicher digitaler Ausgabeformen in den letzten Jahren kann zunächst als evolutionäre Abfolge verschiedener technischer Paradigmen beschrieben werden, die jeweils auch inhaltliche und methodische Konsequenzen hatten. Auf dieser Grundlage lassen sich Bausteine für eine neue verallgemeinernde Theorie der - nun digitalen - Edition umreißen, die ihren Kern u.a. im Konzept der Transmedialisierung findet. Damit ist nach der spezifischen Formung von Methode und Praxis in analogen und digitalen Medien eine Neufassung der Zielstellungen der Edition auf einer eher medienneutralen, konzeptionellen Ebene zu erreichen. Die veränderten Bedingungen und unsere zunehmend digitale Umwelt führen dazu, dass fast alle Bereiche der Edition einem Wandel unterworfen werden. Auch einige dieser Aspekte werden in diesem Band genauer beleuchtet.","URL":"http://kups.ub.uni-koeln.de/5352/","ISBN":"978-3-8482-5252-7","title-short":"Editionsformen 2","author":[{"family":"Sahle","given":"Patrick"}],"issued":{"date-parts":[["2013"]]},"accessed":{"date-parts":[["2014",7,25]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>(Sahle 2013, zu Texterkennung <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"XrOMqiXl","properties":{"formattedCitation":"(Hodel 2018)","plainCitation":"(Hodel 2018)","noteIndex":0},"citationItems":[{"id":13539,"uris":["http://zotero.org/users/534029/items/Y27UAJPN"],"uri":["http://zotero.org/users/534029/items/Y27UAJPN"],"itemData":{"id":13539,"type":"chapter","title":"Konsequenzen automatischer Texterkennung – Ein Aufriss zur Texterkennung mit Machine Learning","container-title":"DHd 2018. Kritik der digitalen Vernunft Konferenzabstracts. Universität zu Köln 26. Februar bis 2. März 2018","publisher-place":"Köln","page":"249-251","event-place":"Köln","URL":"http://dhd2018.uni-koeln.de/wp-content/uploads/boa-DHd2018-web-ISBN.pdf","ISBN":"978-3-946275-02-2","author":[{"family":"Hodel","given":"Tobias"}],"editor":[{"family":"Vogeler","given":"Georg"}],"issued":{"date-parts":[["2018"]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>Hodel 2018). Aus der Perspektive von Forschenden, die Text als Grundlage nutzen, werden gleichzeitig unterschiedliche Fragen an das aufbereitete Material gestellt. Ob etwa ein Dokument nur durchsucht oder aber mit <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">text-mining</hi> Methoden ausgewertet werden soll, führt zu unterschiedlichen Anforderungen an die Texterkennung. Zwischen den beiden Polen besteht auch die Möglichkeit nur visuell abgegrenzte Textteile auszuwerten. Für alle diese Zielvorstellungen unterscheidet sich der Aufwand für die Aufbereitung der Materialien.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.3.2	p	Um eine Vergleichbarkeit herzustellen, lohnt sich eine systematisierte Sicht auf den Workflow mit Angaben, wo der Grossteil der Arbeit anfällt. Es werden daher im Folgenden Fragen nach Ablauf und Umfang der Arbeit sowie nach Schwierigkeiten/Probleme beschrieben.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.3.3	p	Nicht thematisiert werden unterschiedliche Möglichkeiten bei Upload sowie Exportformate und insgesamt Fragen der Nachbereitung.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.1	p	Der klassische Zugriff zielt darauf ab, mit möglichst wenig Aufwand eine möglichst gute Texterkennung zu erzielen. Das Training von passgenauen Modellen steht dabei im Vordergrund. Aufbauend auf der Erkennung können <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">text-mining</hi> Technologien ebenso eingesetzt werden, wie die Weiterverarbeitung als digitale Edition, etwa mit textkritischer Kommentierung oder durch die Annotation von <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">named entities</hi>.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.2	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.2.1	p	Primär muss möglichst viel Trainingsmaterial bereitgestellt werden, das bereits früh im Arbeitsprozess in Modelle umgesetzt (= trainiert) wird. Generische Modelle spielen eine untergeordnete Rolle, da diese die Qualität der passgenauen Modelle nicht erreichen. Die Arbeitsweise ist iterativ, das heisst nach Aufbereitung von bereits 3'000 Wörtern lohnt sich die Herstellung eines Modells. Darauf aufbauend werden weitere Seiten erkannt und korrigiert. Der Prozess wird gestoppt, sobald die Verbesserung des Modells sich im Zehntelprozent Bereich bewegt (siehe dazu auch unten: Evaluation von trainierten Modellen).
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.2.2	p	Spezifische Typen von Layoutanalysen spielen keine Rolle.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.3	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.3.1	p	Gute Resultate (Zeichenfehler unter 5%) werden bei Dokumenten von derselben Hand mit 10'000 Wörter erreicht. Trainings können selbständig gestartet und überprüft werden.<ref xmlns="http://www.tei-c.org/ns/1.0" n="3" target="ftn3" />
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.4	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.4.4.1	p	Sobald unterschiedliche Hände in den Dokumenten erkannt werden sollen, ist eine Erhöhung der Trainingsmaterialien notwendig.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.1	p	Dokumententypen können aufgrund von schematischem Aufbau nur in Teilen interessant sein, d.h. nur ein visuell abgesetzter Teil soll ausgewertet werden. Einzelne Textteile, bspw. Marginalien mit inhaltlichen Zusammenfassungen oder Fussnoten, werden für spezifische Forschungszwecke identifiziert.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.2	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.2.1	p	Ein spezifischer Layouttyp wird trainiert. Danach wird unabhängig davon ein Textmodell entwickelt (analog zu „Hohe Textgüte“). Extraktion von Textregionen bzw. Einbindung in externe (webbasierte) Applikationen ist möglich.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.3	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.3.1	p	Mindestens 100, besser 200-300 Vorkommen der zu identifizierenden Teile (bspw. Textregionen). Zusätzlich müssen Aufwände für die Aufbereitung von Modellen veranschlagt werden.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.4	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.5.4.1	p	Das Training der semantischen Layouterkennung ist erst experimentell in Transkribus implementiert und schlecht dokumentiert (das Training kann auch extern über ein eigene Tool erfolgen [<?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"YvKyG2fC","properties":{"formattedCitation":"(Ares Oliveira u.//uc0//u160{}a. 2018)","plainCitation":"(Ares Oliveira u. a. 2018)","noteIndex":0},"citationItems":[{"id":17596,"uris":["http://zotero.org/users/534029/items/BMXF8I4V"],"uri":["http://zotero.org/users/534029/items/BMXF8I4V"],"itemData":{"id":17596,"type":"chapter","title":"dhSegment: A generic deep-learning approach for document segmentation","container-title":"Frontiers in Handwriting Recognition (ICFHR), 2018, 16th International Conference","page":"7-12","author":[{"family":"Ares Oliveira","given":"Sofia"},{"family":"Seguin","given":"Benoît"},{"family":"Kaplan","given":"Frédéric"}],"issued":{"date-parts":[["2018"]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>Ares Oliveira u. a. 2018; <?biblio ADDIN ZOTERO_ITEM CSL_CITATION {"citationID":"bDoLMH2d","properties":{"formattedCitation":"(Quir//uc0//u243{}s 2017)","plainCitation":"(Quirós 2017)","noteIndex":0},"citationItems":[{"id":17595,"uris":["http://zotero.org/users/534029/items/AA8PRACR"],"uri":["http://zotero.org/users/534029/items/AA8PRACR"],"itemData":{"id":17595,"type":"book","title":"P2PaLA: page to PAGE layout analysis tookit","URL":"https://github.com/lquirosd/P2PaLA","note":"GitHub repository /nCitation Key: p2pala2017 /nbibtex*[publisher=GitHub]","author":[{"family":"Quirós","given":"Lorenzo"}],"issued":{"date-parts":[["2017"]]}}}],"schema":"https://github.com/citation-style-language/schema/raw/master/csl-citation.json"}?>Quirós 2017]). Die Technologie ist insgesamt noch experimentell. Die Extraktion spezifischer Textregionen erfordert zudem Erfahrung im Umgang mit der REST API von Transkribus.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.1	p	Als regelmässige Anforderung wird die Suche in großen Dokumentenkorpora vorgegeben. Dazu scheint zwar ein probates Mittel die Erkennung mit hoher Textgüte zu sein, da für Handschriften und alte Drucke die Genauigkeit von OCR nicht gegeben ist, drängt sich ein alternativer Zugriff auf. Mittels Suche in allen vom Algorithmus erkannten Varianten, kann auch mit nicht passgenauen Modellen eine hohe Trefferquote (hoher <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">recall</hi>) erreicht werden.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.2	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.2.1	p	Primär wird ein möglichst passendes Model identifiziert. Einige generische Modelle (etwa für mittelalterliche Buchschriften oder lateinische Schriften aus den Niederlanden sowie deutsche Kurrent) sind bereits publiziert und in Zukunft werden noch weitere Modelle veröffentlicht. In einem zweiten Schritt werden einige wenige typische Seiten als Validierungsseiten aufbereitet bzw. sog. Samples (zufällig ausgewählte Zeilen, die eine statistisch valide Aussage ermöglichen) erstellt. Aufgrund der eruierten Zeichenfehlerquote in den Validierungssets, ist es möglich Aussagen über die erwartete Trefferquote zu machen. Ab Fehlerquoten von 15% CER und weniger, wird der Recall (Umfang aller gefundenen, möglichen Treffer) 99% betragen und somit werden nur wenige Treffer verpasst.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.3	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.3.1	p	Beschränkt sich vorwiegend auf die Identifikation passender Modelle und der Herstellung von Validierungssets (Validierungsseiten oder Samples bestehend aus einzelnen Zeilen) zur Validierung der Ergebnisse. Die Auswertung der Treffer mit Identifikation von <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">false-positive</hi> Treffern am Ende des Prozesses bedarf manueller Arbeit.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.4	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.6.4.1	p	Die Auswertenden der Trefferliste müssen die Handschrift/den Druck selbst lesen können, um korrekte Treffer zu identifizieren. Die Suche erfolgt in den Erkenntabellen (sog. confidence matrices), da diese nicht durch etablierte Datenbanksysteme etabliert werden, ist die Performanz niedrig und Suchen in mehr als 1'000 Seiten dauern mehrere Minuten (50'000 Seiten werden in knapp 3 Stunden durchsucht). Die Abfragen müssen in Transkribus erfolgen bzw. über die REST API.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.7	div1	<head xmlns="http://www.tei-c.org/ns/1.0">Visualisierung</head><figure xmlns="http://www.tei-c.org/ns/1.0"><graphic height="11.976805555555556cm" n="1001" rend="inline" url="117_final-87ac3cdf5abc99b918959015c54a697f.jpeg" width="15.980833333333333cm" /><head>Abbildung 1: Visualisierung der Szenarien zur Textaufbereitung in Transkribus. Abbildung des Autors, <ref target="https://creativecommons.org/cc-by">CC-BY</ref>. </head></figure>
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8	div1	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.1	p	Eine Aufgabe, die auch von Geisteswissenschaftlern mit nur bedingten technischen Vorkenntnissen übernommen werden kann, ist das Training von Textmodellen. Dazu muss ein Trainingsset (ca. 90% aller aufbereiteten Seiten) und ein Validierungsset (ca. 10% der Seiten) definiert werden. Das Training erfolgt danach auf den Servern in Innsbruck, es gibt nur zwei Optionen, die angepasst werden können. Erstens kann die Anzahl der Epochen (siehe unten) angepasst werden und zweitens können bereits vorhandene Modelle als Basismodelle gewählt werden.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.2	p	Im Trainingsmodus erstellt ein Fehlertool Kurven, die anzeigen wie gut das Training ablief. Anhand dieser Trainingskurven lässt sich abschätzen, inwiefern ein Modell noch verbessert werden kann bzw. gar ein Re-training notwendig ist, da sich das Netz nicht wunschgemäss verbesserte.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.3	p	Drei Begriffe müssen zum Verständnis vorgängig geklärt werden: <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Neuronale Netze</hi> stammen aus dem Bereich des maschinellen Lernens und versuchen aufgrund von Trainingsmaterial (Input und gewünschter Output) einen wertenden Algorithmus (ein Netz basierend auf je nach Input unterschiedlich reagierenden Speicherzellen) zu entwickeln (<hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">trainieren</hi>), der den gewünschten Ausgaben möglichst nahe kommt (Schöch 2017). <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Epochen</hi> meint die Anzahl an Wiederholungen, mit denen ein Netz mit denselben Trainingsdaten zwecks Verbesserung gefüttert wird. Am Ende jeder Epoche wird das Validierungsset durch das Netz erkannt und eruiert, welche Resultate erreicht worden wären. Dadurch entstehen zwei <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Kurven</hi> (in den Abbildungen rot für das Validierungsset und blau für das Trainingsset), die Aussagen über die Fähigkeit eines Netzes machen.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.4	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.4.1	p	Wenn sich die Trainingskurve während dem gesamten Training stetig verbessert, das Validierungsset jedoch auf einer (weit) schlechteren Fehlerquote stehen bleibt, spricht man von <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">overfitting</hi>. Das bedeutet, das Modell lernt die Trainingsseiten auswendig, ohne dass die Fähigkeit zur Erkennung der Zeichen wirklich eingelernt wird. Probates Mittel um den Effekt zu reduzieren, ist das Bereitstellen von mehr Trainingsmaterial.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.5	div2	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.5.1	p	Wenn beide Kurven bis zu den letzten Epochen (Trainingszyklen) leichte Verbesserungen feststellen lassen, ist das Netz noch nicht „austrainiert“. Optimal verbessert sich das Netz in den letzten 10-15 Epochen nur noch minimal bzw. gar nicht mehr. Wenn der Effekt der Verbesserung bis zum Ende anhält, sollte das Training nochmals mit mehr Epochen gestartet werden. Erfahrungsgemäss ist die Erkennung von austrainierten Netzen besser und zuverlässiger.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:1.8.5.2	p	Die Anwendung von Texterkennung, etwa mit Transkribus, ist ohne technische Vorkenntnisse problemlos erlernbar. Mit Rücksicht auf einige wenige Kniffe und mit basalen Kenntnissen der angewandten Algorithmen lassen sich grössere Dokumentenmengen sinnvoll und effizient aufbereiten.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2	back	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.1	notes	<note xmlns="http://www.tei-c.org/ns/1.0" n="1" rend="footnote text" xml:id="ftn1">Im Rahmen eines Wettbewerbs an der ICFHR 2018 wurden nur noch Algorithmen basierend <hi rend="italic">machine learning</hi> zur Erkennung der Handschriften eingesetzt, siehe: https://scriptnet.iit.demokritos.gr/competitions/10/viewresults/. </note> <note xmlns="http://www.tei-c.org/ns/1.0" n="2" rend="footnote text" xml:id="ftn2">Eine Alternative zu Transkribus ist die Open Source Software Kraken, die ebenfalls auf der Basis neuronaler Netze Trainings individueller Handschriftenmodelle erlaubt. Für die Erkennung alter Drucke (gedruckt vor 1830) eignen sich auch Open Source Tools wie Tesseract. Siehe dazu den aktuellen Stand der Förderinitiative OCR-D, Neudecker u. a. 2019. </note> <note xmlns="http://www.tei-c.org/ns/1.0" n="3" rend="footnote text" xml:id="ftn3"> Aktuell ist der Zugang zur Trainingsfunktionalität nicht standardmässig gegeben. Per Mail (an email@transkribus.eu) wird die Möglichkeit aber rasch und unkompliziert gewährt. </note>
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2	bibliogr	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1	listBibl	
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.1	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Ares Oliveira, Sofia / Seguin, Benoît / Kaplan, Frédéric </hi> (2018): dhSegment: A generic deep-learning approach for document segmentation. In: <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">Frontiers in Handwriting Recognition (ICFHR), 2018, 16th International Conference.</hi> 7–12.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.2	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Hodel, Tobias </hi> (2018): Konsequenzen automatischer Texterkennung – Ein Aufriss zur Texterkennung mit Machine Learning. In: Vogeler, Georg (Hg.). <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">DHd 2018. Kritik der digitalen Vernunft Konferenzabstracts. Universität zu Köln 26. Februar bis 2. März 2018</hi> Köln, 249–251. http://dhd2018.uni-koeln.de/wp-content/uploads/boa-DHd2018-web-ISBN.pdf.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.3	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Leifert, Gundram u. a. </hi> (2016): Cells in Multidimensional Recurrent Neural Networks. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">Journal of Machine Learning. Res.</hi> 17/97:1–97:37.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.4	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Muehlberger, Guenter u. a. </hi> (2019): Super Transforming scholarship in the archives through handwritten text recognition: Transkribus as a case study. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">Journal of Documentation 75/5 </hi>, 954-976. <ref xmlns="http://www.tei-c.org/ns/1.0" target="https://doi.org/10.1108/JD-07-2018-0114">https://doi.org/10.1108/JD-07-2018-0114</ref>
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.5	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Neudecker, Clemens u. a. </hi> (2019): OCR-D: An end-to-end open source OCR framework for historical documents. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">EuropeanaTech Insight</hi> 13.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.6	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">READ: Transkribus</hi><hi xmlns="http://www.tei-c.org/ns/1.0" style="font-family:Helvetica">. https://read.transkribus.eu/transkribus/ [12.9.2019].</hi>
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.7	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Quirós, Lorenzo </hi> (2017): <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">P2PaLA: page to PAGE layout analysis tookit.</hi> https://github.com/lquirosd/P2PaLA.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.8	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Sahle, Patrick </hi> (2013): Digitale Editionsformen. Zum Umgang mit der Überlieferung unter den Bedingungen des Medienwandels. Teil 2: Befunde, Theorie und Methodik. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">Schriften des IDE 8</hi> Bd. 2, Norderstedt: BoD. http://kups.ub.uni-koeln.de/5352/ [25.7.2014].
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.9	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Sánchez, J.A. u. a. </hi> (2013): TranScriptorium: a European Project on Handwritten Text Recognition. In: Marinai, Simone / Marriott, Kim (Hg.).<hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">ACM Symposium on Document Engineering DOCENG.</hi> ACM, 227–228.
urn:cts:dhd:2020.hodel_tobias_best_practices_zur_erkennung_alter_drucke_und_h:2.2.1.10	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">Schöch, Christoph </hi> (2017): Quantitative Analyse, in: Jannidis, Fotis / Kohle, Hubertus, Rehbein, Malte (Hg.). <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">Digital Humanities: Eine Einführung</hi>. J.B. Metzler, Stuttgart, 279–298. <ref xmlns="http://www.tei-c.org/ns/1.0" target="https://doi.org/10.1007/978-3-476-05446-3_20">https://doi.org/10.1007/978-3-476-05446-3_20</ref>