Dieser Beitrag führt in die Problematik der Nutzung unsicherer historischer Daten für das Training maschineller Verfahren ein, diskutiert Ursachen und Arten von Unsicherheiten in den für NER/EL zu annotierenden Daten und zeigt die Möglichkeiten computergestützter Unsicherheitsmessung auf. Auf der Grundlage einer umfassenden Literaturrecherche unternehmen wir eine Theoriereflexion, um die folgende Frage zu beantworten: Wie lassen sich Annotationsrichtlinien für historische NER/EL-Verfahren optimieren und die bei der Annotation auftretenden Unsicherheiten minimieren?