urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:	edition	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1	body	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.1	div1	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.1.1	p	eine klassifikation von textabschnitten ist im dh-kontext häufig „under construction“, da vorliegende verfahren viele varianten aufweisen, aber nicht domänen-spezifisch genug sind. deshalb ist stets eine evaluation mit dem konkreten datensatz nötig. zudem sind bei besonders kontextabhängigen tasks, für die sentimentanalysen ein verbreitetes beispiel sind, deep-learning-methoden performanter, dafür aber weniger interpretierbar als bspw. lexikon-basierte verfahren (singh und singh, 2021; schmidt et al., 2022; rebora et al., 2023). eine mögliche lösung sind explainability-modelle wie <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">lime</hi> (ribeiro et al., 2016), <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">shap</hi> (lundberg und lee, 2017) oder <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">transformer-explainability</hi> (chefer et al., 2021). allerdings erfordern diese mitunter mehr rechenleistung als das finetuning eines klassifikationsmodells (brookshire und reiter, 2024, 99f.). nichtsdestotrotz lassen sie sich in einen an das scalable reading (vgl. weitin 2017) angelehnten workflow einbinden, mit dem analysen iterativ in ihrer validität verbessert werden können. dieser wird im folgenden am beispiel der untersuchung von polaritätsverläufen illustriert, welche sich bei biographischen daten anbietet (dennis-henderson et al., 2020, 96; koncar et al., 2020, 8–10; faull und mcguire, 2022, 143f.).
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.2	div1	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.2.1	p	in einer pilotstudie werden daten des retrodigitalisierten biographischen nachschlagewerks <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">allgemeine deutsche biographie</hi> (reinert et al., 2015) nachgenutzt. es umfasst insgesamt über 25.000 artikel zu personen, die vor 1900 geboren sind. davon werden hier knapp 3.600 personen, die zwischen 1750 und 1850 geboren und gestorben sind, berücksichtigt. diese zahl wurde durch ein teil-randomisiertes subsampling auf 360 reduziert, welches sicherstellt, dass jeder text mind. 10 sätze umfasst. desweiteren erfolgte als einziger preprocessing-schritt eine satztokenisierung mit <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">stanza</hi> (qi et al., 2020).
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3	div1	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.1	p	aus technischer sicht umfasst das vorgestellte verfahren die fünf module <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">klassifikation</hi>, <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">ordinal-transformation</hi>, <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">segmentierung</hi>, <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">aggregierung</hi> und <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">erklärung</hi>, wobei die ersten vier einem distant-reading-ansatz folgen. so lassen sich etwa polaritätsverläufe der zu untersuchenden historischen biographien folgendermaßen operationalisieren: zunächst weist ein passendes <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">klassifikations</hi>-modell (brookshire und reiter, 2024) den sätzen automatisch sentiment-labels zu. anschließend werden diese nominalen kategorien durch ein mapping (negativ: -1, neutral: 0, positiv: 1) in ordinale (= polarität) <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">transformiert</hi>. im dritten schritt erfolgt eine <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">segmentierung</hi> in bspw. gleichlange textabschnitte (steps), um texte unterschiedlicher länge miteinander vergleichen zu können. abschließend werden die werte pro segment <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">aggregiert</hi> – üblicherweise mit mittelwerten, was letztlich eine parametrisierung ist –, um einen gesamt-verlauf der 360 biographien zu erzeugen:
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.2	p	<figure xmlns="http://www.tei-c.org/ns/1.0"> <graphic url="pictures/44b11a03efa630f70c589adf71c61285.png" /> <head>abb. 1: durchschnittlicher polaritätsverlauf mit hervorhebung des neutralen bereichs</head> </figure>
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.3	p	durch die markierung des neutralen bereichs mit gängigen schwellenwerten (± 0,05; vgl. hutto und gilbert, 2014, 224) wird deutlich, dass das korpus einen leicht positiven trend mit nur wenigen schwankungen aufweist. allerdings zeichnet ein reinzoomen im sinne des scalable readings auf 36 zufällig ausgewählte einzelbiographien ein deutlich anderes bild:
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.4	p	<figure xmlns="http://www.tei-c.org/ns/1.0"> <graphic url="pictures/3cd768b211fd5d9499a62c84832e0ad8.png" /> <head>abb. 2: 36 einzel-polaritätsverläufe mit hervorhebung des neutralen bereichs</head> </figure>
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.5	p	die variabilität ist bei einem individuellen genre wie biographien nicht überraschend, aber bei der analyse größerer datenmengen wegen der tendenz von durchnittswerten zum neutralen bereich (vgl. jockers, 2015) nur durch skalenwechsel zu beobachten.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.6	p	aufgrund der nicht perfekten automatischen annotationen kann auch diese einzelansicht mitunter täuschen, weshalb im vorgelegten verfahren eine am close-reading orientierte <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">explainability</hi>-schleife als fünftes modul vorgesehen ist. in dieser kann bspw. der starke abfall in den negativen bereich bei 75% der biographie der person mit der id <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">sfz80512</hi> erklärt werden.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.7	p	<figure xmlns="http://www.tei-c.org/ns/1.0"> <graphic url="pictures/f59132cac71be331bb42a334a9447a8b.png" /> <head>abb. 3: einfärbung der auswirkung einzelner subwordtokens auf die klassifikation</head> </figure>
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.3.8	p	so gehen die hier durch farbsättigung visualisierten ergebnisse des (aus performance-gründen gewählten) explainability-modells von chefer et al. (2021) über die reinen klassifikationswahrscheinlichkeiten hinaus. denn sie illustrieren, dass die negativ-labels auf subword-tokens wie „nur“, „muß“ und „aufhebung“ zurückgehen, aber den gegebenen neutral formulierten philosophischen abschnitt nur bedingt abbilden. in diesem fall wäre also eine manuelle bereinigung der entsprechenden labels sinnvoll und dank der mitvisualisierten position im gesamtdatensatz durch quellen-id und satznummer auch möglich. zudem ist auch ein erneutes finetuning mit diesen datensätzen denkbar.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.4	div1	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:1.4.1	p	das vorgestellte verfahren zeigt, wie sich fehlklassifikationen, die für nachgelagerte analyseschritte besonders relevant sind, durch eine kombination aus scalable-reading- und explainability-ansätzen gezielt identifizieren und ggf. manuell korrigieren lassen. denn zur steigerung der validität ist es durch aggregierungsschritte nicht immer nötig, alle datensätze zu bereinigen – und je nach personeller und technischer ausstattung auch nicht immer umsetzbar. auch wenn das verfahren hier am beispiel von sentimentwerten illustriert wurde, ist es grundsätzlich auf beliebige klassifikationsaufgaben anwendbar. daher ist derzeit ein entsprechender ausbau in richtung nominal-skalierter kategorien „under construction“. zudem ist angedacht, die modularisierung so konsequent umzusetzen, dass künftig neben beliebigen klassifikationsmodellen auch bei den übrigen modulen beliebige komponenten angedockt werden können, um dem variantenreichtum gerecht zu werden.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2	back	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1	bibliogr	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1	listBibl	
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.1	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">brookshire, patrick </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">d. </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">und nils reiter.</hi> 2024. „modeling moravian memoirs: ternary sentiment analysis in a low resource setting“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the 8th joint sighum </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">workshop on computational linguistics for cultural heritage, social sciences, humanities and literature</hi>, 91–100. https://aclanthology.org/2024.latechclfl-1.10.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.2	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">chefer, hila, shir gur und lior wolf.</hi> 2021. „transformer interpretability beyond attention visualization“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">ieee/cvf conference on computer vision and pattern recognition</hi>, 782–791. https://doi.org/10.1109/cvpr46437.2021.00084.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.3	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">dennis-henderson, ashley, matthew roughan, lewis mitchell und jonathan tuke.</hi> 2020. „life still goes on: analysing australian ww1 diaries through distant reading“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the the 4th joint sighum workshop on computational linguistics for cultural heritage, social sciences, humanities and literature</hi>, 90–104. https://aclanthology.org/2020.latechclfl-1.11/.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.4	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">faull, katherine und michael mcguire.</hi> 2022. „analyzing moravian feelings using computational methods to ask questions about norms and sentiments in eighteenth-century moravian lebensläufe“. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">journal of moravian history</hi> 22 (2): 125–149. https://doi.org/10.5325/jmorahist.22.2.0125.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.5	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">hutto, </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">clayton</hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold"> j. und eric gilbert.</hi> 2014. „vader: a parsimonious rule-based model for sentiment analysis of social media text“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the eighth international aaai conference on weblogs and social media</hi>, 216–222. https://doi.org/10.1609/icwsm.v8i1.14550.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.6	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">jockers, matthew </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">l.</hi> 2015. „revealing sentiment and plot arcs with the syuzhet package“ https://www.matthewjockers.net/2015/02/02/syuzhet/ (zugegriffen: 22.07.2024).
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.7	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">koncar, philipp, alexandra fuchs, elisabeth hobisch, bernhard c. geiger, martina scholger und denis helic.</hi> 2020. „text sentiment in the age of enlightenment: an analysis of spectator periodicals“. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">applied network science</hi> 5 (1): 1–32. https://doi.org/10.1007/s41109-020-00269-z.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.8	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">lundberg, scott m. und su-in lee.</hi> 2017. „a unified approach to interpreting model predictions“. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">advances in neural information processing systems</hi> 30. https://papers.nips.cc/paper_files/paper/2017/hash/8a20a8621978632d76c43dfd28b67767-abstract.html.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.9	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">qi, peng, yuhao zhang, yuhui zhang, jason bolton und christopher d. manning.</hi> 2020. „stanza: a python natural language processing toolkit for many human languages“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the 58th annual meeting of the association for computational linguistics: system demonstrations</hi>, 101–108. https://doi.org/10.18653/v1/2020.acl-demos.14.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.10	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">rebora, simone, marina lehmann, anne heumann, wei ding und gerhard lauer.</hi> 2023. „comparing chatgpt to human raters and sentiment analysis tools for german children’s literature“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the computational humanities research conference</hi>, 333–343. https://ceur-ws.org/vol-3558/paper3340.pdf.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.11	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">reinert, matthias, maximilian schrott und bernhard ebneth.</hi> 2015. „from biographies to data curation – the making of www.deutsche-biographie.de“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the first conference on biographical data in a digital world</hi>, 13–19. https://ceur-ws.org/vol-1399/paper3.pdf.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.12	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">ribeiro, marco tulio, sameer singh und carlos guestrin.</hi> 2016. „‚why should i trust you?‘: explaining the predictions of any classifier“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">proceedings of the 22nd acm sigkdd international conference on knowledge discovery and data mining</hi>, 1135–1144. https://doi.org/10.1145/2939672.2939778.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.13	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">schmidt, thomas, katrin dennerlein und christian wolff.</hi> 2022. „evaluation computergestützter verfahren der emotionsklassifikation für deutschsprachige dramen um 1800“. in <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">8. tagung des verbands digital humanities im deutschsprachigen raum </hi> <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">e. v</hi>. https://doi.org/10.5281/zenodo.6328169.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.14	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">singh, loitongbam gyanendro und sanasam ranbir singh.</hi> 2021. „empirical study of sentiment analysis tools and techniques on societal topics“. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">journal of intelligent information systems</hi> 56 (2): 379–407. https://doi.org/10.1007/s10844-020-00616-7.
urn:cts:dhd:2025.brookshire_patrick_daniel_warum_wird_was_wie_klassifiziert_:2.1.1.15	bibl	<hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">weitin, thomas.</hi> 2017. „scalable reading“. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">zeitschrift für literaturwissenschaft und linguistik</hi> 47 (1): 1–6. https://doi.org/10.1007/s41244-017-0048-4.