Termextraktion mit linguistischen Verfahren · VocabGrabber … • arbeiten auf Basis von...

Darf‘s ein bisschen weniger sein?

Termextraktion mit linguistischen Verfahren

tekom Jahrestagung 2017 Stuttgart, 25.10.2017

Ursula Reuther

IAI Linguistic Content AG

Überblick

• Terminologieaufbau

• Termextraktionsverfahren

• statistische Verfahren

• linguistische Verfahren

• Vergleich

• Zusätzlicher Mehrwert von Termextraktionsergebnissen

• Weitere Nutzung von Termextraktionsergebnissen

• Ausblick und Fazit

02.11.2017 IAI Linguistic Content AG 2

Terminologieaufbau Fragen über Fragen


Sollen die Terme zu einander in Beziehung gesetzt werden?

In welchem Datenmodell?

Gibt es Vorgaben?

Regeln?

Einen Terminologie-Leitfaden?

Nutze ich maschinelle Verfahren?

Wenn ja, welche?

Was nehme ich als Ausgangsbasis?

Gibt es schon einen Terminologie-Datenbestand?

Deskriptiver Ansatz oder

präskriptiver Ansatz?

Arbeite ich ein- oder zweisprachig?

Was sind die Kriterien für einen Term?

Automatische Termextraktionsverfahren

• Herausforderung „Wenn man die Termini eines Textes exzerpieren will […], dann geht es nicht um einzelne Wörter, sondern um ganze Ausdrücke (Benennungen). Deren innerer Zusammenhang ist aber mitunter schwer zu erkennen. Quelle: P.A. Schmitt (2016), Terminologie und Fachlexikografie

• Statistische Verfahren • große Auswahl

• TermFinder, Xerox, PhraseFinder, crossMining, LogiTerm2, memoQ, SDL MultiTerm Extract, STAR TransitNXT, Tilde, Termflow, SynchroTerm, Sketch engine, fiveFilters, VocabGrabber …

• arbeiten auf Basis von Zeichenketten

• ohne morphologische Information - bestenfalls mit so genannten Stemmern (Erkennung von Wortstämmen) • Verkürzungsregeln

• haben ihre Grenzen (Häuser-Haus; sprach-spreche-spricht; gehört; stimmt …zu; etc.)

• ohne Satzgliedanalyse


Automatische Termextraktion Statistische Verfahren

• Ergebnisse Tilde (online Version https://term.tilde.com)


Weniger wäre

mehr!


• Herausforderung „Wenn man die Termini eines Textes exzerpieren will […], dann geht es nicht um einzelne Wörter, sondern um ganze Ausdrücke (Benennungen). Deren innerer Zusammenhang ist aber mitunter schwer zu erkennen. Quelle: P.A. Schmitt (2016), Terminologie und Fachlexikografie

• Linguistische Verfahren • arbeiten auf Lemma-Basis

• Identifizierung von nicht nur zufällig benachbarten Elementen, die unterschiedlichen Phrasen angehören, sondern Erkennung von syntaktisch und semantisch zusammengehörigen Elementen

• Voraussetzung: Morpho-syntaktische Analyse

die Verbräuche --> Verbrauch

… des oberen Totpunktes –> oberer Totpunkt

Falls der Auffangbehälter für den Mitarbeiter nicht zugänglich ist, … Falls der Auffangbehälter für Öl defekt ist, …




o Vorteil: sprachunabhängig

o Nachteil: ohne Morphologie

o mit so genannten Stemmern

Mehrworteinheiten werden auf Basis statistischer Kookkurrenz-berechnungen identifiziert (dennoch mangelhaft)

o Ausgabe von Wortformen

o Termgrenzen werden nicht erkannt

o keine Disambiguierung

o Studie der Uni Zürich (1999)

Präzision: Nur 20% aller gelieferten Termkandidaten sind Terme.

Vollständigkeit: Nur 80% aller Terme eines Textes werden gefunden.

o Vorteil: morpho-syntaktische Analyse

o Nachteil: sprachabhängig

o Ermittlung der Grundform mit grammatischen Informationen

o gute Erkennung von Mehrwortausdrücken

o bessere Recall- und Precision-Ergebnisse

o Mehr relevante Terme als bei einer intellektuellen Extraktion

o Verhältnis von gefundenen und relevanten Termen beträgt fast 100%

Quelle: M. Volk (2003) Parallele Korpora und Terminologie-Extraktion

Statistische

Termextraktionsverfahren

Linguistische

Termextraktionsverfahren

Extraktionsverfahren im Vergleich

• Inputdokument: deutscher Text (36 KB)

• 3 Verfahren

• intellektuelle Extraktion

• statisches Verfahren

• mit unterschiedlichen Einstellungen bezüglich Noise und Silence

• linguistisches Verfahren

• Ergebnisse ohne Filterung



02.11.2017 9 IAI Linguistic Content AG

Quelle: Fritz Communication


• Linguistische Termextraktion findet mehr geeignete Terme

• als die statistische Termextraktion

• als selbst die intellektuelle Termextraktion

• Das Verhältnis von gefundenen zu tatsächlichen Termen ist fast optimal

• Zeitersparnis ca. 98%


Inhaltliche Ebene Auswahl und Bildung von Termen

• Wann ist ein Term ein Term?

• Welche Kriterien werden zugrunde gelegt?

• Nach welchen Regeln werden Terme gebildet?


Wann ist ein Term ein Term?

… korrelieren oftmals, z.B. Nespresso-Kapsel

Intelligente Trommelreversierung

Verschlussdeckel für Öleinfüllstutzen

Virus Alter Mann

Sprachliche Merkmale lassen Rückschlüsse auf inhaltliche Merkmale zu

sprachliche Merkmale inhaltliche Merkmale

Komposita

Teilebenennungen Produktnamen

Nominalphrasen • Adjektiv-Nomen-Konstrukte • Nomen - Präposition – Nomen

Fachausdrücke

Etymologie

Domänenabhängigkeit


Maschinell erkennbare Kriterien der Termhaftigkeit

• Kompositum

• Naturflächenverbrauch

• Interimslösung

• Simplex (mit bestimmten semantischen Eigenschaften)

• Hammer s=instr

• Lunge s=koerper

• Antrieb s=process

• Gas, Kohle s=mat

• Fremdwörter (fremdsprachlichen Ursprungs)

• Akkumulator ss=instr, lng=lat

• Update ss=result, lng=engl

• Frequenz ss=state, lng=lat

• Bronchitis ss=disease, lng=gr


Maschinell erkennbare Kriterien der Termhaftigkeit

• Bindestrichkonstrukte

• Kosten-Nutzen-Analyse

• ESP-System

• 230-V-Batterie

• Adjektiv-Nomen-Konstrukte

• verbrauchsoptimierter Dieselmotor

• terminologische Relevanz

• Toponyme

• Silvrettagletscher ls=Silvretta#gletscher,ss=loc&gegend#loc&gelaende

• Stuttgarter Fernsehturm c=adj,deg=base,s=loc&city,ds=Stuttgart~er,ls=Stuttgart,ss=loc&city

c=noun,ss=medium#loc&gebaeude,cs=n#n,ds=fernseh#turm,ls=fernseh#turm

• Namen

• Barak Obama ls=Barack,ss=fname,ls=Obama,ss=family


Ergebnis einer automatischen linguistisch basierten Termextraktion


Zusätzlicher Mehrwert von Termextraktionsergebnissen

• Qualitätssicherung durch Ausgabe von unbekannten Wörtern

• Produkt- und Eigennamen

RegioTram

HH2

• Rechtschreibfehler

abhehmen – abnehemen - abnemen

Defkt

Stabilesator

Ausspahrung

• Qualitätssicherung durch Erkennung von Inkonsistenzen 5-Sitzer -- Fünfsitzer

Deckel-Oberteil -- Deckelunterteil

Evakuierungsvorgang -- Evakuiervorgang


Zusätzlicher Mehrwert von Termextraktionsergebnissen

• Ableitung von Termbildungsregeln durch Analyse von • Frequenzinformation

• Beispiel: Wie viele 3-gliedrigen Komposita kommen mit/ohne Bindestrich vor?

• Kontextinformation • Beispiel: In welchem Kontext kommt Schreibvariante A vor, in welchem Kontext ist es Schreibvariante B?

• Auswahlkriterium • Beispiel: Sollen deverbale Simplizia durch Ableitungen oder durch Infinitive dargestellt werden?

Abbremsung vs. Abbremsen

• Ableitbare Regelungen zu • Bindestrichsetzung

• Schreibung von Ziffern

• Gebrauch von Fremdwörtern

Trainingsunterlagen vs. Schulungsunterlagen

• Wortbildung

• …


Weitere Nutzung von Termextraktionsergebnissen

• Erkennung von Hyperonym- und Hyponymrelationen

Absorptionskälteanlage > Kälteanlage > Anlage

absorbieren#kalt#anlage

gleiches Kopfwort gleicher Wortstamm des Bestimmungsworts 5 Abgasanlage

2 Absauganlage

1 Abwasserreinigungsanlage 1 Absorber

30 Antriebsanlage 1 Absorption

1 Audioanlage 1 Absorptionsmittel

4 Auspuffanlage

1 Beschichtungsanlage

1 Beschickungsanlage

3 Biogasanlage

7 Bremsanlage

1 chemische Anlage

………

6 Windkraftanlage

1 Zentralschmieranlage



• Visualisierung terminologischer Relationen

• Basis:

• Termextraktionsergebnisse und zugehöriges Korpus oder

• bestehender Thesaurus

• Zur Herstellung der Relation wird die „semantische Ähnlichkeit“ herangezogen

• Ermittlung der semantischen Ähnlichkeit durch Kookkurrenzbedingungen in Dokumenten

Definition: Wörter der selben semantischen Domäne sind semantisch ähnlich.

Semantisch ähnlich: Krankenschwester Fieber intravenös Doktor



• Terminologische Relationen dargestellt als Wortwolke

https://www.wissen-elektromobilitaet.com


https://www.wissen-elektromobilitaet.com/






Ausblick

• Termextraktionsergebnisse sind nicht nur nutzbar für

• Terminologieaufbau und damit verbundene Tätigkeiten

• sondern auch für

• Thesaurus-/Ontologieerstellung

• Information Retrieval

• Dokumentklassifizierung

• Indexierung


Fazit

Ergebnisse der linguistisch basierten Termextraktion

• liefern weniger Terme mit besserer Qualität

• kein Rauschen, hoher Precision- und Recall-Wert

• nutzbar für die Terminologiearbeit und die Qualitätssicherung

• ermöglichen Ableitung von Termbildungsregeln

• ermöglichen Erkennung von fehlerhaften und inkonsistenten Inhalten

• nutzbar für weitere Anwendungen


Fazit

• Weniger …

• unbrauchbare Terme

• nicht gefundene Terme

• Zeitaufwand

• … und doch ein Mehr an

• brauchbaren Termen

• gefundenen Termen

• Unterstützung der Terminologen

• weiteren Möglichkeiten zur Nutzung


Fazit



Ihre Meinung ist uns wichtig! Sagen Sie uns bitte, wie Ihnen der Vortrag gefallen hat. Wir freuen uns auf Ihr Feedback per Smartphone oder Tablet unter

http://term07.honestly.de oder scannen Sie den QR-Code

Das Bewertungstool steht Ihnen auch noch nach der Tagung zur Verfügung!

Termextraktion mit linguistischen Verfahren · VocabGrabber … • arbeiten auf Basis von...

Documents

Transcript of Termextraktion mit linguistischen Verfahren · VocabGrabber … • arbeiten auf Basis von...