Schuhe UNDER ARMOURUa W Speedform Slingwrap Fade Fade Fade 1298673-601 ROT 185c85

Natural Language Processing (NLP) ist der Oberbegriff für das Erkennen, Erzeugen und Darstellen natürlicher Sprache durch den Computer. Für ein Unternehmen kann die Befähigung Texte automatisiert zu verarbeiten  sowohl massive Zeitersparnis bedeuten, als auch gänzlich neue Möglichkeiten eröffnen.

 

Wir betrachten die Möglichkeiten und Methoden von NLP anhand eines Beispielprojektes, der Auswertung von Tätigkeitsberichten von Feldtechnikern. In diesem Beispiel geben die Feldtechniker ihre Berichte in einer Online-Maske als Freitext ein. Es werden über zahlreiche Techniker und Standorte hinweg hunderte Berichte pro Tag generiert, oftmals mehrere Berichte zum gleichen Problem. Die damit einhergehenden Herausforderungen beinhalten nicht nur potentielle Schreibfehler, sondern auch unterschiedliche Sprachen oder das Einfügen langer technischer Logs.

Tommy Jeans RETRO RUNNER - Sneaker low - steel Grau,High Heels GINO ROSSIMidori DCH352-V95-JE00-0029-0 30Halbschuhe SERGIO BARDIElaide FW127210817GM 207,Espadrilles EVA MINGERamona 1J 17MJ1372163ES 102,Floris van Bommel CREPI CUP - Schnürstiefelette - mid Braun,Sandalen GEOXD Amalitha B D827WB 06RBC C1002 Off WeißSandalen CAPRICE9-28111-20 Sand Suede 318Stiefeletten CAPRICE9-26218-21 schwarz Suede 004Ballerinas TOMMY HILFIGERFlexible Leder Ballerina FW0FW02810 Midnight 403,KangaROOS KaVu VI Schuhe schwarz,Nike Air Max 90 Essential Schuhe rainforest-oil Grau-WeißPuma ICRA TRAINER - Sneaker low - steel gray/cabernetKenneth Cole Reaction KLAY BOOT - Schnürstiefelette - Grau,Pro-Keds ROYAL PLUS - Sneaker low - off Weiß,Espadrilles GEOXD Modesty E D8229E 0AWHH C0003 ROT/WeißTrapperschuhe PANAMA JACKFelicia B3 Napa Grass Cuero/Bark,Schuhe ReebokF/S Hi CN3729 Bare Beige/Weiß,Etnies FADER LS - Sneaker low - schwarz,Sneakers GEOXD Shahira B D62N1B 022KI CH62L Lt Taupe/Lt Gold,Sneakers CAMEL ACTIVESpring 865.71.01 Lt Grau/schwarz,High Heels TORY BURCHPenelope 85mm Cap-Toe Pump 51437 Sea Shell Pink/Perfect schwarz 677,Betula House Soft Textile Clogs Weichbettung schmal braun -TAURO,Schuhe INUIKIISneaker Classic 70202-5 RoseStiefeletten TAMARIS1-25125-21 schwarz Leder 003,Steve Madden SUMMIT - Slipper - schwarz,Espadrilles TORY BURCHMax EmbrioideROT Espadrille Slide 46913 Perfect Nany/Painted Iris 449,Pantofola d Oro Imola Herren Niedrig Ascoli Schuhe tortoise shell,Sneakers TORY BURCHAmes Sneaker 49550 Perfect schwarz 012Converse CHUCK TAYLOR ALL STAR OX - Sneaker low - charcoal,Lacoste CARNABY EVO - Sneaker low - schwarz/off Weiß,

Zielsetzung ist als erstes eine Kategorisierung der Berichte um Themenschwerpunkte zu ermitteln. Weiterführend sollen durch die gesamtheitliche Auswertung Erkenntnisse generiert werden welche durch das lesen einzelner Berichte nicht zu gewinnen sind. Dazu werden die Berichte mit weiteren Daten verknüpft welche Rahmenbedingungen beinhalten. Zum Beispiel ob die Reparatur Erfolg hatte, wie aufwendig sie war, Daten über den Standort und die verwendete Technik.

Workflow Natural Language Processing

Schuhe adidasStan Smith BZ0484 ROTnit/ROTnit/Cschwarz,

Kommen wir zum interessanten Teil, der eigentlichen Verarbeitung. Bevor der Computer in der Lage ist die Tätigkeitsberichte zu verstehen müssen einige vorbereitenden Schritte erfolgen. Zuerst ermitteln wir die Sprache des jeweiligen Berichtes. Dazu werden im Text Buchstaben und Buchstaben Tupel gezählt, diese stehen in verschiedenen Sprachen in unterschiedlichem Verhältnis zueinander. Bereits nach einem Satz ist mit dieser Methode eine Genauigkeit erreicht welche die Erkennung der Sprache quasi fehlerfrei macht. Auch die technischen Einträge können auf diese Weise bereits identifiziert werden.

Stiefeletten EVA MINGEBenalmade 4C 18BD1372639EF 101,

Als nächstes erfolgt mit Hilfe von Wortlisten und Dictionaries eine Sprachspezifische Verarbeitung. Es werden sogenannte Stop-Worte entfernt. Füllworte welchen im Rahmen der Sprachverarbeitung keine weitere Bedeutung zugemessen wird. Der erste Satz könnte dann so aussehen: „Natural Language Processing [ist] Oberbegriff Erkennen Erzeugen Darstellen natürlicher Sprache [durch] Computer“. Wenngleich sich dies für einen Menschen holprig liest nähert sich der Rechner einer Struktur an die er verstehen kann. Manche der Stop-Worte werden zwar entfernt, ihre Position und Bedeutung wird aber in den Metadaten zum Text beibehalten (ist,durch).

Schuhe ReebokR Crossfit Nano 8.0 CN2977 schwarz/Weiß/Pink,

Der nächste Schritt ist das Stemming. Dabei werden die einzelnen Wörter auf ihren Wortstamm zurückgeführt. Dies kann anhand von Regeln oder Dictonaries erfolgen. Der verbleibende Text ist nun bereits in einer Form in der er vom Rechner grob verarbeitet werden kann. Zum Beispiel durch einfache Aufzählung der Worte in den Texten. Dadurch lassen sich bereits Themengebiete oder Zusammenhänge ermitteln.

Stiefeletten TOMMY JEANSMetallic Heeled Ankl EN0EN00251 schwarz 990,

Schuhe UNDER ARMOURUa W Speedform Slingwrap Fade Fade Fade 1298673-601 ROT 185c85

Ein interessanter Schritt ist nun ein weiterer Abstraktionsschritt. Dabei werden die Wortstämme und ihre Synonyme auf ein abstraktes Token zurückgeführt. Dies kann nun auch sprachübergreifend erfolgen. Damit ist unabhängig von der Ausgangssprache der Texte jeder Text mit seinem Inhalt maschinell erfasst. Erneut bietet sich an Kategorien zu bilden um bestimmte dominierende Themengebiete zu ermitteln welche mit der Tätigkeitsberichten in Zusammenhang stehen.

Produktinformationen