Transformieren Sie Ihr Business mit innovativen Machine Learning-Lösungen von dida
Unsere Services
Computer Vision
Erfahren Sie, wie wir Ihrer Infrastruktur das Sehen beibringen
Natural Language Processing
Automatisieren Sie Prozesse, die Text oder Sprache enthalten
Branchen
Erfahren Sie, was wir für Sie in jeder Branche machen können und bekommen Sie Ideen für die Anwendung von KI in Ihrem Unternehmen sowie Projekte, die wir bereits abgeschlossen haben.
ML Expert Talk
In unserem kostenfreien 1-stündigen Tech Talk wird einer unserer ML-Experten ein von Ihnen ausgewähltes Thema vorstellen.
RegistrierenUnternehmen
Über
dida und das Team
News
Nachrichten über Projekte, Webinare, Veranstaltungen und neueste Entwicklungen bei dida
Tech Lunch buchen
In 45-60min stellt einer unserer ML Experten ein ausgesuchtes Thema vor
Jobs
Mitarbeiten in einem multikulturellen und dynamischen Team
Presse
Aktuelle Informationen über dida für Journalist:innen und Pressemitarbeitende
Ressourcen
Webinarthek
Wir bieten regelmäßige Webinare zu verschiedenen Themen rund um Machine Learning
Use Cases
Potentielle Anwendungsfälle in der Automatisierung von Workflows mit Machine Learning.
Publikationen
Forschungsartikel, zu denen unsere Machine Learning Scientists als Autoren bzw. Ko-Autoren beigetragen haben.
Semantische Suche für die öffentliche Verwaltung
Unser Algorithmus hilft Bürgern durch die Bürokratie einer Gewerbeanmeldung.
| Input: | Umgangssprachliche Beschreibung eines Gewerbes |
| Output: | Relevanter Branchencode |
| Ziel: | Die Gewerbeanmeldung für Bürger vereinfachen |
Ausgangspunkt
Bürger, die in Deutschland ein neues Gewerbe anmelden, müssen bei der Anmeldung einen Branchencode angeben. Dieser Branchencode wird aus einer Liste von über 800 verschiedenen Codes ausgewählt, die jeweils in der komplizierten "Sprache der öffentlichen Verwaltung" beschrieben und definiert sind. Aus all diesen Möglichkeiten den richtigen Code zu finden ist eine schwierige Aufgabe, insbesondere wenn man mit der verwendeten Fachsprache nicht vertraut ist.
Unser Kunde PublicPlan bietet einen Chatbot an, der Bürgern den Zugang zu Dienstleistungen der öffentlichen Verwaltung ermöglicht. Sie wollten dessen Funktionalität durch eine intuitive Suchfunktion für Branchencodes erweitern.
Bürger, die in Deutschland ein neues Gewerbe anmelden, müssen bei der Anmeldung einen Branchencode angeben. Dieser Branchencode wird aus einer Liste von über 800 verschiedenen Codes ausgewählt, die jeweils in der komplizierten "Sprache der öffentlichen Verwaltung" beschrieben und definiert sind. Aus all diesen Möglichkeiten den richtigen Code zu finden ist eine schwierige Aufgabe, insbesondere wenn man mit der verwendeten Fachsprache nicht vertraut ist.
Unser Kunde PublicPlan bietet einen Chatbot an, der Bürgern den Zugang zu Dienstleistungen der öffentlichen Verwaltung ermöglicht. Sie wollten dessen Funktionalität durch eine intuitive Suchfunktion für Branchencodes erweitern.
Die Software wird in einem Chatbot eingesetzt
Ein Gewerbe anzumelden kann herausfordernd sein
Herausforderungen
Die Eingabedaten für den hier entwickelten Algorithmus sollte die umgangssprachliche Beschreibung des Gewerbes sein, das angemeldet werden soll.
Da Behörden oft Wörter und Wendungen verwenden, die sich stark von der Umgangssprache unterscheiden, ist es eine nicht triviale Aufgabe, den richtigen Branchencode für eine bestimmte Gewerbeanmeldung zu finden.
Daher reichen einfache Algorithmen für die Textsuche nicht aus, um den richtigen Branchencode zu finden.
Die Eingabedaten für den hier entwickelten Algorithmus sollte die umgangssprachliche Beschreibung des Gewerbes sein, das angemeldet werden soll.
Da Behörden oft Wörter und Wendungen verwenden, die sich stark von der Umgangssprache unterscheiden, ist es eine nicht triviale Aufgabe, den richtigen Branchencode für eine bestimmte Gewerbeanmeldung zu finden.
Daher reichen einfache Algorithmen für die Textsuche nicht aus, um den richtigen Branchencode zu finden.
Lösung
Wir haben eine KI-Architektur, die besonders auf die Verarbeitung natürlicher Sprache angepasst ist, auf die spezifische Aufgabe trainiert. Das trainierte Modell gibt für eine gegebene umgangssprachliche Gewerbebeschreibung die relevanten Branchencodes aus.
Die Trainingsdaten für die KI waren historische umgangssprachliche Gewerbebeschreibungen und dazugehörige Branchencodes. Diese Daten wurden vom Kunden zur Verfügung gestellt.
Das Endprodukt wurde als Funktionalität eines Chatbots implementiert, über den der Kunde bereits verfügte. Unsere Lösung ist flexibel und einfach zu erweitern: neue Branchencodes können mit sehr geringem Aufwand integriert werden.
Wir haben eine KI-Architektur, die besonders auf die Verarbeitung natürlicher Sprache angepasst ist, auf die spezifische Aufgabe trainiert. Das trainierte Modell gibt für eine gegebene umgangssprachliche Gewerbebeschreibung die relevanten Branchencodes aus.
Die Trainingsdaten für die KI waren historische umgangssprachliche Gewerbebeschreibungen und dazugehörige Branchencodes. Diese Daten wurden vom Kunden zur Verfügung gestellt.
Das Endprodukt wurde als Funktionalität eines Chatbots implementiert, über den der Kunde bereits verfügte. Unsere Lösung ist flexibel und einfach zu erweitern: neue Branchencodes können mit sehr geringem Aufwand integriert werden.
Technische Details
Anforderunden des Kunden
Der Kunde verfügte über eine bereits vorhandene Chatbot-Lösung, die zur Bedienung verwendet werden konnte, so dass die Bürgerinnen und Bürger ihre Gewerbebeschreibungen in Umgangssprache eingeben konnten und die fünf relevantesten Branchencodes als Antwort vom Chatbot erhielten.
Die Chatbot-Lösung ermöglicht die Weiterleitung verschiedener Benutzerfragen an entsprechende API-Endpunkte, was bedeutet, dass wir die von Benutzern geschriebenen umgangssprachlichen Gewerbebeschreibungen als API-Aufrufe erhalten haben. Unser Algorithmus sollte eine Antwort auf diese API-Aufrufe erstellen, die die 5 relevantesten Branchencodes enthält.
Es gab eine bereits existierende Lösung mit einfachen Worteinbettungen, die oft unbefriedigende Ergebnisse zeigte. Dies deutete darauf hin, dass ein besseres semantisches Verständnis der Definitionen und Beschreibungen der verschiedenen Branchencodes sowie der umgangssprachlichen Gewerbebeschreibungen erforderlich war.
Unsere Lösung
Backend: Python, spaCy, PyTorch, NumPy, Pandas, fastAPI, Pydantic, Docker, Elasticsearch
Infrastruktur: GCloud (Training), Git, dvc, tensorboard
Die Grundlage für unseren Algorithmus ist eine Version von BERT, einer von Google entwickelten neuronalen Netzarchitektur, die bereits auf einem großen deutschen Textkorpus vortrainiert wurde. Wir haben die vorhandenen Schichten nachtrainiert und die Ausgabe von BERT mit aufgabenspezifischen Features angereichert. Durch Hinzufügen einiger neuer Schichten und Nachbearbeitungsschritte waren wir in der Lage, einen Textklassifikator zu erstellen, der die vollen semantischen Fähigkeiten von BERT nutzt und gleichzeitig performant genug ist, um auf einer CPU zu laufen.
Dieser Klassifikator wurde dann anhand historischer Gewerbebeschreibung - Branchencode-Paare trainiert. Für eine gegebene Gewerbebeschreibung gibt er für jeden Branchencode einen Relevanzscore aus. Die 5 Branchencodes mit dem höchsten Score werden dann nach ihrer Relevanz sortiert und als Antwort auf die ursprüngliche Benutzeranfrage zurückgeschickt.
Weitere Projekte
Eine Auswahl von Projekten, die wir bereits abgeschlossen haben
Extraktion numerischer Attribute aus Produktbeschreibungen
Automatisches Extrahieren von numerischen Attributen aus Produktbeschreibungen, um die bestehende Datenbank anzureichern.
Extraktion numerischer Attribute aus Produktbeschreibungen
Automatisches Extrahieren von numerischen Attributen aus Produktbeschreibungen, um die bestehende Datenbank anzureichern.
Defekterkennung in der Produktion
KI-gestützte optische Defekterkennung für die Halbleiterlaserproduktion.
Automatische Erkennung von Kleinbergbau
Wie Machine Learning dazu beitragen kann, Umweltzerstörung zu verhindern.
KI-News jedes Quartal
Erhalten Sie Nachrichten über Machine Learning und Neuigkeiten rund um dida.
Erfolgreich angemeldet.
Gültige Email-Adresse benötigt.
Email-Adresse bereits registriert.
Etwas ist schiefgelaufen. Bitte versuchen Sie es nochmal.
Mit dem Klick auf "Anmelden" erklären Sie sich mit unserer Datenschutzerklärung einverstanden.
