Wo ein Bedarf endet und ein anderer beginnt

Was eine Gruppe verbindet

Für eine Produktseite ist eine Gruppe von Formulierungen nützlich, hinter denen eine hinreichend enge gemeinsame Frage steht. Dieselbe Themenbezeichnung belegt das nicht. Unter „Wasser“ können Verdünnung, Pinselpflege, Fleckentfernung und Beständigkeit der fertigen Beschichtung fallen.

Die Gruppierung ist an ihrer Aufgabe zu prüfen. Für die Themenliste einer großen Anleitung eignet sich „Verdünnung“ als Abschnitt. Für die Vollständigkeit einer Produktseite sollten „Womit verdünnen?“ und „In welchem Verhältnis?“ getrennt zählen: Die erste Antwort erledigt die zweite Frage nicht.

Vor einer Zusammenführung ist zu prüfen, ob die Formulierungen unter denselben wesentlichen Bedingungen dieselben Angaben benötigen. Eine für die eine Frage ausreichende Antwort muss auch für die andere genügen. Gegenstand, Zustand, Handlung und angestrebtes Ergebnis sind entscheidend. Ein langer Absatz, der mehrere Fragen beantwortet, beweist allein keinen einheitlichen Bedarf.

Die Struktur kann hierarchisch sein: Oberthema, einzelne Frage, notwendige Präzisierungen. Die Gruppierungsebene muss vor der Abdeckungsberechnung feststehen. Sonst verändert das Aufteilen oder Zusammenführen die Endbewertung, obwohl der Text unverändert bleibt.

Ähnlichkeit hilft, Kandidaten zu finden

Bei vielen Zeichenfolgen ist ein manueller Vergleich aller Paare unpraktisch. Die Suche nach ähnlichen Formulierungen wählt zunächst Kandidaten aus, die anschließend fachlich geprüft werden. Dafür eignen sich Wörterbücher, Lemmata, Regeln und Vektorrepräsentationen.

Die Arbeit Sentence-BERT beschreibt Satzrepräsentationen und deren Vergleich unter anderem mit Kosinusähnlichkeit. Die Dokumentation von Sentence Transformers zeigt die Berechnung von Textähnlichkeiten. Ein Wert hängt vom gewählten Modell und Maß ab. Er ist weder ein Prozentsatz gleicher Bedeutung noch die Wahrscheinlichkeit einer richtigen Zusammenführung.

Zwei Entscheidungen sollten getrennt bleiben: „Diese Zeilen sollten verglichen werden“ und „Diese Zeilen dürfen als eine Frage gelten“. Verwandte Themen genügen für die erste. Die zweite erfordert die Prüfung antwortrelevanter Unterschiede.

Ein Zahlenschwellenwert darf nicht nur deshalb gewählt werden, weil er einige bekannte Beispiele sauber trennt. Benötigt werden Fälle der jeweiligen Sprache und Kategorie, einschließlich Verneinungen, benachbarter Aufgaben und Mehrdeutigkeiten. Ein anderes Modell oder eine veränderte Textaufbereitung kann die Werte verschieben und eine neue Abstimmung erfordern.

Der Katalog der Cross-Encoder-Modelle führt Ähnlichkeit, Fragenduplikate, Relevanz und logische Beziehungen als getrennte Aufgaben auf. Der Unterschied zählt: Ein Werkzeug für gemeinsame Themen ist nicht zwangsläufig darauf trainiert zu prüfen, ob zwei Anfragen eine gemeinsame Antwort benötigen.

Wie eine Kette die Gruppe erweitert

Ein paarweiser Ähnlichkeitsschwellenwert kann eine unerwartete Endgruppe erzeugen. Angenommen, alle Paare mit Kosinusähnlichkeit über 0,8 werden verbunden und zusammenhängende Zeilen anschließend gruppiert. Ist A ähnlich zu B und B zu C, können alle drei in einer Komponente landen. Eine direkte Ähnlichkeit von A und C ist damit nicht garantiert.

Dafür genügen drei Einheitsvektoren in der Ebene: A bei 0°, B bei 30° und C bei 60°. Die Kosinuswerte werden aus den Winkeln zwischen ihren Richtungen berechnet:

Das ist eine mathematische Illustration, keine Messung von Anfragen und kein empfohlener Schwellenwert. Sie zeigt, warum eine Verbindung über eine Zwischenzeile die Prüfung der endgültigen Gruppengrenzen nicht ersetzt.

In der Praxis könnte eine Kette von üblicher Verdünnung über Konsistenzänderung zur Wiederherstellung getrockneten Materials führen. Die Zwischenformulierung verbindet Themen, macht die Anweisungen aber nicht austauschbar. Für die Gruppenprüfung sind besonders unterschiedliche Fragen und Fälle hilfreich, die das Handeln des Käufers ändern.

Das Prüfverfahren hängt vom Algorithmus ab. Manche Ansätze prüfen alle Paare, andere einen Repräsentanten und Gruppenbedingungen, weitere verlangen redaktionelle Entscheidungen für strittige Verbindungen. Jede Variante muss auf ihre eigenen Fehler geprüft werden: Auch ein Repräsentant kann zu allgemein sein.

Gemeinsames Thema, gemeinsame Frage und logische Folgerung

Zwei ähnliche Formulierungen können unvereinbare Aussagen ausdrücken. „Für Stoff geeignet“ und „nicht für Stoff geeignet“ betreffen dieselbe Eigenschaft desselben Materials. Bei der Beschreibungsprüfung dürfen sie nicht als gleiche Antwort zählen. Verneinung und ihr Geltungsbereich müssen erhalten bleiben.

Es gibt auch gerichtete Beziehungen. Aus „Das Set enthält sechs Tuben“ folgt „Das Set enthält Tuben“. Aus dem Vorhandensein von Tuben folgt nicht ihre Zahl. Kosinusähnlichkeit ist symmetrisch: Das Vertauschen der Vektoren verändert den Wert nicht. Ein solcher Wert allein bildet daher keine Folgerungsrichtung ab.

Für die Fragengruppierung braucht es eine weitere Beziehung: Können Anfragen bezogen auf die gewählte Aufgabe als Duplikate gelten? „Womit verdünnen?“ und „Wie viel Wasser hinzufügen?“ können in einer Anleitung nebeneinanderstehen, verlangen aber andere Angaben. In der Bedarfskarte müssen beide getrennt berücksichtigt werden, sofern sie für die Auswahl wichtig sind. Ob belegte Antworten vorliegen, wird im nächsten Schritt geprüft.

Für die Entscheidung sollte feststehen, welche Beziehung gesucht wird. „Ähnliches zusammenfassen“ überlässt das der ausführenden Stelle. „Formulierungen derselben Frage nach dem zulässigen Verdünnungsmittel für diese Rezeptur finden“ legt bereits Gegenstand und Grenzen fest.

Eine Anfragegruppe ist noch keine Produktgruppe

Die Frage nach Verdünnung kann viele Künstlerfarben betreffen. Die Antwort hängt dennoch von der konkreten Rezeptur ab. Eine semantische Gruppierung erlaubt nicht, die Empfehlung für ein Modell auf die gesamte Kategorie zu übertragen.

Deshalb sollten Intention und Anwendbarkeit getrennt gespeichert werden. Der erste Eintrag beschreibt, was jemand wissen möchte. Der zweite hält fest, für welches Produkt oder welche Produktklasse eine mögliche Antwort gilt und ob genügend Daten für ihre Veröffentlichung vorliegen.

Beim Lehrbeispiel A6-20 bleibt „Kann man damit auf Stoff malen?“ bedeutsam, obwohl die Eignung nicht belegt ist. Die Frage kann in die Bedarfskarte aufgenommen und zur Klärung weitergegeben werden. Stoff darf nicht zur Anpassung an die Anfrage als positive Eigenschaft ergänzt werden.

Auch innerhalb einer Gruppe müssen wesentliche Präzisierungen erhalten bleiben. Gesammelte Fragen zu Baumwolle, Synthetik und Waschen verlieren ihre Unterschiede nicht durch die Überschrift „für Stoff“. Eine belegte Antwort nur zu Baumwolle deckt die gesamte Gruppe nicht ab.

Zwei Fehler, die getrennt gezählt werden müssen

Eine falsche Zusammenführung verdeckt Unterschiede. Die Wiederherstellung getrockneter Farbe erhält eine Antwort zur üblichen Verdünnung, vollständige Aushärtung die Zeit der Oberflächentrocknung. Anschließend kann ein Generator flüssigen Text erzeugen und dabei die falsche Aufgabenstruktur bewahren.

Übermäßiges Aufteilen schafft ein anderes Problem. Mehrere Fassungen einer Frage brauchen dieselben Angaben, werden aber als unabhängige Punkte gezählt. Antworten wiederholen sich, die Aufgabe wächst und die Vollständigkeitsbewertung wird verzerrt.

Für die Prüfung braucht es beide Fehlertypen und Grenzfälle. „Womit Acryl verdünnen?“ und „Welches Verdünnungsmittel für Acrylfarbe?“ sind bei gleicher Rezeptur und gleichem Kontext Kandidaten für eine Zusammenführung. „Womit verdünnen?“ und „In welchem Verhältnis?“ sind benachbarte, aber unterschiedliche Fragen. „Wie vor dem Trocknen vom Pinsel abwaschen?“ und „Wie getrocknete Farbe aus Stoff entfernen?“ unterscheiden sich in Gegenstand und Zustand.

Die Entscheidung sollte mit ihrer Grundlage festgehalten werden: welcher Unterschied als wesentlich galt, welcher Kontext genutzt wurde und was unbekannt blieb. Bei Mehrdeutigkeit ist „Klärung erforderlich“ hilfreicher als eine erzwungene Zuordnung zu fertigen Gruppen.

Ein Kontrollsatz darf nicht nur aus offensichtlichen Synonymen bestehen. Nötig sind wortähnliche Fragen mit unterschiedlichen Antworten und unähnliche Formulierungen derselben Aufgabe. Ein Fehler bei einem einzelnen Paar beschreibt nicht die Qualität des ganzen Systems. Er zeigt einen Fall, der untersucht und in weitere Prüfungen aufgenommen werden muss.

Die Frage mit ihren Grenzen erhalten

Nach der Gruppierung müssen die Ausgangszeilen auffindbar bleiben. Für jede Gruppe sind Hauptfrage, wesentliche Bedingungen, Anwendbarkeit, ausgeschlossene Fälle und Formulierungsbeispiele nützlich. Das Oberthema wird getrennt von den Fragen gespeichert, anhand deren die Antwort bewertet wird.

Werden mehrere Anfragen nur zur Verkürzung der Liste zusammengefasst, ist der Nutzen noch nicht belegt. Die Prüfung muss zeigen, dass Unterschiede die benötigten Angaben nicht verändern und keine Einschränkungen verbergen. In manchen Fällen ist Aufteilen das richtige Ergebnis, nicht ein kompakterer Baum.

Für eine angenommene Gruppe wird die gemeinsame Frage festgehalten; strittige Formulierungen bleiben bis zur Klärung Kandidaten. Nach der Trennung von Verdünnungsmittel, Verhältnis und Wiederherstellung getrockneter Farbe hat jede Frage eigene Datenanforderungen. Nun ist zu klären, welche Antworten sich belegen lassen — bezogen auf die ausgewählte Farbe.