Mit einem Webcrawler können Sie Inhalte für Ihren AI Agent – Advanced importieren. Damit versetzen Sie Ihren AI Agent in die Lage, auf Kundenfragen mit KI-generierten Antworten zu reagieren, die auf Informationen in externen Websites basieren.
In diesem Beitrag werden einige Best Practices beschrieben, die Sie beim Importieren von Inhalten für einen AI Agent – Advanced mit einem Webcrawler beachten sollten.
In diesem Beitrag werden folgende Themen behandelt:
- Webcrawler auf den richtigen Websites verwenden
- Häufigkeit der Reimporte auf ein vernünftiges Maß beschränken
- Gesamtzahl der Wissensquellen begrenzen
- Importzusammenfassung überprüfen
- Klein anfangen und testen
Verwandte Beiträge:
Webcrawler auf den richtigen Websites verwenden
Der Webcrawler eignet sich am besten für Websites, die als Help Center oder Katalog mit Produktbeschreibungen angelegt sind. Für den Import von E-Commerce-Seiten empfehlen wir Ihnen, eine Integration zu erstellen, die in der Lage ist, relevante Produktinformationen abzurufen und einem Dialog oder Ablauf hinzuzufügen.
Es wird empfohlen, ein Zendesk Help Center als primäre Wissensquelle zu verwenden. Websites können in den unterschiedlichsten Formaten vorliegen und dynamische Elemente oder JavaScript enthalten, was das Einlesen deutlich schwieriger und unsicherer macht. Der Web-Crawler verfügt zwar über leistungsstarke Konfigurationsoptionen, deren Einrichtung jedoch einige Praxis erfordert. Zendesk Help Center weisen von Natur aus ein einfacheres und leichter berechenbares Format auf, was zu besseren Ergebnissen führt. Außerdem lassen sich Inhalte aus einem Zendesk Help Center im Allgemeinen schneller importieren.
Der Crawler kann nur auf öffentlich zugänglichen Websites eingesetzt werden. Er ist nicht in der Lage, auf Websites zuzugreifen, die eine Authentifizierung erfordern.
Häufigkeit der Reimporte auf ein vernünftiges Maß beschränken
Importe sind keine Echtzeit-Websuche. Der AI Agent durchsucht also nicht die Live-Daten eines Help Centers, einer Datei oder einer Website selbst. Vielmehr werden die Informationen einmalig oder in regelmäßigen Zeitabständen in den AI Agent importiert und die Antworten des AI Agent anhand dieser importierten Informationen generiert.
Tägliche Importe werden nur empfohlen, wenn die Wissensquelle besonders häufig aktualisiert wird. Für die meisten Organisationen reicht ein wöchentlicher oder monatlicher Neuimport aus. Denken Sie daran, dass Sie die Inhalte jederzeit von Hand neu importieren können, wenn zwischenzeitliche Änderungen berücksichtigt werden müssen.
Gesamtzahl der Wissensquellen begrenzen
Sie können einem einzelnen AI Agent mehrere Wissensquellen und somit auch mehrere Webcrawler hinzufügen. Achten Sie aber darauf, insgesamt nicht allzu viele Wissensquellen zu verwenden. In manchen Fällen kann eine zu große Anzahl von Wissensquellen die Genauigkeit beeinträchtigen und die Latenz erhöhen.
Importzusammenfassung überprüfen
Wenn nach einem erfolgreichen Einsatz des Webcrawlers andere Probleme auftreten (z. B. unvollständige oder schlechte Antworten des AI Agent), können Sie anhand der Importzusammenfassung überprüfen, ob alle erwarteten URLs und Inhalte importiert wurden. Hier können Sie sofort nach einem Importvorgang am besten feststellen, welche Inhalte importiert wurden und welche Fehler behoben werden müssen.
Klein anfangen und testen
Um rasch zu prüfen, ob die Inhalte einer Gruppe ähnlicher Seiten korrekt gecrawlt werden, sollten Sie den Crawler zunächst auf eine oder zwei Musterseiten beschränken. Hierzu können Sie die Start-URL einer der Zielseiten und eine Max. Crawling-Tiefe von null verwenden. Alternativ können Sie unter Max. zu crawlende Seiten eine geringe Anzahl an Seiten einstellen, die sich rasch verarbeiten lässt.