Der User-Agent „ChatGPT-User“ wird von ChatGPT-Plugins verwendet. Wichtig zu wissen dazu: Er wird ausschließlich verwendet, um direkte Aktionen im Namen von ChatGPT-Benutzern durchzuführen und wird nicht für das automatische Crawlen des Internets genutzt.
Um ChatGPT-Plugins den Zugriff auf eine Website zu ermöglichen, kann man den ChatGPT User-Agent explizit in die robots.txt der Website aufnehmen oder aber den Zugriff einschränken bzw. ganz untersagen.
Zugriff auf eine Website ermöglichen:
User-agent: ChatGPT-User
Disallow:Zugriff auf eine Website unterbinden:
User-agent: ChatGPT-User
Disallow: /Zugriff nur auf Teile der Website ermöglichen:
User-agent: ChatGPT-User
Disallow:
Allow: /directory-1/
Allow: /directory-2/Die vollständige Zeichenfolge des Benutzer-Agenten ChatGPT-User lautet:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/botFür das Web-Browsing-Plugin von OpenAI erfolgen die Aufrufe von Websites über den IP-Adressblock 23.98.142.176/28.
