Så tillåter du OpenAIs bot att läsa och scanna in din webbplats

av Mikael Winterkvist | aug 13, 2023

Har du en blog, en hemsida, en nätbutik, en webbplats på nätet så är sannolikheten stor att Open AIs automatiskt bot kan komma på besök för att scanna in din information. Så här stoppar du Open AI:s bot – eller tillåter den att ta för sig dina webbsidor.

De flesta webbplatser har en fil som heter robots.txt och i den finns inskrivet vilka som får, och som inte får, tillgång till informationen på din webbplats. Seriösa aktörer respekterar så gott som alltid innehållet i robots.txt – och det gör Open AI också..

Stoppa GPTBot

För att inte tillåta GPTBot att komma åt din webbplats kan du lägga till GPTBot i webbplatsens robots.txt:

User-agent: GPTBot
Disallow: /

Tillåta GPTBot

För att tillåta GPTBot att komma åt dina enda delar av din webbplats kan du lägga till GPTBot-token till din webbplats robots.txt så här:

User-agent: GPTBot Allow: /directory-1/ Disallow: /directory-2/

Open AI

Robots.txt

Textraderna ovan ska alltså in i filen robots.txt som ligger i roten (startkatalogen) i din webbplats (WordPress eller liknande lösning). Det finns plugins som du kan använda för att läsa in och redigera filen med. Gör en backup av robots.txt först så att du har en kopia att falla tillbaka på om något skulle visa sig inte finger som det ska efter ändringen.

0 kommentarer

Mikael Winterkvist

Fyrabarns-far, farfar, morfar och egen företagare i Skellefteå med kliande fingrar. Jag skriver om fotografering, sport, dataprylar, politik, nöje, musik och film. Vid sidan av den här bloggen så jobbar jag med med det egna företaget Winterkvist.com. Familjen består av hustru, fyra barn (utflugna) och fem barnbarn.

Jag har hållit på med datorer sedan tidigt 1980-tal och drev Artic BBS innan Internet knappt existerade. Efter BBS-tiden har det blivit hemsidor, design, digitala medier och trycksaker. Under tiden som journalist jobbade jag med Mac men privat har det varit Windows som har gällt fram till vintern 2007. Då var det dags att byta och då bytte vi, företaget, helt produktionsplattform till macOS. På den vägen är det.

_____________________________________________________________________________________

Anmäl dig till Magasin Mackens nyhetsbrev

Du får förhandsinformation om Macken, våra planer och du får informationen, först och direkt till din mail. Vi lovar att inte skicka din information vidare och vi lovar att inte skicka ut mer än max ett nyhetsbrev per månad.

Anmäl dig här

_____________________________________________________________________________________

Vi använder AI som hjälpmedel
Magasin Macken använder AI för att skapa illustrationer till våra texter. Undantagsvis skapar vi fotorealistiska bilder, i de fallen märks bilden tydligt med att den är skapad med AI. Vi använder även AI för att samla in underlag för våra texter, fakta, statistik och referenser. Alla uppgifter kontrolleras före publicering. AI används även för våra script och plugins.

_____________________________________________________________________________________

Följ oss i Sociala Medier: