Како блокирати претраживаче ОпенАИ-а да скрежу вашу веб локацију

Док корисници воле ЦхатГПТ због огромне количине информација које тренутно садржи, исто се не може рећи за власнике веб локација.

ОпенАИ-ов ЦхатГПТ користи претраживаче за скенирање веб локација, али ако сте власник веб локације и не желите да ОпенАИ-ов пописивач приступа вашој веб локацији, ево неколико ствари које можете да урадите да то спречите.

Како функционише ОпенАИ пузање?

Веб пописивач (познат и као паук или бот претраживача) је аутоматизовани програм који скенира интернет у потрази за информацијама. Затим саставља те информације на начин који је лако за ваш претраживач да им приступи.

Веб пописивачи индексирају сваку страницу сваког релевантног УРЛ-а, обично се фокусирајући на веб локације које су релевантније за ваше упите за претрагу. На пример, претпоставимо да гуглате одређену Виндовс грешку. Веб пописивач у оквиру вашег претраживача ће скенирати све УРЛ-ове са веб локација које сматра ауторитативнијим на тему Виндовс грешака.

ОпенАИ веб претраживач се зове ГПТБот, а према ОпенАИ документацијадавање ГПТБоту приступа вашој веб локацији може помоћи у обучавању АИ модела да постане сигурнији и тачнији, а може чак и помоћи у проширењу могућности АИ модела.

Како спречити ОпенАИ да претражује вашу веб локацију

Као и већина других веб претраживача, ГПТБоту се може блокирати приступ вашој веб локацији модификацијом протокола роботс.ткт (познатог и као протокол за изузимање робота). Ова .ткт датотека се налази на серверу веб локације и контролише како се веб индексери и други аутоматизовани програми понашају на вашој веб локацији.

  Како играти Тхе Талос Принципле на Линуку

Ево кратке листе онога што датотека робот.ткт може да уради:

  • Може у потпуности блокирати ГПТБот приступ веб локацији.
  • Може да блокира приступ само одређеним страницама са УРЛ-а од стране ГПТБот.
  • Може рећи ГПТБоту које везе може да прати, а које не.

Ево како да контролишете шта ГПТБот може да уради на вашој веб локацији:

Потпуно блокирајте ГПТБот приступ вашој веб локацији

  • Подесите датотеку робот.ткт, а затим је уредите било којим алатом за уређивање текста.
  • Додајте ГПТБот у роботс.ткт вашег сајта на следећи начин:
  •  User-agent: GPTBot
    Disallow: /

    Блокирај само одређене странице да им ГПТбот не приступа

  • Подесите датотеку робот.ткт, а затим је уредите помоћу жељеног алата за уређивање текста.
  • Додајте ГПТБот у роботс.ткт вашег сајта на следећи начин:
  •  User-agent: GPTBot
    Allow: /directory-1/
    Disallow: /directory-2/

    Међутим, имајте на уму да промена датотеке робот.ткт није ретроактивно решење и све информације које је ГПТБот можда већ прикупио са ваше веб локације неће се моћи вратити.

    ОпенАИ омогућава власницима веб локација да одустану од пописивања

    Откако су коришћени претраживачи за обуку АИ модела, власници веб локација траже начине да задрже своје податке приватним.

    Неки се плаше да АИ модели у основи краду њихов рад, чак и приписују мање посета веб сајту чињеници да сада корисници добијају своје информације без потребе да посећују њихове веб странице.

    Све у свему, да ли желите да потпуно блокирате АИ цхат ботове да скенирају ваше веб странице, потпуно је ваш избор.