Речник

Плащане за обхождане

На английски pay per crawl

Плащането за обхождане е услугата на Cloudflare, при която сайтът обявява цена за заявка, а AI робот без намерение да плати си тръгва без страницата.

В магазина ви влиза някой, който не купува нищо. Разглежда всичко, снима всеки рафт, записва всяка цена и си тръгва.

На следващия ден идва пак. И на по-следващия.

Досега имахте 2 избора, да го пуснете или да го изгоните. Cloudflare добави трети, да му вземете входна такса.

Това е идеята зад плащането за обхождане.

Плащане за обхождане е услуга на Cloudflare, при която сайтът обявява цена за всяка заявка от AI робот, тоест за всяко искане на страница от негова страна. Роботът или казва, че ще плати, и получава страницата, или получава отказ с цената.

Бърз отговор

Плащането за обхождане е услугата на Cloudflare, при която AI роботът или заявява намерение да плати и получава страницата, или получава отказ с цената. Собственикът определя цената, Cloudflare е посредник. Услугата е в затворена бета.

Какво всъщност значи

В правилата, по които си говорят сървърите, от години има код за отговор с номер 402, „изисква се плащане“, който стоеше в списъка и почти никой не ползваше.

Cloudflare го взе и му даде работа.

Роботът пита за страница. Ако е казал, че ще плати, получава я. Ако не е, получава 402 и цената.

Cloudflare обяснява защо.

Издателите искали заплащане за достъпа на AI компаниите, но договарянето изисква да се познава точният човек и да се сключи еднократна сделка, а това е непреодолима пречка за малките издатели. Услугата прави сделката автоматична и еднаква за всички.

Собственикът има 3 избора за всеки робот:

  • Да го пусне безплатно.
  • Да му поиска цена. Цената е една за целия сайт, на заявка.
  • Да го спре.

Роботите, които участват, трябва да са регистрирани при Cloudflare и да подписват заявките си, така че да се знае кой плаща.

Бъркат го с файла robots.txt.

Той е молба, която роботът може да спази или не, а плащането за обхождане стои пред сайта и не пуска без плащане. Ако сте спрели робот през защитната стена или през управлението на роботите на Cloudflare, спирането има предимство пред таксуването. Забраната печели над цената.

Защо това ви засяга

Върнете се на посетителя, който снима рафтовете.

Входната такса решава един въпрос и повдига друг.

Решава това, че не работите безплатно за някой, който не ви носи клиенти. Повдига това, че ако посетителят с камерата е този, който после праща клиентите, таксата може да го отпрати.

Точно това е сметката за фирма.

Роботът, който събира за обучение на модели, ви носи малко пряка полза и таксата има смисъл.

Роботът, който търси, за да отговори на клиент в момента и да го прати при вас, ви носи посещения, и таксата може да ви извади от отговора.

Услугата не различава вместо вас. Вие казвате кой робот в коя група е.

При магазин за климатици в Бургас, който минава през Cloudflare това изглежда така:

Клиентът питаКакво става на екрана
В ChatGPT: „климатик за 20 квадрата Бургас“, търсещият робот е таксуван и не плащаРоботът получава 402 вместо страницата. Магазинът го няма в отговора, конкурентът е там.
Същото, търсещият робот е пуснат, а роботът за обучение е таксуванМагазинът е в отговора. Роботът за обучение плаща или не влиза.

Как изглежда на практика

Плащане за обхождане

Условието е сайтът да минава през Cloudflare.

Ако не минава, услугата не е достъпна.

Второто условие е достъп до затворената бета.

Влиза се през страница за записване или през търговски представител за големите клиенти.

Не е включено по подразбиране за никого.

После, за всеки регистриран AI робот, избирате: пуснете, таксувайте или спрете.

Определяте една цена на заявка за целия сайт, а Cloudflare събира плащанията и ги превежда.

Роботите, които не са регистрирани при Cloudflare, не участват, и за тях остават старите средства: файлът robots.txt, защитната стена, управлението на роботите в таблото.

Проверете.

В таблото на Cloudflare, в частта за управление на AI роботите, се вижда кои роботи посещават сайта и колко често.

Това е числото, върху което да смятате дали таксата има смисъл.

Какво струва и какво носи

Решението е търговско. Струва ли достъпът до съдържанието ви повече от посещенията, които този достъп носи.

За повечето фирми със сайт-визитка отговорът е, че роботите, които търсят за клиенти, трябва да са пуснати.

За издател с много съдържание сметката може да е друга.

Носи, за първи път, автоматичен начин да се иска заплащане от AI робот без преговори.

Таксуван робот, който не плаща, не влиза, и ако той е бил пътят към клиентите, пътят спира. Изборът кой робот да е пуснат, таксуван или спрян е част от работата, която поемаме по сайта ви.

Дали AI търсачката стига до сайта ви и какво взима, казваме в доклад.

Накъде отива

Услугата е обявена през 2025 г. и година по-късно все още е затворена бета. Cloudflare не е обявила дата за общо пускане.

Не се знае кои AI роботи са се регистрирали и плащат, какви цени се слагат на практика и дали големите AI компании участват изобщо в схемата.

Cloudflare не дава списък.

2 примера

Фирма за климатици минава през Cloudflare и вижда в таблото, че робот за обучение на модели минава през сайта всеки ден, а посещения от тази компания няма.

Ако има достъп до бетата, може да сложи цена за него и да остави пуснат робота, който търси за клиенти в момента на въпроса и им праща връзка.

Единият плаща или не влиза.

Другият продължава да носи посещения.

Cloudflare дава примера с реда на действие: ако робот е спрян през защитната стена, той не стига до таксуването изобщо. Спирането се проверява първо, цената после.

Въпросите, които ще ви хрумнат

Ако сложа цена, значи ли, че ще получавам пари от всеки робот?

Не.

Плащат само роботи, които са регистрирани при Cloudflare и решат да платят.

Останалите получават отказ или ги спирате по стария начин. Робот, който не иска да плати, просто не влиза.

Кое правите първо, да таксувам или да спра?

Нито едното, преди да сте видели кой идва.

Отворете таблото на Cloudflare за AI роботите и вижте кои посещават сайта и дали някой от тях ви праща клиенти. Таксувайте този, който само взима, и оставете пуснат този, който носи посещения.

Как да проверя това за 10 минути?

Влезте в Cloudflare и отворете частта за управление на AI роботите.

Ако сайтът ви не минава през Cloudflare, услугата не е достъпна и това е отговорът.

Ако минава, списъкът с роботи и честотата им е там, а за самото таксуване трябва достъп до затворената бета.

Попитайте изпълнителя през какво минава сайтът ви и кои роботи го посещават. Има ли сред тях някой, който взима много и не носи нищо?