Отказ от AI обучение: един общ сигнал за четири компании

преди 27 минути

време за четене: 4 мин.

Google, Microsoft, OpenAI и Anthropic обявиха на 30 октомври, че ще четат общ ред във файла robots.txt, с който сайтът заявява дали съдържанието му може да се ползва за обучение на AI модели. Досега всяка компания искаше отделно указание за собствения си робот. Новият ред е възможност, а не защита по подразбиране: сайт, който не го добави, не е заявил нищо чрез общия ред.

На покрит пазар роботи с празни кошници подминават сергията с книги на жена, над която виси кръгъл знак за забрана, а при съседната сергия без такъв знак роботи пълнят кошниците си с книги и продавачът вдига изненадано ръце.

Какво обявиха четирите компании

Предложението е на Кевин Кели от Anthropic, който го внесе на 30 октомври в работната група за AI предпочитания на IETF, организацията за стандартите на интернет. Сайтът пише обикновена група с условно име на робот __usage_ai-training и под нея указва кои пътища са забранени за обучение.

Три от компаниите дават срок, а според писмото на Кели до работната група Anthropic вече е започнала да въвежда поддръжката. Google ще приема отказа като забрана за своя контрол Google-Extended, ако сайтът не е указал друго изрично за него, и цели да въведе поддръжката през 2027 г. OpenAI ще уважава сигнала и цели да го въведе в следващите месеци. Microsoft ще го чете от 1 февруари 2027 г.

Google, OpenAI и Anthropic уточняват, че собствените им контроли остават в сила, а Microsoft заменя старите си указания с новите настройки. При Google, OpenAI и Anthropic общият ред опростява отказа, но не заменя указанията за отделните роботи, които сайтът вече има. По данни на The Verge подкрепа е заявила и Meta, без да каже дали ще уважава сигнала.

Какво добавя Microsoft за видимостта

Освен общия ред за обучение, Bing въвежда отделна настройка за т.нар. заземяване - ползването на страница като източник, когато AI системата съставя отговор в момента. Тя се задава за всяка страница и има три стойности: разрешено, разрешено само в продуктите на Microsoft като Copilot и Microsoft 365, и забранено.

Двете настройки са независими. Сайтът може да забрани обучението и да остане допустим източник за AI отговорите, включително в Copilot. И при двете липсата на указание означава „разрешено". Microsoft предупреждава, че забраната за заземяване намалява видимостта на марката в AI отговорите, без да засяга включването в обикновеното търсене на Bing.

Срокът, който важи още сега, е за сайтовете, които ползват старите указания NoArchive и NoCache. След 1 март 2027 г. Bing спира да ги чете като отказ от обучение и от заземяване, затова ограничението трябва да се пренесе в новите настройки преди тази дата. За тях от 15 декември 2026 г. Bing Webmaster Tools ще предлага и временна преходна настройка за заземяването.

Отказ от AI обучение: какво не решава сигналът

Първо, това още не е стандарт. Страницата на документа в IETF посочва, че той е индивидуален работен проект без формален статут, а участник в работната група, цитиран от Search Engine Roundtable, посочва, че по него има неуредени спорове.

Второ, сигналът е за употребата, не за достъпа. Кели го нарича предпочитание за ползване, а не управление на трафика, а Microsoft уточнява, че настройките не заменят правилото, с което сайтът спира робота изобщо. Отказът казва какво да не се прави със съдържанието, а не че роботът няма да мине през сайта.

Трето, сигналът не носи пари. Microsoft пише изрично, че нито един избор не гарантира включване, трафик или плащане. Google свързва предложението с Кодекса за добри практики към европейския AI Act, който приема robots.txt като един от основните начини за заявяване на предпочитания.

В по-ранна наша новина описахме как условията на Meta позволяват обхождане на сайта на всяка фирма, която рекламира при нея - там според издателите изборът на практика минава през договора, а не през robots.txt.

Какво да решат собствениците на сайтове

След като компаниите въведат поддръжката (при Google и Microsoft - през 2027 г.), за отказ от AI обучение няма да е нужен списък с имена на роботи. Решението обаче остава и въпросите са три. Искаме ли съдържанието ни да обучава бъдещи модели? Искаме ли да бъдем цитирани в AI отговорите? И важи ли едно и също за целия сайт, или за отделни раздели - блог, каталог, цени за партньори?

Разумният отговор рядко е еднакъв навсякъде. Публичният блог печели от цитиране, а платеното съдържание или вътрешните материали едва ли трябва да обучават чужди модели. При Microsoft видимостта в AI отговорите и отказът от обучение ще са две отделни решения от 1 февруари 2027 г., и всяко от тях има цена.

Стъпката за днес: прегледайте какво казва robots.txt на сайта и кой го поддържа. Ако сайтът ползва NoArchive или NoCache срещу AI, датата 1 март 2027 г. е в календара.

Заключение

Четири от най-големите AI доставчици обещават да разбират един ред за отказ. Това спестява работа, но не взема решението вместо собственика на сайта.

Искате да започнете с AI от нулата? Безплатният курс „Основи на AI“ е 17 видео урока, около 35 минути, със сертификат: Започнете безплатния курс по AI

Помагаме на български фирми и издатели да решат как съдържанието им да участва в AI търсенето и обучението на модели - от прегледа на сайта до правилата за видимост. Услугите ни покриват одит, оценка на готовност, обучение на екипи и имплементация на специализирани AI автоматизации за всяка организация. Препоръчваме консултация, когато сайтът носи съдържание с търговска стойност и не е ясно кой отговаря за указанията към AI роботите. [Свържете се с нас за консултация: academy@razvivai.se]