- Cloudflare Perplexity'ти robots.txt файлын айланып өтүп, анын билдирилбеген колдонуучу агенттери жана IP даректери менен сойлоп жүргөнү үчүн айыптайт.
- Компания күн сайын он миңдеген домендерде ASN өзгөрүүлөрүн жана миллиондогон суроо-талаптарды байкаганын ырастайт.
- Perplexity жашыруун практикаларды четке кагат, методологияга шек келтирет жана анын AI салттуу жөрмөлөгүчкө караганда башкача иштейт деп ырастайт.
- Cloudflare Perplexity'ти текшерилген бот катары жокко чыгарат жана демейки боюнча AI көзөмөлүн бөгөттөө үчүн эрежелерди иштетет.
Cloudflare сигнализацияны көтөрдү болгон отчетту жарыялоо менен AI менен иштеген жооп берүү механизми Perplexity тоскоолдуктарга карабастан веб-сайттарды кыдырууну улантууда деп айыптайт алардын ээлери тарабынан коюлган. Инфраструктура провайдеринин айтымында, кызмат болмок robots.txt этибарга алынган жок жана тыюу салынган мазмунга кирүү үчүн тармак блокторун айланып өтүңүз.
AI моделдерди үйрөтүү жана реалдуу убакытта жооп берүү үчүн маалыматтарды жалмап турган пейзажда инновациялар жана веб-экосистеманын эрежелерин урматтоо ортосундагы баланс чыңалып барататБул боюнча талаш-тартыштар кайрадан жанданды уруксатсыз кыруу жана чоң көлөмдөгү онлайн маалыматтын негизинде өнүмдөрдү чыгаргандар сакташы керек болгон техникалык жана этикалык чектөөлөр.
Cloudflare эмнени айтып жатат жана бул эмне үчүн маанилүү

Тармактын коопсуздугу жана натыйжалуулугу боюнча компания алганын айтат кардарлардын даттануулары анын сайттарына карабастан Perplexity таандык кирүү мүмкүнчүлүгүн алууну уланткан аны robots.txt ичинде тыюу жана эрежелерин колдонуу ЧЗА алардын жарыяланган трекерлерине бөгөт коюу. Иликтөөдөн кийин, Cloudflare үлгүсүн тапканын ырастайт жашыруун байкоо веб-сайт ээлеринин каалоолору менен шайкеш келбейт.
Жөнөтүүчү бул жүрүм-турумду байкаган деп ырастайт он миңдеген домендер жана күн сайын миллиондогон суроо-талаптар, анын пикири боюнча, кокусунан эмес, системалуу түрдө көрсөтүлгөн том. Натыйжада, Perplexity текшерилген боттордун тизмесинен алып салды жана эвристиканы иштетти жана эрежелерди башкарды бул байкоону бөгөттөө демейки боюнча.
Кандайча баш аламандык тоскоолдуктарды жеңмек

Cloudflare айтымында, качан сиздин трекерлер жарыялашты (Perplexity колдонуучу агентинин аттары менен аныкталгандай) кыйроого учураса, система ага барат браузердин атынан өтүү жалпы, өзүн ошондой эле көрсөтүү macOS'то Chrome алардын инсандыгын камуфляж кылуу жана аныктоодон качуу.
Мындан тышкары, кирүүлөр келген жарыяланбаган IP диапазондору by Perplexity and тез-тез айланып турат, бул чыпкалоону кыйындаткан. Cloudflare да өзгөрүүлөрдү көргөн деп ырастайт ASN (автономдук системалар) суроо-талаптардын келип чыгышы, дагы бир белгиси бөгөт коюудан качуу тармак.
изилдөө байкалган жүрүм-туруму айтылат үлгүсүн сыйлабайт сүрөттөлгөн жакшы жөрмөлөгүчтөрдүн RFC 9309 жана анын "текшерилген боттор" саясатында: инсандыктын ачыктыгы (агент, IP жана байланыш), жол кыймылын тынчтандыруу, ачык-айкын максат жана robots.txt урматтоо буга чейин сайт ээлери тарабынан белгиленген чектер.
Cloudflare муну жасай алганын айтат "белги калтыруу" айкалышы аркылуу бул трафикке тармак сигналдары жана машина үйрөнүү, бул аракетти аныктоо жана бөгөттөө үчүн башкарылган эрежелериңизге кол коюуларды кошуу, жада калса кардарлар үчүн акысыз план.
Алдоо домендери жана натыйжалары менен тестирлөө
Алардын шектенүүлөрүн ырастоо үчүн, команда түзүлгөн жаңы жана жарыяланбаган домендер (индекстештирилбеген же ачык шилтемеленген эмес) жана аларга карата саясатты колдонгон robots.txt сайтына толук тыюу салуу, ошондой эле Perplexity ботторуна тыюу салуу үчүн атайын эрежелер. Бул сайттар үчүн AI менен кеңешкенден кийин, Cloudflare деп ырастайт жоопторду алышты жайгаштырылган мазмундун чоо-жайы менен, эгер туура болсо, көрсөтө турган нерсе тоскоолдуктарга карабастан кирүү.
Блок натыйжалуу болгондо, Cloudflare Perplexity AI экенин байкады альтернативдүү булактарга кайрылышкан жооп куруу үчүн, бирок азыраак так жана оригиналдуу материалдын өзгөчөлүгү жок, чагылдырылган чектөө иштеген.
Perplexity расмий жообу

Өз кезегинде баш аламандык, айыптоолорду четке кагат жашыруун көз салуу жана Cloudflare бар деп ырастоо туура эмес чечмеленди талдоо иш-аракетинин бир бөлүгү. Компаниянын өкүлдөрү отчетту мындай деп мүнөздөштү "коммерциялык бөлүгү" жана алар кээ бир далилдер деп ырасташат алар реалдуу мүмкүнчүлүктөрдү сынамак эмес же жада калса дал келет башка адамдардын боттору.
Стартап дагы өз позициясын бөлүштү басылмалар X, мында ал кубаттуулугуна шек келтирет аныктоо системалары айырмалоо үчүн мыйзамдуу AI жардамчылары, үчүнчү жактын трекерлери жана зыяндуу трафик. Мындан тышкары, ал ырастайт, а өз убагында маалымат издеп агент суроого жооп берүү ал бирдей иштебейт Интернетти массалык түрдө сойлогон салттуу жөрмөлөгүчкө караганда.
чаралар, жакшы тажрыйба жана башка актерлордун ролу
Анын стратегиясынын бир бөлүгү катары, Cloudflare бар Perplexity тизмесинен чыгарылган ишенимдүү боттордун реестринен жана кошту бөгөт коюу эрежелери анын болжолдуу жашыруун байкоо. Компания администраторлорго активдештирүүнү сунуштайт анти-бот саясаты, Колдонуу көйгөйлөр жалпы блок талап кылынбаганда жана ага каршы атайын башкарылган эрежелерди колдонуңуз AI кыруу.
Өзүнүн аргументинде Cloudflare ишти карама-каршы коёт сактоонун мисалдары алдыцкы тажрыйбанын актёрлоруне шилтеме кылуу менен robots.txt урматтоо, алардын агенттерин документтештирүү жана сыяктуу жаңы стандарттарды кабыл алуу Web Bot AuthСалыштырмалуу тесттерде ал башка боттор деп ырастайт алар токтошту тармакка тыюу салуу же бөгөт коюуга туш болгондо, камуфляждуу кайталоосуз.
Экосистеманын жүрүшүн белгилеген конфликт

Жеткирип берүүчү күтөт a туруктуу эволюция бот операторлорунун тактикасы жана аларды камтуу үчүн колдонулган коргонуу. Буга катар эле ал эксперттер жана уюмдар менен иштөөгө катышат IETF импульс кылуу robots.txt кеңейтүүлөрү жана жакшы ниеттүү трекерлер карманууга тийиш болгон өлчөөчү принциптер.
Белгилүү импульстен тышкары, иш үстөлгө коёт ишеним кризиси мазмун жаратуучулар, платформалар жана AI компаниялардын ортосунда: ким кыла алат эмнеге жетүү, кандай шарттарда жана кантип аны ачык кыл бизнес моделдерин бузбастан же инновацияны жайлатпай. Баары ушул сүйлөшүүгө ишарат кылат ачык бойдон кала берет ал эми AI агенттери атак-даңкка ээ болуп, веб бирге жашоо эрежелерин тууралайт.
Бул эпизод ачык билдирүү калтырат: AI көзөмөлдөө текшерилүүдө, Cloudflare Perplexity жана стартапка таандык камуфляж тактикасын айыптаган. аны чечкиндуу түрдө четке кагууда; ортосунда, сайт ээлери мүмкүнчүлүгүнө ээ жаңы аспаптар жеткиликтүүлүгүн жана топтомун көзөмөлдөө үчүн жакшы тажрыйба жакынкы айларда оюн талаасын белгилей турган курулуш жүрүп жатат.
Мен өзүмдүн «геек» кызыкчылыктарын кесипке айландырган технология ышкыбозумун. Өмүрүмдүн 10 жылдан ашуунун эң алдыңкы технологияларды колдонууга жана ар кандай программалар менен иштөөгө жумшадым. Азыр мен компьютердик технологиялар жана видео оюндар боюнча адистешкен. Себеби, мен 5 жылдан ашык убакыттан бери технология жана видео оюндар боюнча ар кандай веб-сайттарга жазып, сизге керектүү маалыматты баарына түшүнүктүү тилде берүүгө умтулган макалаларды түзүп келем.
Эгерде сизде кандайдыр бир суроолор болсо, менин билимим Windows операциялык тутумуна, ошондой эле уюлдук телефондор үчүн Android менен байланыштуу. Жана менин милдеттенмем сизге, мен ар дайым бир нече мүнөт бөлүп, бул интернет дүйнөсүндө сизди кызыктырган бардык суроолорду чечүүгө жардам берүүгө даярмын.