- Cloudflare na-ebo ebubo mgbagwoju anya nke ịgafe robots.txt na iji ndị ọrụ njirimara na adreesị IP kpuchie njem ya.
- Ụlọ ọrụ ahụ na-ekwu na ọ hụla mgbanwe ASN na ọtụtụ nde arịrịọ kwa ụbọchị n'ofe iri puku kwuru iri puku ngalaba.
- Mgbagwoju anya na-agọnarị omume nzuzo, na-ajụ usoro a ajụjụ, ma na-arụ ụka na AI ya na-arụ ọrụ dị iche iche karịa onye na-azụ anụ omenala.
- Cloudflare na-ewepụ mgbagwoju anya dị ka bot enwetara ma na-enyere iwu aka igbochi nsuso AI na ndabara.
Cloudflare ewelitela mkpu site na ibipụta akụkọ nke na-ebo engine azịza kwadoro AI ebubo mgbagwoju anya na ọ na-aga n'ihu na-awagharị weebụsaịtị n'agbanyeghị ihe mgbochi etinyere ndị nwe ha. Dị ka onye na-eweta akụrụngwa si kwuo, ọrụ ahụ ga-enwe robots.txt leghaara anya na gafere mgbochi netwọk ka ịnweta ọdịnaya amachibidoro.
N'ime odida obodo ebe AI na-eri data iji zụọ ụdị ma zaghachi ozugbo, ihe itule n'etiti ihe ọhụrụ na nkwanye ùgwù maka iwu nke gburugburu ebe obibi weebụ na-agbakasị ahụ́Esemokwu ahụ na-eweghachi arụmụka na scraping na-akwadoghị na oke teknụzụ na ụkpụrụ omume nke ndị na-ewu ngwaahịa dabere na nnukwu ozi ịntanetị kwesịrị ịgbaso.
Ihe Cloudflare na-akọ na ihe kpatara o ji dị mkpa

Ụlọ ọrụ nchekwa netwọkụ na arụmọrụ kwuru na ọ natara mkpesa ndị ahịa onye saịtị gara n'ihu na-enweta ohere n'ihi mgbagwoju anya n'agbanyeghị machibido ya na robots.txt ma tinye iwu nke Waf igbochi ndị na-eso ụzọ ha ekwuputara. Mgbe nyochachara, Cloudflare na-ekwu na achọpụtala usoro nke nsochi nzuzo ekwekọghị na mmasị nke ndị nwe webụsaịtị.
Onye na-ebubata ya na-ekwu na ya ahụla omume a na iri puku kwuru iri puku ngalaba na ọtụtụ nde arịrịọ kwa ụbọchị, Mpịakọta nke, n'echiche ya, na-egosi usoro nhazi kama omume na mberede. N'ihi ya, ewepụla mgbagwoju anya na ndetu bots enyochagoro ma rụọ ọrụ heuristics na iwu jikwaa maka gbochie nsochi a na ndabara.
Lee ka mgbagwoju anya gaara esi merie ihe mgbochi ndị ahụ

Dị ka Cloudflare si kwuo, mgbe gị kwuru trackers (dị ka akọwara site na Perplexity onye ọrụ aha) zutere okuku, usoro ga-aga mee ihe nchọgharị nkịtị, na-egosi onwe ya dị ka a ga-asị na ọ bụ Chrome na macOS iji kpuchido njirimara ha na zere nchọpụta.
Na mgbakwunye, ohere ndị ahụ sitere Ogo IP ebipụtabeghị site na mgbagwoju anya na na-atụgharị ugboro ugboro, nke gaara eme ka nzacha sie ike. Cloudflare kwukwara na ya ahụla mgbanwe na ASN (sistemụ kwụụrụ onwe) mmalite nke arịrịọ, akara ọzọ nke ngọngọ evasion netwọk.
Nchọpụta ahụ kwuru na omume ahụ a hụrụ agaghị asọpụrụ ụkpụrụ ahụ nke ezigbo crawlers kọwara na RFC 9309 yana na amụma "bots ekwenyesiri ike": nghọta njirimara (onye nnọchi anya, IP na kọntaktị), okporo ụzọ calming, a doro anya ebumnobi na kwanyere robots.txt ugbua oke nke ndị nwe saịtị setịpụrụ.
Cloudflare kwuru na o nweela ike "Hapụ akara" ka okporo ụzọ a site na ngwakọta nke akara netwọk na mmụta igwe, na-agbakwụnye mbinye aka na iwu njikwa gị nke na-achọpụta na igbochi ọrụ a, ọbụna maka ndị ahịa nke atụmatụ efu.
Jiri ngalaba aghụghọ na nsonaazụ nyocha
Iji kwado enyo ha, ndị otu ahụ kere ngalaba ọhụrụ na nke ebipụtabeghị (adịghị indexed ma ọ bụ ọhaneze jikọrọ) ma tinye a iwu na ha mmachibido iwu robots.txt, yana iwu a kapịrị ọnụ maka machibido bots Perplexity. Mgbe nyochachara AI maka saịtị ndị ahụ, Cloudflare na-ekwu na nwetara azịza nwere nkọwa gbasara ọdịnaya akwadoro, ihe - ọ bụrụ na ọ ziri ezi - ga-egosi ịnweta n'agbanyeghị ihe mgbochi.
Mgbe ngọngọ ahụ dị irè, Cloudflare hụrụ na Perplexity's AI malitere isi mmalite ọzọ iji wuo nzaghachi, mana obere nkenke na enweghị nkọwapụta nke ihe mbụ ahụ, na-egosipụta na mmachi arụwo ọrụ.
Nzaghachi gọọmentị nke mgbagwoju anya

Ihe mgbagwoju anya, n'akụkụ nke ya. jụrụ ebubo ndị ahụ nke nsuso nzuzo na nkwupụta na Cloudflare nwere akọwahiehie akụkụ nke ọrụ nyochara. Ndị ọnụ na-ekwuchitere ụlọ ọrụ akọwala akụkọ a dịka a "ibe azụmahịa" na ha na-ekwu na ụfọdụ ihe àmà ha agaghị nwalee ezigbo ohere ma ọ bụ ọbụna akwụkwọ ozi bots ndị ọzọ.
Mmalite ahụ ekwupụtakwala ọnọdụ ya mbipụta na X, ebe ọ na-ajụ ikike nke usoro nchọpụta iji mata ọdịiche dị n'etiti ndị enyemaka AI ziri ezi, ndị na-eso ụzọ ndị ọzọ na okporo ụzọ ọjọọ. Ọzọkwa, ọ na-arụ ụka na a onye ọrụ na-achọ ozi n'oge ịza ajụjụ ọ naghị arụ ọrụ otu karia omenaala crawler nke na-akiri webụ n'oke.
Usoro, omume ọma na ọrụ nke ndị ọzọ na-eme ihe nkiri
Dịka akụkụ nke atụmatụ ya, Cloudflare nwere ewepụrụ na mgbagwoju anya site na ndekọ ya nke bots tụkwasịrị obi ma gbakwunyere iwu maka igbochi ya ebubo zoro ezo nsochi. Ụlọ ọrụ ahụ na-atụ aro ka ndị nchịkwa rụọ ọrụ amụma mgbochi bot, Mee nsogbu mgbe a na-achọghị ngọngọ mkpokọta ma jiri iwu ejikwa kpọmkwem megide ndị AI na-ehichapụ.
N'arụmụka ya, Cloudflare na-emegide ikpe ahụ ihe atụ nke nnabata nke omume kacha mma, na-ehota ndị na-eme ihe nkiri bụ ndị kwanyere robots.txt, depụta ndị nnọchi anya ha wee nabata ụkpụrụ na-apụta dị ka Weebụ Bot AuthN'ule atụnyere, ọ na-ekwu na bots ndị ọzọ ha kwụsịrị mgbe ị zutere mmachibido iwu ma ọ bụ ngọngọ netwọk, na-enweghị nzuzo anwale.
Esemokwu nke na-egosi usoro nke gburugburu ebe obibi

Onye na-ebubata ya na-atụ anya a mgbanwe mgbe nile nke usoro nke ndị na-arụ ọrụ bot na ihe nchekwa ndị a na-eji ejide ha. N'otu aka ahụ, ọ na-ekere òkè na ndị ọkachamara na òtù dị ka ndị IETF ịkpali robots.txt ndọtị na ụkpụrụ a na-atụ atụ nke ndị na-eso ụzọ nwere ezi ebumnuche kwesịrị ịgbaso.
E wezụga usu a kapịrị ọnụ, ikpe ahụ na-etinye na tebụl nsogbu nke obi ike n'etiti ndị na-emepụta ọdịnaya, nyiwe na ụlọ ọrụ AI: onye nwere ike nweta ihe, n'okpuru ihe ọnọdụ, na otú mee ka ọ pụta ìhè na-emebighị ụdị azụmahịa ma ọ bụ na-ebelata ihe ọhụrụ. Ihe niile na-ezo aka na mkparịta ụka a ga-anọgide na-emeghe ebe ndị ọrụ AI na-enweta aha ọma na weebụ na-edozi iwu nke ibikọ ọnụ.
Ihe omume a na-ahapụ ozi doro anya: A na-enyocha nyocha AI, ya na Cloudflare na-akatọ ụzọ eji eme ihe eji eme ihe na-akpata mgbagwoju anya na mmalite. na-agọnarị ya nke ukwuu; n'etiti, ndị nwe saịtị nwere ohere ngwaọrụ ọhụụ ijikwa ohere na set nke ezi omume a na-ewu nke ga-akara ebe egwuregwu n'ime ọnwa ndị na-abịa.
Abụ m onye na-anụ ọkụ n'obi maka teknụzụ nke tụgharịrị mmasị "geek" ya ka ọ bụrụ ọrụ. Ejila m ihe karịrị afọ 10 nke ndụ m na-eji teknụzụ dị egwu na iji ụdị mmemme ọ bụla na-eme ihe n'ihi ọchịchọ ịmata ihe. Ugbu a amatala m nkà na ụzụ kọmputa na egwuregwu vidio. Nke a bụ n'ihi na ihe karịrị afọ 5 m na-ede maka weebụsaịtị dị iche iche na nkà na ụzụ na egwuregwu vidio, na-emepụta akụkọ na-achọ inye gị ozi ịchọrọ n'asụsụ nke onye ọ bụla na-aghọta.
Ọ bụrụ na ị nwere ajụjụ ọ bụla, ihe ọmụma m sitere na ihe niile metụtara sistemụ arụmọrụ Windows yana Android maka ekwentị mkpanaaka. Na nkwa m bụ gị, m na-adị njikere mgbe niile iji nkeji ole na ole ma nyere gị aka dozie ajụjụ ọ bụla ị nwere na ụwa ịntanetị a.