Ciamar a thoirt air falbh làrach no a mìrean bho Google Clàr-ìnnse

A rèir a 'comharrachadh bun-bheachd a ghabhail os làimh le Google, a' cunntadh airson iomlanachd,-eisimeileachd air an fhiosrachadh agus a 'co-aontachadh ris a' cheist rannsachaidh ann an issuance de na toraidhean. Ma tha an clàr-amais a 'tuiteam fheàrr le mì-laghail, susbaint, no stòras airson spama, na duilleagan air an làraich seo nach bi air an comharrachadh ann an stòr-dàta cumanta search engine. Airson dhuinn, tha e cudromach a bhith ag ionnsachadh ciamar a thoirt air falbh làrach bhon issuance de na toraidhean an rannsachaidh fhrithealaiche.

Tionndaidhean neoni comharrachadh Google

Aon uair 'rannsachadh robot - prògram gus fiosrachadh a thional mu na goireasan ùra - a' sgrùdadh na làraich duilleag le duilleag, an uair sin, nuair fo Google poileasaidh riatanasan airson parsadh, thèid a chlàr-amais. Ach tha sinn cuideachd a 'sealltainn dhut mar a thoirt air falbh làraich agad no criomagan airson nan einnseanan luirg tro robots.txt - Clàr-ìnnse agus lorg aig an aon àm stad.

Gus a dhùnadh a-mach bho issuance an goireas air fad, ann an pasgan freumhach na frithealaiche air a bheil an làrach suidhichte, a 'cruthachadh cuid de teacs sgìre - Thuirt robots.txt. Tha an raon seo a làimhseachadh leis an rannsachadh einnseanan agus an gnìomh a rèir a 'stiùireadh a' leughadh.

Cùm ann an inntinn gu bheil an Google search engine clàran-amais an duilleig, fiù 's ma tha an neach-cleachdaidh a tha inntrigeadh aige gus coimhead air a thoirmeasg. Nuair a brabhsair 'freagairt ri 401 no 403 "Cothrom a tha mì-dhligheach", tha e a' buntainn a-mhàin ri luchd-turais, seach prògraman a 'cruinneachadh airson seo search engine.

Airson tuigsinn mar a thoirt às an làraich bho search engine comharrachadh, teacsa chomharra Feumaidh-steach na leanas lines:

Cleachdaiche-àidseant: Googlebot

Disallow: /

Seo a 'sealltainn chun an iomrallaiche gu Clàr-ìnnse an Toirmeasg a h-uile clàr na làraich air an làraich. Seo ciamar a thoirt air falbh làrach Google mar sin, an dàrna Chan eil an tasgadan a 'ghoireas anns an liosta a lorg.

Embodiments de sganaidh airson diofar pròtacalan

Ma dh'fheumas tu liosta fa leth conaltraidh inbhean, airson a tha thu ag iarraidh cur a-steach sònraichte riaghailtean airson Chlàr-amais Ghoogle, mar eisimpleir, air leth airson hypertext pròtacalan http / https, tha e cuideachd riatanach a chlàradh ann an robots.txt ann an dòigh a leanas (mar eisimpleir).

(Http://yourserver.com/robots.txt) - àrainn ainm na làraich agad (sam bith)

Cleachdaiche-àidseant: * - sam bith search engine

Leig: / - a 'leigeil le làn indexation

Ciamar a thoirt air falbh bho làrach a 'chùis gu tur an https pròtacal

(Https://yourserver.com/robots.txt):

Cleachdaiche-àidseant: *

Disallow: / iomlan casg air comharrachadh

Luathailteach toirt air falbh URL- goireas seòlaidhean bho Google SERPs

Mur eil thu ag iarraidh a 'feitheamh airson ath-indexation, agus an làrach a tha thu airson a fhalach mar, tha mi a' moladh a 'cleachdadh na seirbheis http://services.google.com/urlconsole/controller luath' sa ghabhas. Ro robots.txt a bhith air an cur ann an eòlaire freumh na làraich fhrithealaiche. Bu chòir a bhith òrdaichte iomchaidh stiùireadh.

Ma tha a 'chomharra airson adhbhar air choireigin, chan urrainn a bhith air a dheasachadh ann an freumh eòlaire, chruthachadh e gu leòr ann am pasgan le targaidean airson a bheil thu ag iarraidh am falach bho na einnseanan luirg. Nuair a nì thu seo agus iomradh a thoirt air an t-seirbheis a thoirt air falbh gu fèin-obrachail hypertext seòlaidhean, cha Google sganadh pasgannan a litreachadh a-mach easbhaidh ann an robots.txt.

Tha an ùine seo air a chur a-fhaicsinneachd airson 3 mìosan. An dèidh ùine seo, eòlaire a-mach à iris, a-rithist a bhith air obrachadh le Google fhrithealaiche.

C iamar a thoirt air falbh làrach a sganadh pàirt

Nuair a lorg a bot a tha a 'leughadh na robots.txt, gu bheil cuid de na co-dhùnaidhean gan dèanamh air bunait an cuid susbaint. Nach can thu ag iarraidh a dhùnadh a-mach bho a 'sealltainn air fad eòlaire ghairm anatom. Tha e gu leòr gus stuth leithid riaghailtean:

Cleachdaiche-àidseant: Googlebot

Disallow: / anatom

No, mar eisimpleir, nach eil thu ag iarraidh an clàr-amais a h-uile seòrsa ìomhaigh .gif. Gus seo a dhèanamh, ris an liosta a leanas:

Cleachdaiche-àidseant: Googlebot

Disallow: /*.gif$

Seo eisimpleir eile. Leig leotha a bhith a sguabadh às parsadh fiosrachaidh air duilleagan dynamically a chruthachadh, fhad 'sa' cur ris an clàr-amais inntrigidh-seòrsa:

Cleachdaiche-àidseant: Googlebot

Disallow: / *?

Sin mu, is mìneachadh air na riaghailtean airson nan einnseanan luirg. Rud eile gu bheil e mòran nas fhasa dìreach a 'cleachdadh seo taga meta. Agus Teòthachd tric a 'cleachdadh dìreach a leithid coitcheann a' riaghladh obrachadh nan einnseanan luirg. Ach bidh sinn a 'bruidhinn air a seo san àm ri teachd artaigilean.