Sut i Ailgyflwyno Ffeil Robots.txt wedi'i Diweddaru neu Newydd

robotiaid txt

Mae ein hasiantaeth yn delio ymgynghori chwilio organig i sawl gwerthwr SaaS yn y diwydiant. Roedd cleient y gwnaethom ddechrau gweithio ag ef yn ddiweddar wedi gwneud arfer eithaf safonol, gan osod ei gais ar is-barth a symud safle ei lyfryn i'r parth craidd. Mae hyn yn arfer safonol gan ei fod yn galluogi'ch tîm cynhyrchu a'ch tîm marchnata i ddiweddaru yn ôl yr angen heb unrhyw ddibyniaeth ar y llall.

Fel cam cyntaf wrth ddadansoddi eu hiechyd chwilio organig, gwnaethom gofrestru'r pamffled a'r parthau cymwysiadau mewn Gwefeistri. Dyna pryd y gwnaethom nodi mater ar unwaith. Roedd pob un o'r tudalennau cais yn cael eu rhwystro rhag cael eu mynegeio gan y peiriannau chwilio. Fe wnaethon ni lywio i'w cofnod robots.txt mewn Gwefeistri a nodi'r mater ar unwaith.

Wrth baratoi ar gyfer y mudo, nid oedd eu tîm datblygu eisiau i is-barth y cais gael ei fynegeio trwy chwilio, felly roeddent yn gwrthod mynediad i beiriannau chwilio. Mae'r ffeil robots.txt yn ffeil a geir yng ngwraidd eich gwefan - yourdomain.com/robots.txt - mae hynny'n gadael i'r peiriant chwilio wybod a ddylent gropian y wefan ai peidio. Gallwch ysgrifennu rheolau i ganiatáu neu wrthod mynegeio ar y wefan gyfan neu lwybrau penodol. Gallwch hefyd ychwanegu llinell i nodi'ch ffeil map safle.

Daeth robots.txt roedd gan y ffeil y cofnod canlynol a oedd yn atal y wefan rhag cael ei chropian a'i mynegeio yn y safleoedd canlyniadau chwilio:

Defnyddiwr-asiant: * Disallow: /

Dylai fod wedi cael ei ysgrifennu fel a ganlyn:

Defnyddiwr-asiant: * Caniatáu: /

Mae'r olaf yn rhoi caniatâd i unrhyw beiriant chwilio sy'n cropian ar y wefan y gallant gyrchu unrhyw gyfeiriadur neu ffeil ar y wefan.

Gwych ... felly nawr bod y robots.txt ffeil yn berffaith ond sut mae Google yn gwybod a phryd y byddant yn gwirio'r wefan eto? Wel, gallwch chi ofyn yn llwyr i Google wirio'ch robots.txt, ond nid yw'n rhy reddfol.

Navigate at y Consol Chwilio Consol Chwilio Google i'r Cropian> robotiaid.txt Profwr. Fe welwch gynnwys y ffeil robots.txt ymlusgo fwyaf diweddar yn y Profwr. Os hoffech chi ailgyflwyno'ch ffeil robots.txt, cliciwch Cyflwyno a bydd popup yn cynnig ychydig o opsiynau.

ailgyflwyno robots.txt

Y dewis olaf yw Gofynnwch i Google ddiweddaru. Cliciwch y botwm Cyflwyno glas wrth ymyl yr opsiwn hwnnw ac yna llywiwch yn ôl i'r Cropian> robotiaid.txt Profwr opsiwn dewislen i ail-lwytho'r dudalen. Nawr dylech chi weld y ffeil robots.txt wedi'i diweddaru ynghyd â stamp dyddiad sy'n dangos iddo gael ei ymlusgo eto.

Os na welwch fersiwn wedi'i diweddaru, gallwch glicio cyflwyno a dewis Gweld fersiwn wedi'i uwchlwytho i lywio i'ch ffeil robots.txt go iawn. Bydd llawer o systemau yn storio'r ffeil hon. Mewn gwirionedd, mae IIS yn cynhyrchu'r ffeil hon yn ddeinamig yn seiliedig ar reolau a gofnodwyd trwy eu rhyngwyneb defnyddiwr. Mae'n debyg y bydd yn rhaid i chi ddiweddaru'r rheolau ac adnewyddu'r storfa i gyhoeddi ffeil robots.txt newydd.

robotiaid-profwr

Beth ydych chi'n feddwl?

Mae'r wefan hon yn defnyddio Akismet i leihau sbam. Dysgwch sut mae eich data sylwadau yn cael ei brosesu.