Back to Question Center
0

Semalt: Хэрвээ би сайтынхаа robots.txt ашигладаг бол аль хэдийн индексжүүлсэн URL-уудыг хасах уу?

1 answers:

Миний сайтын олон вэбсайтууд Google-ийн индексд нэмэгдсэн боловч ихэнх нь хуучирсан бөгөөд тэд 404 алдааг хэзээ ч үүсгэхгүй бөгөөд миний сайтын нүүр хуудсанд.

Би хамгийн сүүлийн URL-уудтай шинэ семинараа ирүүлсэн боловч миний сайтын хуучин болон хуучирсан URLууд Google хайлтын дээд хэсэгт харуулсаар байна.Ийм URL-ын Semalt 100-ууд Гэвч зайлуулах хүсэлт гаргах нь маш их цаг хугацаа, хүч чармайлт шаардагдана - white subox. Би робот ашиглахыг хүсэж байна. оронд нь txt . Гэхдээ би тэднийг роботууддаа жагсаан бичээрэй. txt миний хуучин URL-тэй нийцсэн зэрлэг картын илэрхийлэлийг ашиглан Google-ээс тэдгээрийн индексээс хасах уу? Эсвэл үүнийг дахин мөлхөхгүй байх болно, энэ нь тэдгээрийг дахин индексжүүлэхгүй гэсэн үг юм. Гэхдээ хуучин URL-уудыг индексжүүлсэн хэвээр Google хайлт дээр харуулах болно.

February 5, 2018

Би робот ашиглан хуудсыг мөлхөхөөс Google-ийг хаадаг. txt заагаагүй бол хайлтын үр дүнгээс алга болно уу? https: // хөгжүүлэгчид. google. com / webmasters / control-crawl-index / docs / faq

Хуудсыг мөлхөхөөс Google-ийг хориглох нь тухайн хуудсыг багасгах болноэрэмбэлэх, цаг хугацаа өнгөрөх тусам цуцална. Энэ нь бас байж болноДоор байгаа текст дээрх хэрэглэгчдэд өгсөн нарийвчилсан хэмжээг багасгаххайлтын үр дүн. Энэ нь хуудасны агуулгагүйгээр хайлт хийдэгХөдөлгүүр нь ажиллахад маш бага мэдээлэлтэй байдаг.

Гэхдээ роботууд. txt Тодорхойгүй хуудас нь хуудсанд байхгүй гэдгийг баталгаажуулахгүйҮр дүн дээр харагдана: Google нь гаднаас хамааран шийдэгдэж болноОрж ирсэн холбоос гэх мэт мэдээллийг энэ нь хамааралтай гэж үздэг. Та хүсвэлИндексжүүлэгдэхээс хуудсыг шууд хаахын тулд та ашиглах ёстойnoindex робот meta tag буюу X-Robots-Tag HTTP толгой. Энэ тохиолдолд,Та робот дээрх хуудсыг хааж болохгүй. txt, хуудас нь шаардлагатайТагийг харж, дагахын тулд мөлхөж болно.

Энэ бол Google-ийн албан ёсны хариулт юм: Бүтэн хуудсыг бүрэн устгах

Хэрэв та хуудас устгагдахыг хүсвэл Google Webmaster Tools хуудасны болон . txt файлыг хуудаснуудаас хасахын тулд Google дахин индексжүүлэхгүй байна.

Хэрэв уг хуудас нь Google-ийн индекс дээр байгаа бол роботыг ашиглавал дээрх холбоос дээр дурдсан болно. Зөвхөн txt файлыг хуудсыг хасахын тулд Google нь индексжүүлж болно:

Хэрвээ хуудас хэвээр байгаа бол робот ашиглах. txt Google-ээс сэргийлэхмөлхөж байна. Хэдийгээр URL нь роботоор зөвшөөрөгдөөгүй байсан ч. txt бид байж болноХэрвээ бид өөр сайт дээр URL-ыг олвол хуудсыг индексжүүлнэ үү. Гэхдээ бид тэгэхгүйроботуудад хориглогдсон бол хуудсыг индексжүүлэх. txt бөгөөд идэвхтэй байнаХуудасны URL устгах хүсэлт.

404 эсвэл 410 төлөвийн кодыг өгч байгаа эсэхийг 301 .

Эцэст нь Google роботууд дахь URL-уудыг тавьсан бол хайлтын үр дүнгээс хуудсыг хасах болно. txt . Гэсэн хэдий ч, энэ нь зарим цаг хугацаа шаардаж болох юм.

Хамгийн хурдан арга бол Webmaster Tools ашиглах ба тэнд URL-үүдийг устгах явдал юм.