Si të ridërgoni një skedar të azhurnuar ose të ri Robots.txt

robotët txt

Agjencia jonë merret këshillim i kërkimit organik për disa shitës të SaaS në industri. Një klient me të cilin kohët e fundit kemi filluar të punojmë kishte bërë një praktikë mjaft standarde, duke vendosur aplikacionin e tyre në një nën-domen dhe duke zhvendosur faqen e tyre të broshurës në domenin kryesor. Kjo është një praktikë standarde pasi që ju mundëson si ekipit tuaj të prodhimit ashtu edhe ekipit tuaj të marketingut të bëjnë azhurnime sipas nevojës pa ndonjë varësi nga tjetri.

Si hap i parë në analizimin e shëndetit të tyre të kërkimit organik, ne regjistruam si broshurën, ashtu edhe fushat e aplikimit në Webmasters. Kjo është kur kemi identifikuar një çështje të menjëhershme. Të gjitha faqet e aplikacioneve bllokoheshin nga indeksimi nga motorët e kërkimit. Ne u zhvendosëm tek hyrja e tyre robot.txt në Webmasters dhe menjëherë e identifikuam problemin.

Ndërsa përgatiteshin për migrimin, ekipi i tyre i zhvillimit nuk donte që nën-domeni i aplikacionit të indeksohej nga kërkimi, kështu që ata nuk lejuan hyrjen në motorët e kërkimit. Skedari robots.txt është një skedar i gjetur në rrënjën e faqes tuaj - yourdomain.com/robots.txt - kjo i lejon motorit të kërkimit të dijë nëse ata duhet të zvarriten në sit. Ju mund të shkruani rregulla për të lejuar ose ndaluar indeksimin në të gjithë sitin ose shtigjet specifike. Ju gjithashtu mund të shtoni një rresht për të specifikuar skedarin tuaj të sitemap.

La robots.txt skedari kishte shënimin e mëposhtëm i cili parandaloi zvarritjen dhe indeksimin e faqes në renditjen e rezultateve të kërkimit:

User-agent: * Ndalo: /

Duhet të ishte shkruar si më poshtë:

Përdoruesi-agjent: * Lejo: /

Kjo e fundit siguron leje për çdo motor kërkimi që zvarrit faqen, në të cilin ata mund të kenë qasje në çdo direktori ose skedar brenda faqes.

E shkëlqyeshme ... kështu që tani robots.txt skedari është perfekt, por si e di Google dhe kur do ta kontrollojnë përsëri faqen? Epo, ju mund të kërkoni absolutisht që Google të kontrollojë robots.txt tuaj, por nuk është shumë intuitiv.

Shkoni të Google Search Console Kërko Console me Zvarritje> Testues robots.txt. Ju do të shihni përmbajtjen e skedarit më të fundit të zvarritur robots.txt brenda Testuesit. Nëse dëshironi të ridërgoni skedarin tuaj robots.txt, klikoni Dorëzo dhe një dritare do të dalë me disa opsione.

ridërgoni robotët.txt

Opsioni përfundimtar është Kërkoni nga Google të azhurnojë. Klikoni në butonin blu Dorëzo pranë këtij opsioni dhe pastaj lundroni përsëri te Zvarritje> Testues robots.txt opsioni i menusë për të ringarkuar faqen. Tani duhet të shihni skedarin e azhurnuar robots.txt së bashku me një vulë date që tregon se ajo është zvarritur përsëri.

Nëse nuk shihni një version të azhurnuar, mund të klikoni në dorëzimin dhe të zgjidhni Shikoni versionin e ngarkuar për të lundruar në skedarin tuaj aktual robots.txt. Shumë sisteme do të cache këtë skedar. Në fakt, IIS gjeneron këtë skedar në mënyrë dinamike bazuar në rregullat e futura përmes ndërfaqes së tyre të përdoruesit. Ju ka shumë të ngjarë të duhet të azhurnoni rregullat dhe të rifreskoni memorien e përkohshme për të publikuar një skedar të ri robots.txt.

robots-txt-testues

Çfarë mendoni ju?

Kjo faqe përdor Akismet për të reduktuar spamin. Mësoni se si përpunohet komenti juaj.