Robots.txt generaator ja valideerija

Loo indekseerimisreegleid, lisa saidikaardi direktiive ja valideeri robots.txt süntaksit lokaalselt enne faili avaldamist oma veebisaidi juurkataloogis.

Valmis

Valideerimise tulemused

  • Genereeri või kleebi robots.txt sisu, seejärel valideeri see.

Indekseerimisreeglite genereerimine

Koosta User-agent, Allow, Disallow, Sitemap ja valikuline Host direktiiv ilma robots.txt vormingut meelde jätmata.

Süntaksi valideerimine

Kontrolli tavalisi vigu, nagu puuduvad user-agentid, suhtelised saidikaardi URL-id, valesti vormistatud teed, duplikaatreeglid ja mittetoetatud direktiivide nimed.

Privaatne kohalik töötlemine

Generaator ja valideerija töötavad sinu brauseris. Robots.txt sisu ei laadita Convertr serveritesse.

Frequently asked questions

Kas minu robots.txt fail on valideerimiseks üles laaditud?

Ei. Genereerimine ja valideerimine toimuvad sinu brauseris JavaScriptiga. Sinu sisestatud teksti ei saadeta Convertr serveritesse.

Kuhu ma peaksin robots.txt paigutama?

Paiguta robots.txt hosti juurkataloogi, millele see kehtib, näiteks https://example.com/robots.txt.

Kas robots.txt eemaldab lehed Google'ist?

Ei. Robots.txt kontrollib indekseerija juurdepääsu. Kasuta lehel noindex direktiive või eemalda leht, kui sa pead indekseerimise tühistama.

Seotud arendajatööriistad

HTTP Headers Checker Inspect redirects, status codes, and response headers. XML Vormindaja Vorminda ja valideeri XML-faile ja saidikaardi fragmente. URL kodeerija ja dekodeerija Kodeerige URL-id, päringustringid ja URL-i komponendid. URL Slug Generator Create readable URL paths for pages and posts. HTML-i olemite kodeerija Väldi ja dekodeeri HTML-tundlikke märke. Cron Expression Generator Build and validate scheduled crawler or maintenance jobs.