robots.txt-generator

Gratis robots.txt-generator online. Indstil tillad/bloker-regler for søgemaskine-crawlers og sitemap-URL. Vigtigt for SEO. Behandles i browseren.

Robots.txt-generator er et gratis onlineværktøj, der nemt opretter robots.txt-filer til at styre søgemaskine-crawleres adgang. Indstil Allow/Disallow-regler, sitemap-URL'er og crawl-forsinkelser. Behandling i browseren uden serverupload — helt gratis til at styre dit websteds crawlbarhed.

Skabeloner
User-Agent
Crawl-forsinkelse
Sitemap-URL
Resultat
User-agent: *
Allow: /
lock Filer sendes ikke til nogen server

Hvordan bruger man robots.txt-generator?

  1. Vælg user-agent (crawler).
  2. Indstil Allow- og Disallow-stiregler.
  3. Tilføj din sitemap-URL, og kopiér den genererede robots.txt.

Ofte stillede spørgsmål om robots.txt-generator

Hvad er robots.txt?

robots.txt er en tekstfil placeret i roden af et websted, der fortæller søgemaskine-crawlere, hvilke sider de skal crawle eller ignorere.

Kan robots.txt fuldstændig skjule sider fra søgeresultaterne?

Nej. robots.txt styrer kun crawling — sider kan stadig optræde i søgeresultaterne, hvis der linkes til dem fra andre websteder. Brug et noindex-metatag for fuldstændig fjernelse.

Relaterede værktøjer

Meta tag-generator

Gratis meta tag-generator online. Automatisk oprettelse af title, description, Open Graph, Twitter Card. Kopier kode. Behandles i browseren.

Sitemap-generator

Gratis XML sitemap-generator online. Opret sitemap.xml ved at indtaste URL'er. Vigtigt for SEO-optimering. Behandles i browseren.

Schema Markup-generator

Gratis Schema Markup-generator online. Opret JSON-LD strukturerede data for FAQ, produkter, artikler. Optimer rich results. Behandles i browseren.

Søgeordsanalyse

Gratis søgeordsanalyse online. Analyser frekvens og andel af søgeord til SEO-indholdsoptimering. Behandles i browseren.