{"id":69143,"date":"2022-10-22T00:49:54","date_gmt":"2022-10-21T22:49:54","guid":{"rendered":"https:\/\/rmarketingdigital.com\/wiki\/robots-txt\/"},"modified":"2024-10-28T22:34:34","modified_gmt":"2024-10-28T21:34:34","slug":"robots-txt","status":"publish","type":"glossary","link":"https:\/\/rmarketingdigital.com\/de\/wiki\/robots-txt\/","title":{"rendered":"Roboter txt"},"content":{"rendered":"

<\/p>\n

\n

Concepto de Robots txt<\/h2>\n<\/p>\n
\n

\u00bfQu\u00e9 es el Robots txt?<\/h3>\n

Robots txt, o m\u00e1s bien, robots.txt, es un archivo de texto plano que se crea y se conecta a un portal online para determinar una serie de reglas relacionadas con el comportamiento de los robots indexadores de los buscadores, los crawlers o Spinnen<\/span>. Por lo general, se usa con la finalidad de impedir que rastreen determinados contenidos y, de esta manera, no los indexen para aparecer entre las SERPs.<\/p>\n

Utilizarlos es sencillo, a\u00fan cuando se puede hacer de distintos maneras. El responsable de elaborarlo puede indicar de forma directa las URLs que no han de llevarse al buscador o, si lo prefiere, determinar directorios, subdirectorios o archivos que opten mantenerse alejados de Google y el resto de motores de b\u00fasqueda.<\/p>\n

A pesar de la finalidad que posee, usar este fichero no es total garant\u00eda de que no haya Indizierung<\/span>, por lo que no es recomendable al momento de mantener algunas secciones de un portal online como privadas. Es una acci\u00f3n v\u00e1lida, pero no definitiva puesto que no es capaz de garantizar un hermetismo total. En casos como ese es mejor buscar otras alternativas que s\u00ed sean m\u00e1s eficaces.<\/p>\n

Comandos como disallow son los que suelen aparecer al momento de abrir un archivo robots.txt. Es muy importante entender su estructura y su utilizaci\u00f3n, a\u00fan cuando para esto a\u00f1adiremos una serie de enlaces m\u00e1s adelante con la finalidad de complementar la informaci\u00f3n.<\/p>\n<\/div>\n

\n

Para qu\u00e9 sirve el Robots txt<\/h3>\n

Este archivo, el robots txt, sirve para que ni Google ni otros buscadores indexen en sus p\u00e1ginas de resultados (SERPs), determinadas partes de un portal online. Es algo que las compa\u00f1\u00edas suelen usar para dejar fuera aquellas p\u00e1gina que puedan ser penalizadas e impactar negativamente en el SEO, como por ejemplo en casos de contenido duplicado, o si b\u00e1sicamente prefieren alejar determinados contenidos de los buscadores.<\/p>\n

Adem\u00e1s puede emplearse para dictar a los robots de los motores de b\u00fasqueda relacionadas con c\u00f3mo deben rastrear otros contenidos de la web. Su funci\u00f3n trasciende del impedimento y del permiso, de ah\u00ed que sea un elemento bastante importante al momento de elaborar un portal online.<\/p>\n<\/div>\n

\n

Ejemplos de Robots txt<\/h3>\n

Hay tantos archivos robots txt como p\u00e1ginas web en la red de redes; a pesar de todo, para lanzar un ejemplo sencillo de c\u00f3mo puede ser la estructura de uno, vamos a escribir las siguientes l\u00edneas:<\/p>\n

User-Agent: *<\/p>\n

Disallow: \/agencia-social-media\/<\/p>\n

Sitemap: https:\/\/neoattack.com\/sitemap.xml<\/p>\n

En esta circunstancia, se ha establecido una regla para todos los robots de los distintos buscadores (primera l\u00ednea) que indica que nuestra secci\u00f3n de servicios Social Media<\/u><\/span> no debe indexarse (segunda l\u00ednea) y, en resumen, se ha indicado la supuesta ruta de nuestro sitemap (tercera l\u00ednea), un requerimiento obligatorio para estos ficheros.<\/p>\n<\/div>\n

\n

M\u00e1s informaci\u00f3n sobre el Robots txt<\/h3>\n

Para aprender a construir un archivo Robots txt, al mismo tiempo de para aprender m\u00e1s sobre su uso y posibilidades, te sugerimos echar un vistazo a las publicaciones que existen a continuaci\u00f3n.<\/p>\n<\/div>\n<\/div>","protected":false},"excerpt":{"rendered":"

Concepto de Robots txt \u00bfQu\u00e9 es el Robots txt? Robots txt, o m\u00e1s bien, robots.txt, es un archivo de texto plano que se crea y se conecta a un portal…<\/p>","protected":false},"author":1,"featured_media":0,"parent":0,"template":"","glossary-cat":[],"class_list":["post-69143","glossary","type-glossary","status-publish"],"yoast_head":"\nRobots txt - R Marketing Digital<\/title>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/rmarketingdigital.com\/de\/wiki\/robots-txt\/\" \/>\n<meta property=\"og:locale\" content=\"de_DE\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Robots txt\" \/>\n<meta property=\"og:description\" content=\"Concepto de Robots txt \u00bfQu\u00e9 es el Robots txt? Robots txt, o m\u00e1s bien, robots.txt, es un archivo de texto plano que se crea y se conecta a un portal...\" \/>\n<meta property=\"og:url\" content=\"https:\/\/rmarketingdigital.com\/de\/wiki\/robots-txt\/\" \/>\n<meta property=\"og:site_name\" content=\"R Marketing Digital\" \/>\n<meta property=\"article:modified_time\" content=\"2024-10-28T21:34:34+00:00\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\\\/\\\/schema.org\",\"@graph\":[{\"@type\":\"WebPage\",\"@id\":\"https:\\\/\\\/rmarketingdigital.com\\\/wiki\\\/robots-txt\\\/\",\"url\":\"https:\\\/\\\/rmarketingdigital.com\\\/wiki\\\/robots-txt\\\/\",\"name\":\"Robots txt - R Marketing Digital\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/rmarketingdigital.com\\\/#website\"},\"datePublished\":\"2022-10-21T22:49:54+00:00\",\"dateModified\":\"2024-10-28T21:34:34+00:00\",\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\\\/\\\/rmarketingdigital.com\\\/wiki\\\/robots-txt\\\/\"]}]},{\"@type\":\"WebSite\",\"@id\":\"https:\\\/\\\/rmarketingdigital.com\\\/#website\",\"url\":\"https:\\\/\\\/rmarketingdigital.com\\\/\",\"name\":\"R Marketing Digital\",\"description\":\"Agencia SEO | Publicidad redes sociales | Community Management\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\\\/\\\/rmarketingdigital.com\\\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"de\"}]}<\/script>\n<!-- \/ Yoast SEO Premium plugin. -->","yoast_head_json":{"title":"Robots txt - R Marketing Digital","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/rmarketingdigital.com\/de\/wiki\/robots-txt\/","og_locale":"de_DE","og_type":"article","og_title":"Robots txt","og_description":"Concepto de Robots txt \u00bfQu\u00e9 es el Robots txt? Robots txt, o m\u00e1s bien, robots.txt, es un archivo de texto plano que se crea y se conecta a un portal...","og_url":"https:\/\/rmarketingdigital.com\/de\/wiki\/robots-txt\/","og_site_name":"R Marketing Digital","article_modified_time":"2024-10-28T21:34:34+00:00","twitter_card":"summary_large_image","schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"WebPage","@id":"https:\/\/rmarketingdigital.com\/wiki\/robots-txt\/","url":"https:\/\/rmarketingdigital.com\/wiki\/robots-txt\/","name":"Robots txt - R Marketing Digital","isPartOf":{"@id":"https:\/\/rmarketingdigital.com\/#website"},"datePublished":"2022-10-21T22:49:54+00:00","dateModified":"2024-10-28T21:34:34+00:00","inLanguage":"de","potentialAction":[{"@type":"ReadAction","target":["https:\/\/rmarketingdigital.com\/wiki\/robots-txt\/"]}]},{"@type":"WebSite","@id":"https:\/\/rmarketingdigital.com\/#website","url":"https:\/\/rmarketingdigital.com\/","name":"R Digitales Marketing","description":"SEO Agentur | Werbung f\u00fcr soziale Netzwerke | Community Management","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/rmarketingdigital.com\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"de"}]}},"_links":{"self":[{"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/glossary\/69143","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/glossary"}],"about":[{"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/types\/glossary"}],"author":[{"embeddable":true,"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/users\/1"}],"version-history":[{"count":0,"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/glossary\/69143\/revisions"}],"wp:attachment":[{"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/media?parent=69143"}],"wp:term":[{"taxonomy":"glossary-cat","embeddable":true,"href":"https:\/\/rmarketingdigital.com\/de\/wp-json\/wp\/v2\/glossary-cat?post=69143"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}