Como indexar sitios web en buscadores
Para dar de alta o indexar un sitio web en los buscadores, lo primero que necesitamos son dos cosas:
En primer lugar, subir un archivo robots.txt en la parte principal del sitio web, quedando como www.puntonet.cl/robots.txt. Su configuración dependerá de si requerimos bloquear cierta información de los buscadores o no. La configuración básica es por defecto que todo en el sitio web sea indexado por el o los buscadores.
En segundo lugar, debemos crear un mapa del sitio web, generando un archivo del tipo sitemap.xml y subiendo este archivo a la parte principal del sitio web, quedando www.puntonet.cl/sitemap.xml. Este mapa del sitio web le permitirá a los buscadores poder indexar en mejor forma la información. Hay distintos sitios para crear sitemaps gratuitos, puedes probar con www.xml-sitemaps.com.
Una vez teniendo en nuestro sitio web el archivo robots y nuestro sitemap, debes enviarlo a los buscadores. Por su tráfico dentro de los buscadores, recomendamos enviar el sitemap a Google. Para esto, deberás tener una cuenta de correo en Gmail, con lo cual podrás ingresar a sus Herramientas de Webmaster para Google. Una vez ingresado, deberás seguir las instrucciones y verás lo fácil que es. Un vez enviado, hay que ingresar nuevamente un par de días después y ver los posibles errores de nuestro xml o bien sitio web.
Para el resto de los buscadores, puedes hacer algo similar a lo realizado en Google, pero no todos tienen un panel de administración. Se sabe que Yahoo.com y Bing.com tienen uno. Para el resto, debes buscar en Google con algo como Indexar sitios web a buscadores, encontraras formas simples de enviar el sitemap.