Archivo robots.txt

Hola buenas tardes, siguiendo las instrucciones de comocreartuweb cree el archivo robots.txt, quisiera que me explicara bien de que me srive y si insertandolo en la rais del servidor funciona, o tengo que colocar en el index algun codigo para que lo lean no se me explican bien. gracias. el archivo es esta

robots.txt

User-agent: *
Disallow :

ayuda......

Deseo posicionar mi web que aparezca en los primeros lugares en los buscadores, le pueden echar una hojeadita y me cuentan que hago www.roscogas.com.

Gracias

Hola Imarin2008.
Para utilizar el archivo Robots.txt sirve para indicarle a los buscadores que partes o páginas de tu web debe seguir y cuales no. Este archivo lo debes poner en la raíz del sitio, en la misma carpeta donde tienes el index de tu web, en el index no es necesario que coloques ningún código, lo que si debes indicar a los buscadores cual es tu archivo robots.txt, así lo tienen en cuenta cada vez que rastreen tu web.

El robots.txt no te ayuda a posicionar por si solo, en cambio si lo usas para excluir páginas de tu web que no están relacionadas con tu temática si que te puede ayudar.