Comentarii la: Robots.txt – comenzi si informatii utile

de: Iulian

Iulian — Tue, 29 Nov 2011 11:06:01 +0000

Multumesc frumos pentru pont.

de: Gabi Dulan

Gabi Dulan — Tue, 29 Nov 2011 09:52:09 +0000

Depinde de ce platforma folosesti Iulian. Pentru WordPress eu am facut urmatoarea varianta:

User-Agent: *

Disallow: /cgi-bin/

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /tag/

Disallow: /*?*

Disallow: */trackback/

Disallow: /wp-content/plugins/

Disallow: /wp-content/cache/

# Nu indexa fisierele cu terminatia urmaotare

Disallow: /*.php$

Disallow: /*.js$

Disallow: /*.inc$

Disallow: /*.css$

# Sitemap xml

Sitemap: http://www.siteultau.ro/sitemap.xml

# disable duggmirror

User-agent: duggmirror

Disallow: /

User-agent: Mediapartners-Google

Allow: /

User-agent: Adsbot-Google

Allow: /

User-agent: Googlebot-Image

Allow: /

User-agent: Googlebot-Mobile

Allow: /

User-agent: ia_archiver-web.archive.org

Disallow: /

de: Iulian

Iulian — Mon, 28 Nov 2011 23:58:42 +0000

Super articol, insa care e varianta cea mai buna de folosit?

de: Gabi Dulan

Gabi Dulan — Fri, 19 Aug 2011 13:48:46 +0000

Nu au absolut nici o legatura etichetele cu fisierul robots.txt. Din pacate nu am cunostinte daca se poate accesa un fisier robots.txt pe Blogspot. Cea mai sigura cale ar fi hostarea individuala nu ca subdomentiu la Blogspot.

de: Emilian

Emilian — Fri, 19 Aug 2011 13:46:13 +0000

Mda. Va multumesc pentru raspuns insa nu prea ajuta. Spun asta pentru ca blogul meu este gazduit de blogspot si probabil sunt multi robotei de care eu nu am habar. am citit si pe alte forumuri. Cica unica solutie ar fi sa imi hostez blogul.

Dar ar mai fi o solutie simpla pe care eu nu stiu exact.

Nu stiu dar am mai citit ca ar mai putea fi si din cauza etichetelor (labels). Nu stiu cum sa le administrez.

Poate din cauza ca am pus aceleasi etichete la toate postarile? Ar putea fi din aceasta cauza?

Pentru fiecare postare trebuie alte etichete?

Poate pentru dumneavoastra sunt intrebari banale. Dar pentru mine ar insemna foarte mult niste raspunsuri exacte. Va multumesc

de: Gabi Dulan

Gabi Dulan — Fri, 19 Aug 2011 07:05:49 +0000

,, Nu trebuie decât să adăugaţi următoarele două rânduri de text la începutul fişierului dvs. robots.txt:” – Cum spune si in mesaj in fisierul robots.txt . Acest fisier text se gaseste pe server in radacina website-ului tau (root). Ai nevoie de un acces ftp pentru a ajunge in aceasta zona.

de: Emilian

Emilian — Thu, 18 Aug 2011 18:12:15 +0000

Buna ziua, am si eu o adresa URL blocata. Cauza blocarii am gasito in raportul adsense Fişier robots.txt zice ca este cauza blocarii. Nu prea sunt cunoscator al limbajului html. Nu am gasti nicaieri explicat unde anume trebuie sa pun
User-agent: Mediapartners-Google*
Disallow:
pentru a putea permite numai robotelului google

Deci daca dau edit html la blog unde ar trebui puse aceste randuri. Inainte de , dupa sau unde?
In instructiuni scrie asa doar.

,, Nu trebuie decât să adăugaţi următoarele două rânduri de text la începutul fişierului dvs. robots.txt:”
Fiind incepator nu pot intui unde anume trebuie puse aceste randuri.

Multumesc anticipat