| crystycrystan a întrebat:

Salut, Am inceput si eu sa utilizez robot.txt si am restrictionat toate paginile de produse care sunt intr-un director "cumpara" si am lasat pentru indexare doar paginile de categorie. Problema este urmatoare: in sitemap am paginile de categorie cu linkuri catre paginile de produse. Pe Google Webmaster Tols ma atentioneaza cu calificativul "probleme" ca fisierele blocate cu robot.txt se gasesc in sitemap. Este in regula? Ce-i de facut? Cu stima,

ATENŢIE! Legea nr. 8 din 1996 pedepseşte pirateria şi distribuţia ilegală de materiale pe Internet. Nu posta linkuri care încalcă drepturile de autor. În ipoteza unei acţiuni juridice, TPU.ro poate fi obligat de lege să furnizeze IP-ul tău şi restul datelor de identificare despre tine.

Postarea unui mesaj implică asumarea tuturor riscurilor din partea ta.
De asemenea, accesararea unor linkuri de pe site-uri îndoielnice poate duce la virusarea calculatorului tău.
1 răspuns:
| Tezet a răspuns:

Buna! Insereaza asta in paginile care nu doresti sa fie indexate:

Sterge din sitemap.xml aceste pagini cu ajutorul lui notepad ++, si adauga in robots.txt : # robots.txt for http://www.siteulmeu.ro/

User-agent: *
Disallow: /cumpara/
Nu este ok sa ai in sitemap ceva care trebuie sa fie indexat si totusi in robots.txt sa fie blocat! Google vede ca te contrazici si ceva nu este in regula! Folosirea fisierului robots.txt nu este recomandat pentru ca orice utilizator poate sa il acceseze : http://www.siteulmeu.ro/robots.txt
In acest fel nu ascunzi nimic de la cineva care se pricepe! Pentru a ascunde ceva iti trebuie in pagina respectiva: si criptare de grad2 sau 3.Cu mai multe te pot ajuta in mesaj privat!