MyCity » Web promocija & SEO » Pravilan robots.txt

Pravilan robots.txt

Napisano na dan: 22.1.2010
1

Pravilan robots.txt
Sledeća strana Pagination

Idi na vrh

Poslao: 22 Jan 2010 23:02
Idi na vrh
offline
  • Banop  Male
  • Super građanin
  • Pridružio: 23 Maj 2009
  • Poruke: 1475

Moze li mi neko reci kako treba da izgleda robots.txt fajl.
Koristim phpBB3 forum pa ako mozete da mi objasnite gde trebam da ga ubacim(u koji folder)?

Da napomenem da sam ubacio redirekciju u root folder (koja redirektuje www.example.com na www.example.com/forum).


Unapred HVALA!



Registruj se da bi učestvovao u diskusiji. Registrovanim korisnicima se NE prikazuju reklame unutar poruka.
Poslao: 14 Feb 2010 04:00
Idi na vrh
offline
  • Peca  Male
  • Glavni Administrator
  • Predrag Damnjanović
  • SysAdmin i programer
  • Pridružio: 17 Apr 2003
  • Poruke: 23211
  • Gde živiš: Niš

primer: http://www.igrice.co.rs/robots.txt

za svaki slucaj [posto ne znam sta sve redirekcija redirektuje] - ubaci ga u oba foldera [nece da skodi]



Poslao: 14 Feb 2010 09:18
Idi na vrh
offline
  • Banop  Male
  • Super građanin
  • Pridružio: 23 Maj 2009
  • Poruke: 1475

Hvala!Ubacio sam u oba foldera a kao sadrzaj fajla sam stavio

Citat:Sitemap: http://www.example.com/forum/sitemap.xml

User-agent: *
Disallow: /admin/
Disallow: /db/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /privmsg.php
Disallow: /profile.php
Disallow: /search.php
Disallow: /templates/
Disallow: /common.php
Disallow: /config.php
Disallow: /faq.php
Disallow: /viewonline.php
Disallow: /groupcp.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /modcp.php
Disallow: /posting.php

Poslao: 14 Feb 2010 15:53
Idi na vrh
offline
  • Peca  Male
  • Glavni Administrator
  • Predrag Damnjanović
  • SysAdmin i programer
  • Pridružio: 17 Apr 2003
  • Poruke: 23211
  • Gde živiš: Niš

ok je

Poslao: 15 Mar 2010 14:30
Idi na vrh
offline
  • Pridružio: 01 Apr 2005
  • Poruke: 797
  • Gde živiš: Niš

Зашто стављати

Disallow: /admin/

кад нема линкова ка тој страни, значи неће доћи до ње, нити робот може да јој приступи јер добија 404 и ако покуша, мада не знам каквим чудом ће да набаса на дмин урл?

Poslao: 15 Mar 2010 15:57
Idi na vrh
offline
  • Peca  Male
  • Glavni Administrator
  • Predrag Damnjanović
  • SysAdmin i programer
  • Pridružio: 17 Apr 2003
  • Poruke: 23211
  • Gde živiš: Niš

google pokusa da indexira sve sto korisnik koji ima instaliran Google Toolbar poseti.......
Sad

Poslao: 15 Mar 2010 16:05
Idi na vrh
offline
  • Pridružio: 01 Apr 2005
  • Poruke: 797
  • Gde živiš: Niš

И онда добије 404 или 403 Smile

Poslao: 15 Mar 2010 17:02
Idi na vrh
offline
  • Peca  Male
  • Glavni Administrator
  • Predrag Damnjanović
  • SysAdmin i programer
  • Pridružio: 17 Apr 2003
  • Poruke: 23211
  • Gde živiš: Niš

to je vec druga stvar, zavisi od slucaja do slucaja smešak
ne vezano za ovaj slucaj - kad browser poseti neki URL - velike su sanse da tamo ipak ima neceg smešak

Poslao: 15 Mar 2010 21:32
Idi na vrh
offline
  • Pridružio: 01 Apr 2005
  • Poruke: 797
  • Gde živiš: Niš

Па јесте, увек има нечег, али ако је нешто админ модул, онда мора да се адекватно заштити. А роботс фајл никаква заштита није.

Poslao: 15 Mar 2010 23:00
Idi na vrh
offline
  • Peca  Male
  • Glavni Administrator
  • Predrag Damnjanović
  • SysAdmin i programer
  • Pridružio: 17 Apr 2003
  • Poruke: 23211
  • Gde živiš: Niš

of course smešak

zato i napomenuh da 'veliki bata' gleda koje adrese ucitavas u browseru, ako imas njegov toolbar...

MyCity » Web promocija & SEO » Pravilan robots.txt

Ko je trenutno na forumu
 

Ukupno su 799 korisnika na forumu :: 6 registrovanih, 1 sakriven i 792 gosta   ::   [ Administrator ] [ Supermoderator ] [ Moderator ] :: Detaljnije

Najviše korisnika na forumu ikad bilo je 3466 - dana 01 Jun 2021 17:07

Korisnici koji su trenutno na forumu:
Korisnici trenutno na forumu: Neutral-M, saputnik plavetnila, TBF1D, zlaya011, zziko, Žoržo