{"id":1288,"date":"2018-07-25T09:32:16","date_gmt":"2018-07-25T09:32:16","guid":{"rendered":"https:\/\/jchost.pl\/blog\/?p=1288"},"modified":"2025-09-10T08:33:15","modified_gmt":"2025-09-10T08:33:15","slug":"plik-robots-txt","status":"publish","type":"post","link":"https:\/\/jchost.pl\/blog\/plik-robots-txt\/","title":{"rendered":"Plik robots.txt – czym jest i jak go stworzy\u0107?"},"content":{"rendered":"\n
\n
\n
\n
\n \n
\n
\n

Robots.txt – czym jest i jak go stworzy\u0107 (opis\/przyk\u0142ady)<\/h1> <\/div>\n<\/div>\n <\/div>\n <\/div>\n <\/div>\n
\n
\n
\n <\/div>\n
\n \n
\n
\n

\u00a0<\/p>\n

Plik robots.txt<\/h2>\n

Zdecydowana wi\u0119kszo\u015b\u0107 witryn go posiada, ale to nie oznacza, \u017ce wi\u0119kszo\u015b\u0107 administrator\u00f3w go rozumie. Wcze\u015bniej o nim s\u0142ysza\u0142e\u015b, ale najprawdopodobniej nadal zastanawiasz si\u0119, jak dok\u0142adnie dzia\u0142a. Co to takiego? Plik robots.txt. Czyli niepozorny, ma\u0142y plik na Twojej stronie internetowej, kt\u00f3ry niepoprawnie ustawiony jest w stanie troch\u0119 namiesza\u0107.<\/p> <\/div>\n<\/div>\n\n

\n
\n \"robots.txt \n <\/div>\n \n \n <\/div>\n\n
\n
\n

\u00a0<\/p>\n

Mamy cich\u0105 nadziej\u0119, \u017ce ten post oka\u017ce si\u0119 ma\u0142\u0105 skarbnic\u0105 wiedzy dla ka\u017cdego laika i w prosty spos\u00f3b odpowie na pytania, czym jest robots.txt i jak dzia\u0142a. Dowiesz si\u0119 r\u00f3wnie\u017c jak go stworzy\u0107 i przetestowa\u0107 oraz jakie regu\u0142y mo\u017cna w nim umie\u015bci\u0107, aby osi\u0105gn\u0105\u0107 po\u017c\u0105dany efekt. Co wi\u0119cej, poka\u017cemy kilka przyk\u0142adowych ustawie\u0144 tego pliku, wraz z ich znaczeniem.<\/p> <\/div>\n<\/div>\n\n

\n
\n

\u00a0<\/p>\n

Czym jest robots.txt?<\/h3>\n

Robots.txt jest plikiem tekstowym (.txt, nie .html) znajduj\u0105cym si\u0119 w witrynie, informuj\u0105cym roboty, kt\u00f3re podstrony maj\u0105, a kt\u00f3re nie maj\u0105 by\u0107 przez nie odwiedzane. W praktyce plik ten wskazuje, czy okre\u015blone oprogramowanie do indeksowania witryn mo\u017ce zindeksowa\u0107 stron\u0119 czy nie (za pomoc\u0105 instrukcji \u201eblokowania\u201d lub \u201ezezwalania\u201d).<\/p>\n

Nie jest to ca\u0142kowite uniemo\u017cliwienie przeszukiwania witryny przez wyszukiwarki, a jedynie pro\u015bba o nierobienie tego. Robots.txt nie mo\u017ce zmusi\u0107 bota do przestrzegania jego zasad, a wi\u0119c tym samym z\u0142o\u015bliwe boty mog\u0105 zignorowa\u0107 zalecenia z tego pliku i zindeksowa\u0107 witryn\u0119 w swojej wyszukiwarce. Mo\u017cna por\u00f3wna\u0107 to do napisania \u201eProsz\u0119 nie wchodzi\u0107\u201d na lekko uchylonych drzwiach swojego domu.<\/p> <\/div>\n<\/div>\n\n

\n
\n \"czym \n <\/div>\n \n \n <\/div>\n\n
\n
\n

\u00a0<\/p>\n

Generalnie wyszukiwarki stosuj\u0105 si\u0119 ustawionych regu\u0142, dlatego te\u017c warto zadba\u0107 o plik robots.txt we w\u0142asnej witrynie. Poza tym, istniej\u0105 inne korzy\u015bci z tym zwi\u0105zane. Zalety dobrej organizacji tego pliku mo\u017cna w wi\u0119kszo\u015bci przypadk\u00f3w podzieli\u0107 na dwie g\u0142\u00f3wne kategorie:<\/p>\n