-
Path: news-archive.icm.edu.pl!news.gazeta.pl!newsfeed.pionier.net.pl!news.nask.pl!new
s.nask.org.pl!newsfeed.atman.pl!not-for-mail
From: igrek <...@...com>
Newsgroups: pl.comp.www
Subject: Google olewają robots.txt
Date: Wed, 21 Oct 2009 17:08:52 +0200
Organization: ATMAN
Lines: 17
Message-ID: <hbn7v3$pvq$1@node2.news.atman.pl>
NNTP-Posting-Host: chello089078171137.chello.pl
Mime-Version: 1.0
Content-Type: text/plain; charset=ISO-8859-2; format=flowed
Content-Transfer-Encoding: 8bit
X-Trace: node2.news.atman.pl 1256137508 26618 89.78.171.137 (21 Oct 2009 15:05:08
GMT)
X-Complaints-To: u...@a...pl
NNTP-Posting-Date: Wed, 21 Oct 2009 15:05:08 +0000 (UTC)
User-Agent: Thunderbird 2.0.0.23 (Macintosh/20090812)
Xref: news-archive.icm.edu.pl pl.comp.www:393975
[ ukryj nagłówki ]Ostatnio zauważyłem, że na jednej z moich stron robot googlowy się za
bardzo rozbestwił i włazi tam, gdzie nie powinien.
W robots.txt jest czarne na białym:
User-agent: *
Disallow: /styles/
Disallow: /images/
Disallow: /scripts/
...a google i tak ostatnio to olewają i czytają wszystko z tych
katalogów jak leci. Też tak macie?
--
igrek
Następne wpisy z tego wątku
- 21.10.09 18:12 HaWaN
- 21.10.09 19:28 igrek
- 21.10.09 19:47 Andrzej Adam Filip
- 22.10.09 09:28 Chuck
Najnowsze wątki z tej grupy
- Jakie znacie działające serwery grup dyskusyjnych?
- is it live this group at news.icm.edu.pl
- php, linki z nazwami a $_GET, SEO
- www polityka pl captcha
- dyktatura brudnego palucha
- www.znanylekarz.pl
- Czy pytanie o sczytywanie stron programami/skryptami to tu?
- Grupy webdevowe
- Jak wydrukować stronę?
- IIS, kilka witryn
- linki <a href="/strona.php"> (ze slashami)
- co rozszerza stronę??
- responsywny akapit <p>
- Czy istnieje jakiś emulator przeglądarek pod Mac'a?
- taka sama konfiguracja dla localhost i produkcji
Najnowsze wątki
- 2025-02-21 Warszawa => Key Account Manager IT <=
- 2025-02-21 Warszawa => Data Engineer (Tech Lead) <=
- 2025-02-21 Aliexpress zaczął oszukiwać na bezczelnego.
- 2025-02-21 Warszawa => System Architect (Java background) <=
- 2025-02-21 Kula w łeb
- 2025-02-21 Warszawa => System Architect (background deweloperski w Java) <=
- 2025-02-21 Warszawa => Solution Architect (Java background) <=
- 2025-02-21 Lublin => JavaScript / Node / Fullstack Developer <=
- 2025-02-21 Pawel S
- 2025-02-21 Warszawa => Key Account Manager (Usługi HR) <=
- 2025-02-21 Katowice => Senior Field Sales (system ERP) <=
- 2025-02-21 Chrzanów => Programista NodeJS <=
- 2025-02-21 Wrocław => Konsultant wdrożeniowy Comarch XL/Optima (Księgowość i
- 2025-02-21 Warszawa => Administrator Systemów Windows IT <=
- 2025-02-21 Wrocław => Specjalista ds. Sprzedaży (transport drogowy) <=
Jacy freelancerzy są najbardziej poszukiwani?
