-
Path: news-archive.icm.edu.pl!news.gazeta.pl!newsfeed.pionier.net.pl!news.ds.pg.gda.p
l!not-for-mail
From: HaWaN <H...@g...com>
Newsgroups: pl.comp.www
Subject: Re: Google olewają robots.txt
Date: Wed, 21 Oct 2009 20:12:08 +0200
Organization: SKOS PG
Lines: 18
Message-ID: <hbnisk$adp$1@news.ds.pg.gda.pl>
References: <hbn7v3$pvq$1@node2.news.atman.pl>
NNTP-Posting-Host: masterroot.ds.pg.gda.pl
Mime-Version: 1.0
Content-Type: text/plain; charset=ISO-8859-2; format=flowed
Content-Transfer-Encoding: 8bit
X-Trace: news.ds.pg.gda.pl 1256148692 10681 153.19.209.197 (21 Oct 2009 18:11:32 GMT)
X-Complaints-To: a...@d...pg.gda.pl
NNTP-Posting-Date: Wed, 21 Oct 2009 18:11:32 +0000 (UTC)
User-Agent: Thunderbird 2.0.0.23 (Windows/20090812)
In-Reply-To: <hbn7v3$pvq$1@node2.news.atman.pl>
Xref: news-archive.icm.edu.pl pl.comp.www:393977
[ ukryj nagłówki ]igrek pisze:
> Ostatnio zauważyłem, że na jednej z moich stron robot googlowy się za
> bardzo rozbestwił i włazi tam, gdzie nie powinien.
>
> W robots.txt jest czarne na białym:
> User-agent: *
> Disallow: /styles/
> Disallow: /images/
> Disallow: /scripts/
>
> ...a google i tak ostatnio to olewają i czytają wszystko z tych
> katalogów jak leci. Też tak macie?
>
>
https://www.google.com/webmasters/tools/
przetestuj plik robots.txt na stronie google :)
Konfiguracja witryny -> Dostęp dla robotów (musisz mieć konto google)
Następne wpisy z tego wątku
- 21.10.09 19:28 igrek
- 21.10.09 19:47 Andrzej Adam Filip
- 22.10.09 09:28 Chuck
Najnowsze wątki z tej grupy
- Jakie znacie działające serwery grup dyskusyjnych?
- is it live this group at news.icm.edu.pl
- php, linki z nazwami a $_GET, SEO
- www polityka pl captcha
- dyktatura brudnego palucha
- www.znanylekarz.pl
- Czy pytanie o sczytywanie stron programami/skryptami to tu?
- Grupy webdevowe
- Jak wydrukować stronę?
- IIS, kilka witryn
- linki <a href="/strona.php"> (ze slashami)
- co rozszerza stronę??
- responsywny akapit <p>
- Czy istnieje jakiś emulator przeglądarek pod Mac'a?
- taka sama konfiguracja dla localhost i produkcji
Najnowsze wątki
- 2024-12-12 Warszawa => Administrator Bezpieczeństwa IT <=
- 2024-12-12 Ostrów Wielkopolski => Trener zespołu sprzedaży Call Center <=
- 2024-12-12 Kraków => Key Account Manager <=
- 2024-12-11 SEP 1 kV E
- 2024-12-11 DNS restrictions are on
- 2024-12-11 wielkie bu
- 2024-12-11 Białystok => Inżynier bezpieczeństwa aplikacji <=
- 2024-12-11 Aku LiPo źródło dostaw - ktoś poleci ?
- 2024-12-11 Warszawa => Specjalista Bezpieczeństwa Informacji <=
- 2024-12-11 Wrocław => Application Security Engineer <=
- 2024-12-11 Warszawa => Analyst in the Trade Development department (experience wi
- 2024-12-11 Lublin => Programista Delphi <=
- 2024-12-11 Motodziennik #305 Nowy ELEKTRYK za 350 złotych miesięcznie? Kreatywne kredytowanie problemów
- 2024-12-11 Warszawa => Spedytor Międzynarodowy <=
- 2024-12-11 Katowice => Key Account Manager (ERP) <=