| PARSER |

faq	авторы	документация		в действии	куда говорить
жаргон		скачать		примеры	форум

про robots.txt

egr | egr@yandex.ru

09.11.2001 11:42

см. http://www.citforum.ru/internet/search/art_1.shtml

<< Вернуться к списку сообщений

robots, Sanja [07.11 20:03]
- или они могут прикинуться любым броузером! (-), Антоний [08.11 11:06]
  - Ой извините! Я сказал тоже самое что и Misha!!! :о) (-), Антоний [08.11 11:10]
- Извращение это... У большинства этих прог есть возможность делать Identify as ... (-), Misha [07.11 20:33]
  - _ответ, Sanja [08.11 11:36]
    - Зачем людей обижать ?, Илья [08.11 23:27]
    - _ответ, Dmitri [08.11 15:25]
    - Может быть, но по моему..., Misha [08.11 15:22]
      - Re: Может быть, но по моему..., Sanja [08.11 16:39]
        
        _ответ, Elis═aka═Mikhail [09.11 06:47]
        
        про robots.txt, egr [09.11 11:42]

E-mail: mailbox@parser.ru

Copyright © 1997-2001

Студия Артемия Лебедева