namazu-ml(ring)

[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

About robots.txt and exclude documents

御無沙汰しております、新村＠浜松在住です。
# 間違えて前のアドレスにメールを送ってしまいました。

robots.txt によるファイルの除外について教えて下さい。
現在 Namazu Version: 1.3.0.11 にて検索サイトを構築しております。
インデックスされては困るディレクトリがあるので robots.txt と 
Makefile の該当部分を設定し mknmz -e /path/to/directory としたとこ
ろ、該当ファイルがインデックスされてしまいます。

Namazu のドキュメントを読むと、これらの設定をするとファイルを除外
できると書かれていますが、どうもやりかたが悪いのか、うまく動いてく
れません。
どのようにしたらうまく動くようになるのか、アドバイスを頂けたら大変
助かります。
どうぞ宜しくお願いいたします。

OS: FreeBSD 3.3-RELEASE

[Append]
Date: Thu Feb 17 00:56:57 2000
Added   Files: 0 files
Deleted Files: 0 files
Updated Files: 3 files
Total   Files: 77 files
Size: 19,956 bytes
Keywords: 132 words
Wakati: /usr/local/bin/kakasi -ieuc -oeuc -w
Perl Version: 5.00503
Namazu Version: 1.3.0.11
System: freebsd
Time: 7 sec.

[ robots.txt ]
User-agent: *
Disallow: /nonwww/

[ Makefile ]
## Robots.txt
OPT_HTDOCUMENT_ROOT     = /home/www/data
OPT_HTDOCUMENT_ROOT_URL_PREFIX  = http://www.foo.co.jp/
OPT_ROBOTS_EXCLUDE_URLS = ''

--
shin