Robots.txt Checker Robots.txt files (often erroneously called robot.txt, in singular) are created by webmasters to mark (disallow) files and directories of a web site that search engine spiders (and other types of robots) should not access. This robots.txt checker is a "validator" that analyzes the syntax of a robots.txt file to see if its format is valid as established by Robot Exclusion Standard
タグ
- すべて
- .emacs (12)
- .zshrc (3)
- Anime (13)
- Autotools (1)
- BTS (2)
- BookSupport (7)
- Bug (9)
- Bugzilla (9)
- Bugzilla-jp (6)
- C (37)
- C++ (14)
- CHISE (2)
- CMS (3)
- CP932 (8)
- CSS (150)
- CSS2.1 (2)
- CSS3 (9)
- CVS (14)
- Chrono Cross (20)
- Chrono Trigger (6)
- Coding style (10)
- Color (3)
- Copyleft (10)
- D (8)
- DOM (71)
- DOM Core (8)
- DOM Events (12)
- DOM HTML (3)
- DOM Load and Save (2)
- DOM Range (5)
- DOM Style (4)
- DOM3 (6)
- DSSSL (1)
- DTD (9)
- Data structure (1)
- Database (7)
- David Heinemeier Hansson (1)
- Design pattern (7)
- DocBook (2)
- Document oriented (5)
- Document type declaration (5)
- E-mail (6)
- E4X (2)
- ECMAScript (35)
- Education (1)
- Emacspeak (3)
- Erlang (1)
- Eshell (4)
- FAQ (37)
- FOAF (2)
- FileSystem (2)
- Final Fantasy (29)
- Final Fantasy 2 (1)
- Final Fantasy 4 (1)
- Final Fantasy 5 (5)
- Final Fantasy 6 (2)
- Final Fantasy 7 (7)
- Final Fantasy 8 (5)
- Final Fantasy9 (3)
- Firefox Add-on (72)
- Firefox子 (32)
- FizzBuzz (6)
- FontEditor (4)
- Functional programming (4)
- GIMP (4)
- GNU (8)
- GNU Project (5)
- GPL (18)
- GTK+ (8)
- Game music (1)
- Gecko (7)
- Git (8)
- HP (5)
- HTML (178)
- HTPC (1)
- HTTP (19)
- IE (10)
- IE6 (6)
- IE7 (3)
- ISO-HTML (13)
- ImageMagick (3)
- Input method (9)
- JIS X 0213 (20)
- JSON (1)
- JavaScript (194)
- LGPL (1)
- Link (43)
- MPL (5)
- MUA (2)
- MathML (4)
- Mew (6)
- Migemo (7)
- Mozilla Add-ons (5)
- NICOLA (11)
- NiGHTS (5)
- Nintendo (6)
- Opera-tan (12)
- PC (2)
- PHP (3)
- PageRank (1)
- Parser (4)
- Parser generator (9)
- Paul Graham (3)
- Perfume (1)
- Perl (38)
- PostgreSQL (2)
- PyXPCOM (2)
- Q&A (10)
- RFC (21)
- RMS (1)
- Racc (3)
- Ruby on Rails (14)
- SAX (3)
- SEO (1)
- SGF (2)
- SGML (17)
- SICP (1)
- SKK (34)
- SMTP (1)
- SQL (3)
- STL (2)
- Sarah Kid Zeal (8)
- Search (37)
- SearchEngine (1)
- Security (29)
- Shift_JIS (8)
- SourceForge.JP (1)
- SpiderMonkey (2)
- TV (1)
- TeX (16)
- TerminalEmulator (1)
- Thunderbird子 (2)
- Tips (42)
- Tk (1)
- UI (7)
- URI (29)
- Unicode (40)
- Usability (15)
- Userstyle (20)
- VNI (1)
- VOCALOID (18)
- Validator (6)
- Version control (25)
- W3C-DTF (7)
- WHATWG (6)
- Web 2.0 (2)
- Web browser (2)
- Wii (8)
- WikiEngine (2)
- WikiSyntax (2)
- Windows (14)
- Wnn (15)
- X Window System (9)
- XForms (2)
- XHTML (44)
- XHTML2 (6)
- XML (75)
- XML-RPC (2)
- XMLHttpRequest (7)
- XPCOM (26)
- XPath (29)
- XSLT (35)
- XSS (2)
- XUL (66)
- XULRunner (3)
- Xenogears (5)
- YARV (4)
- YawarakaTank (4)
- YouTube (1)
- accessibility (28)
- algorithm (36)
- anthy (12)
- apache (3)
- arch (1)
- atom (5)
- authentication (1)
- awk (2)
- badknowhow (2)
- banner (29)
- bash (8)
- book (57)
- bookmarklet (14)
- bug report (10)
- canna (11)
- cannadic (1)
- chasen (2)
- chess (1)
- common lisp (8)
- computer game (114)
- computer shogi (31)
- configure (1)
- copyright (38)
- coroutine (5)
- datetime (13)
- debian (36)
- debug (2)
- eev (3)
- emacs (180)
- emacs lisp (34)
- evolution (6)
- firefox (209)
- font (82)
- game (9)
- gauche (10)
- gentoo (1)
- ghibli (2)
- glib (3)
- glossary (15)
- gnash (2)
- gnome (3)
- goodwrapper (1)
- google (7)
- greasemonkey (31)
- haskell (13)
- hatenacinnamon (8)
- headphone girl (3)
- herelink (8)
- hona-tan (4)
- iceweasel (9)
- index (1)
- interview (17)
- iptables (2)
- java (3)
- jigdo (3)
- joke (42)
- jscript (4)
- kakasi (4)
- keyboard (28)
- kinput (2)
- ksmiracle (6)
- lex (2)
- library (40)
- license (50)
- linux (10)
- lisp (55)
- log (1)
- lyric (4)
- mac (2)
- mail magazine (4)
- make (1)
- manual (22)
- markdown (5)
- markup (65)
- markup guide (18)
- meadow (7)
- memo (15)
- metadata (20)
- mozilla (119)
- music (27)
- namazu (2)
- network programming (7)
- nkf (1)
- non-free (1)
- object oriented (17)
- on-chan (4)
- oneliner (4)
- opera (20)
- password (1)
- plagger (3)
- programming (35)
- programming language (5)
- prolog (1)
- prototype.js (6)
- proximodo (1)
- proxomitron (2)
- proxy (2)
- pseudo science (4)
- psgml (6)
- pubdic+ (4)
- puseud science (1)
- python (100)
- p要素 (4)
- questions (5)
- ranking (5)
- referrer (4)
- regexp (14)
- reversi (5)
- robots.txt (1)
- rss (3)
- ruby (163)
- ruby-chan (4)
- ruby要素 (7)
- scheme (20)
- science (14)
- screenshot (1)
- sj3 (2)
- sl (4)
- spam (2)
- specification (71)
- sqlite (4)
- squeak (1)
- subversion (10)
- sumibi (1)
- supercell (14)
- tDiary (2)
- tamago (3)
- tea (1)
- temp (17)
- test (3)
- tetris (9)
- thunderbird (8)
- trackback (5)
- transfer protocol (1)
- trie (5)
- tropy (2)
- tsundere (1)
- ttyrec (5)
- tunderbird (1)
- ubuntu (1)
- uim (3)
- ukgk (2)
- userChrome.js (9)
- userscript (56)
- uuid (4)
- venkman (4)
- vi (8)
- wallpaper (27)
- web (1)
- web design (24)
- web publishing (3)
- web service (4)
- webfeed (11)
- why (12)
- wiki (12)
- xfce (1)
- xpointer (2)
- xyzzy (3)
- yacc (4)
- yaml (5)
- zlib (3)
- zsh (18)
- 「正しい」 (5)
- あとで消す (1)
- かな漢字変換エンジン (2)
- かな漢字変換辞書 (1)
- くはがたツマミ (6)
- これはひどい (1)
- たこルカさん (2)
- ついったん (4)
- どぎゃーん (6)
- ねこ (18)
- のあ&あやの (17)
- はてな (83)
- はてなちゃん (20)
- はてなやおい (7)
- ふりがな (11)
- やはらか戦車 (1)
- インライン要素 (9)
- ウジハト (7)
- オンライン辞書 (2)
- キッドに刺され隊 (4)
- コンピュータ囲碁 (12)
- コンピュータ麻雀 (7)
- ドット絵 (5)
- ブロックレヴェル要素 (9)
- マイクロWeb日記 (4)
- メガネ男子 (1)
- メーリングリスト (9)
- リンク切れ (179)
- リンク集 (108)
- ローマ字 (14)
- 三月八日 (1)
- 三浦つとむ (3)
- 三浦文法 (1)
- 三輪士郎 (2)
- 互換性 (7)
- 人工知能 (17)
- 伊藤さん (7)
- 光田康典 (5)
- 再帰 (1)
- 初音ミク (16)
- 利用規約 (1)
- 加藤正人 (2)
- 品詞 (7)
- 囲碁 (12)
- 国語 (22)
- 字句解析 (6)
- 字書 (1)
- 将棋 (36)
- 小林オニキス (1)
- 小説 (10)
- 巡音ルカ (3)
- 市川拓司 (2)
- 形態素解析 (3)
- 数学 (5)
- 数学ガール (1)
- 文字コード (106)
- 文法 (7)
- 方言 (6)
- 日本語 (161)
- 日本語入力 (118)
- 日本語情報処理 (7)
- 時枝文法 (1)
- 時枝誠記 (4)
- 柏崎櫻花 (3)
- 検索結果 (6)
- 構文解析 (1)
- 正かなで書く理由 (25)
- 正字 (1)
- 正字正かな (14)
- 正字正かなの「正」 (3)
- 歴史的仮名遣 (86)
- 海腹川背 (2)
- 漢字 (158)
- 漢字表 (21)
- 漫画 (23)
- 猫耳 (14)
- 現代仮名遣い (1)
- 画像 (4)
- 異体字 (2)
- 眼鏡っ娘 (28)
- 福田恆存 (1)
- 絵 (101)
- 自由ソフトウェア (7)
- 臺灣 (1)
- 英語 (15)
- 言語過程説 (1)
- 辞書 (16)
- 邦訳 (1)
- 闇黒日記 (8)
- 電子テキスト (27)
- 青木峰郎 (3)
- 青空文庫 (3)
- 高林哲 (1)
- 麻雀 (17)
- firefox (209)
- JavaScript (194)
- emacs (180)
- リンク切れ (179)
- HTML (178)
- ruby (163)
- 日本語 (161)
- 漢字 (158)
- CSS (150)
- mozilla (119)
robots.txtに関するmhrsのブックマーク (1)
-
mhrs 2006/10/28
robots.txtの文法チェックをして呉れるらしい。via http://blog.livedoor.jp/dankogai/archives/50672113.html- robots.txt
- Validator
リンク -
1
公式Twitter
- @HatenaBookmark
リリース、障害情報などのサービスのお知らせ
- @hatebu
最新の人気エントリーの配信
処理を実行中です
キーボードショートカット一覧
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
設定を変更しましたx