20070803

Yahoo! Japanのモバイル版Yahoo!検索の検索エンジン用ロボットである"Y!J-SRD"にはrobots.txtのCrawl-delayによるアクセス間隔の設定は効かないらしい． あと，SoftBank携帯のUser-Agent名を名乗らずに"KDDI-CA23 UP.Browser (compatible; Y!J-SRD/1.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-27.html)“と名乗るのは何故?

“www.learnjapan.org”. 漢字仮名混じりの日本語のウェブ・ページの内容をローマ字，ひらがな，カタカナ，ひらがな・カタカナに変換してくれる． 漢字はあまり読めないけど日本語をある程度理解できるという人1には便利かも… ...