470
2
秋元@サイボウズラボ・プログラマー・ブログ: GoogleがHTMLフォームの送信先もインデックスすると発表
http://labs.cybozu.co.jp/blog/akky/archives/2008/04/google-goes-to-dee... 本文へ
（本文から引用）
張られているリンクをより多く見つける目的で、GooglebotにHTML Formを送信させて出てきたページもクロールさせる、という発表があった。
JavascriptやFlashの中から他ページへのリンクを抽出するというのは既に実施していて、今回はそれをページ上の入力フォームにも拡大するものだということ。いわゆるディープウェブ、見えないウェブといわれる領域への進出だ。
クロールされるフォームは以下のようなものに限定されるようだ。
GETメソッドであることrobot.txtなどで除外指定されていないことpasswordフィールドを持たないことuser, id, accountなどのフィールドを持たないこと
これらを満たすフォームに対して、クローラはいくつか適当な文字を入れてフォームを実行し、その結果新しいリンクが現れたらその先もクロール対象にする、ということ。
この方法で見つかったリンクはこれまでのPageRank計算には加算されず、クロール対象をより広げるために使われる。
この機能強化の影響だが、まずジェネレータ系や検索機能を持つサイトで、サブミットしないと情報が出てこなかったサイトで、よりGoogleの結果が増えそう...
この記事をクリップしたユーザー一覧
-
monmonさん 2008/04/13 00:03
> クロールされるフォームは以下のようなものに限定されるようだ。
>
> * GETメソッドであること
> * robot.txtなどで除外指定されていないこと
> * passwordフィールドを持たないこと
> * user, id, accountなどのフィールドを持たないこと
>
> これらを満たすフォームに対して、クローラはいくつか適当な文字を入れてフォームを実行し、その結果新しいリンクが現れたらその先もクロール対象にする、ということ。
googleはこんなところにもくるのか
みんなのおすすめ商品（Amazon.co.jp）
|
|
|
|
|---|---|---|---|
機動戦士ガンダム THE ORIGIN (19) ソロモン編・前67人がクリックしました
著者：安彦 良和 |
KAT-TUNライブ・ドキュメント・フォトブック“BREAK the RECORDS"30人がクリックしました 出版社: 角川グループパブリッシング |
おおきく振りかぶって Vol.12 (アフタヌーンKC)60人がクリックしました
著者：ひぐち アサ |
他にもこんなクリップがオススメ
-
高木浩光＠自宅の日記 - 辻野晃一郎製品企画本部長の発言は本当なのか、グーグル株式会社に電話で確認した 本文へ> 消費者センターが本当にそういう仕事を引き受けているのだろうか。たいへん疑わしいので、東京都消費生活部に電話し、「このような報道が出ているが、消費生活センターや行政の窓口が、本当にそのような対応をしてるのか？」と問い合わせたところ、東京都消費生活総合センターから回答の電話があった。
>
> それによると、「代理で画像を私どもが確認するということはやっておりません。」とのことである。
>
> したがって、グーグル株式会社の辻野晃一郎製品企画本部長の「消費者センターや地域の行政窓口に連絡し、代理で画像を確認してもらった上で、グーグルに連絡を」などという指示に従わないよう、注意する必要がある。
うわー。これはひどいな。
えぇーーーーーーーーーーー最後電話切ったーーーーーーーー -
_ [調] 止まっているエスカレータを歩くとめまいがする件 本文へ エスカレータ
-
地図Ｚ::簡単に地図を作成できるサイト 本文へ地図に道順を書いて送ったり貼ったりできる便利ツール
1303同じサイトでクリップされている記事
-
秋元@サイボウズラボ・プログラマー・ブログ: Google Code Search のアレな活用法が続々と 本文へ『さっそく色々な「ヤバイ」指摘』
-
Kazuho@Cybozu Labs: Ajax な HTML ページのソースコードを表示する 本文へ
-
秋元@サイボウズラボ・プログラマー・ブログ: mowser終了。創業者魂の叫び「モバイルなんか流行んねーよ!」 本文へ> 家族や友人に数十万の借金があり、全部のクレジットカードは限度額いっぱい(しかも全部回収されそう)、もう一枚小切手が不渡りになったらアパートも維持できず、車は2回抵当に入ってて、電気は遮断、携帯電話も切られ、固定電話も止まった。今週末はバターで炒めたマカロニを食いながら過払いのPayPalデポジットが返って来るのを待つことになりそうだ。
この実情酷過ぎるだろう
