ペイパーポスト (Pay per Post) とは、ブログの記事をい1本各ごとに報酬を支払うという仕組みによる、口コミマーケティングツールです。もちろん記事を書く人は報酬目当てで書くわけですから、ろくに調べたり使ったりせずに商品やサービスをほめる記事を書くわけです。また SEO 目的で、特定の URL にリンクを張ることが求められることが多いです。広告主としてはリンクを購入して PageRank を操作することと同等です。

そのため Google としては、ペイパーポストに対しては厳しい対応を取ってきましたが、今回は Google の日本法人自体がその「禁じ手」のペイパーポストに手を染めてしまったわけです。今回はサイバーエージェント子会社の CyberBuzz が使われたようで、すでに他の記事にもありますが、Google急上昇ワードランキング+ブログパーツ+CyberBuzzで Google 検索すると、多くのブログに書かれた記事があります。

渡辺隆広のサーチエンジン情報館(CNET Japan)の記事によると、GIGAZINE のこの記事もペイパーポスト広告なのだとか。確かに本文中に “Cyberbuzz” と書かれていても、広告だとは気づかずに読んでしまいますね。私たちはもつと恣意的な口コミマーケティング広告記事に敏感になるべきなのかもしれません。

TechCrunch の記事によれば、日本では米国におけるほどPayPerPostに対する風当たりは強くないとのこと。そのあたりで Google 日本法人の担当者も知らなかったのでしょうね。

グーグルは公式ブログの Google のマーケティング活動についてという記事で謝罪しています。

Google Japan では、製品を多くのユーザーに知ってもらうために、さまざまなプロモーション活動を実施しています。 今回、そのプロモーション活動の一部でブログを活用したことが、Google のサーチに関するガイドラインに違反することが判明し、このプロモーションに関しては中止しました。ご迷惑をかけた関係者各位とユーザーの皆さまにお詫びするとともに、再発防止に向けて、透明性の高いコミュニケーションに努めてまいります。

迅速な対応ですが、すでに書かれた記事はたくさんあり、リンクもたくさん張られていしまっています。PageRank への影響は不可避ですが、今後削除を依頼していくのか、検索アルゴリズムを調整していくのか、何らかの対応は避けられないようです。

ちなみに、Google 英語版のトップページ では、このような現象は起きないようです。とりあえず img0.gmodule.com ドメインを許可する設定にして問題なく見えるようになりました。ちなみに gmodules.com ドメインは Google が所有するドメインなのですが、いろいろなサブドメインがあって、iGoogle のテーマやガジェットの配布などで使われています。悪意のあるファイルが登録されて入り込む可能性も否定できないので、*.gmodules.com をすべて許可することは見送っています。

Microsoft の Yahoo 買収が実現していたら、この取引はなかったかもしれません。Google に大きく水を空けられた MSN Live Search の対抗策としては必須だったと思いますが。

一方で、日本でもgoo が Wikipedia の自然文検索を始めました。Wikipedia 限定ですが、そのような技術は多方面で研究されているようです。自然言語検索といえばかつてはジャストシステムなども取り組んでいましたが、ふたたび注目を集めることがあるのでしょうか。

あと、手塚治虫の iGoogle テーマ なんてものもあるんですね。これも楽しいデザインです。最近の Google はポータル化に力を入れていますね。これはどうも日本とか韓国とか、Yahoo に負けている国での傾向らしいですが。

でも手塚治虫ではなく、日比野克彦テーマ を設定してしまいました。

鉄腕アトムといえば、ハリウッドによる CG による映画化がようやく動き出したらしく 2009 年公開だそうです。以前は実写+CGともいわれていましたが、フル CG になるそうです。こちらも楽しみですね。題名が『アストロボーイ』なのはちょっと残念ですが。

すでにあるかもしれませんが、OpenSearch (を簡略化した MozSearch) の勉強も兼ねて一から作りました。ダウンロードして searchplugins フォルダに放り込むか、以下のリンクからインストールできます。

Live Search (jp) 画像検索を追加

ヤフー(JAPAN)に至っては、「次の条件に一致する情報は見つかりませんでした。」というメッセージが出て、検索キーワード自体が拒否されているとしか思えません。

一方、Live Search (MSN) では、初音ミクのパッケージ画像やイラストが多数表示されます。

削除またはフィルタリングされているのは明らかなので、単純に考えると初音ミクの権利者からのクレームだと思います。一部では電○の陰謀説も出ているようですが、どうなんでしょう。真相が明らかになることを望みます。

私は初音ミクに関しては、ニコニコ動画とか見ないし、同人イラスト的なもにも興味はありませんが、DTM として興味があります。あと技術的な観点から言えば、初音ミクのイメージは髪と服の色が特徴的なので、機械的にフィルタリングするのは簡単そうに思えます。

10月19日追記

どうやら、Yahoo、Google 両者の画像検索の欠点が浮き彫りなったようです。初音ミク以外にも、最近発売された CD やアーティスト名で検索すると似たような状態になります。つまり、画像検索に関しては通常のテキスト検索にくらべてクローラーの巡回頻度が少ないか、インデクサのアップデートの期間が長いため、画像検索データベース自体がかなり古いのだと思われます。

そういう意味では Live Search の画像検索はよい作りになっているか、「初音ミク」に関してはたまたま新鮮な画像が提供できたのだと思います。それにしても Google の画像検索のクセがよくわかるいい事例になりましたね。

この記事は Netcraft の統計を元に書かれていますが、こちらで、シェアだけでなくアクティブなサイト数も見ることができます。その値が衝撃的。

Netcraft: October 2007 Web Server Survey

これを見ると Google というウェブサーバが 9.76% も存在しています。これは Google のカスタム Linux 上で動作する独自の HTTP サーバのことでしょうが、それにしても多すぎます。1社で全世界のウェブサーバの1割を占めているのですから。素晴らしいというか、ちょっと恐ろしくなりますね。

昨年読んだ記事では Google のサーバ数は世界に数十万台ということなので、今は100万台を超えていてもおかしくありませんが、それを遙かに上回っている模様。Google が Gmailの増量ペースを加速とうニュースもありましたが、これだけのサーバがあるからこそ Gmail の容量を6Gにもできるわけですね。

アクセスしてみると、日本語で表示されますので、試しに日本語キーワードで検索してみました。すると……。

検索結果が全くメチャクチャで、「～のための検索結果」とか「展示」とか「ここに記載するのを書いてください」など、ところどころ日本語の表示もおかしいです。日本語キーワードは一文字ごとに分割されているようですね。まだ日本語キーワードは使い物にならないようです。

気を取り直して英語のキーワードで試してみましたが、複数キーワードになると途端に検索結果がおかしくなります。それに他のサイトと比べるとちょっと重いですね。イメージ検索とビデオ検索、ニュース、広告まで揃えているので、かなり意欲的に展開するようなのですが。まだβ版なので、今後の品質向上に期待したいところです。

かつて Google キラーとして注目された WiseNut ですが、このほどサービスを終了したそうです。WiseNut は 1999年に設立され、2002年3月に Looksmart に買収されました。その後は Looksmart 自体が身売りする状態でしたから、当然ながら検索エンジンの開発も継続できる状態ではなかったと思います。

WiseNut の技術的などんな特徴をもっていたのでしょうか。Google の PageRunk のようなリンク評価に加え、リンク元の文章の相関度を考慮していました。どういうことかというと、リンク元のアンカー文字列だけでなく、リンク周辺部分に書かれている文章が、検索キーワードとどれだけ関連性があるかどうかをリアルタイムに自動的に判断するというものです。

しかし、これに近い技術は現在の Google では実装されていると言われています。それ以上の独自性を出せなかったのが生き残れなかった原因でしょうか。

Buzzurl もすでに同じ対応を取っていますね。はてなブックマークも最近はスパム業者が増えてきていますので、どのような対策を取るか注目ですね。

昨日から始まった Google Shared Stuff は nofollow は使っていませんが直接のリンクではなく www.google.com のリダイレクタを使っていますね。

URL 短縮サービスの 5jp.net でも、すでに nofollow を導入していますが、あまりスパム登録は減ってないんですよね。スパム業者も気づいてないのかもしれませんが。

ヤフーではブログや個人サイト向けの広告商品について検討していたところで、ブレイナーへの出資を決めた理由については「コンテンツマッチを提供するプレーヤーは少なくその中で、独立しており、かつ高い技術を持っている企業だったため」と説明する。

今後提供するサービスの詳細は今のところ未定だが、ブレイナーでは「我々の強みは個人サイトやブログ。年内もしくは2008年初頭には具体的なことを話したい」と説明する。

これは、Google Adsense の Yahoo 版である YPN (Yahoo Publisher Network) に相当するものを日本で独自展開するとみてよいでしょう。

しかし買収・完全子会社化でないのはウノウなど他の出資者との兼ね合いかもしれませんが、ヤフーの本気度を測りかねてしまいます。ヤフーはバリューコマースとオーバーチュア日本法人をすでに買収しています。

また今回の子会社化は、本家 YPN を単純に日本語化してサービス投入しない・できない理由が想像できます。YPN はアメリカでもコンテンツマッチ度が低いという問題がありましたが、それを日本語でサービスできるように改善することが難しいか、技術力や人員が不足しているのではないかと考えられます。

そこでヤフーの経営陣としては YPN 日本語化を待たずにブレイナーの技術力で独自にマッチング広告を展開する決断をしたのだと思います。すでに独自サービスの実績があるので年内サービス開始も可能なのでしょう。オーバーチュアと連携すればかなりの広告が集まりそうですね。

Google Adsense の好敵手になれば、サイトのオーナーにとっても選択肢が増えて良い結果となるでしょうね。Microsoft はどうするのでしょうか。

ITmedia Newsの記事によると、自然言語検索エンジンの Powerset が一部のユーザに限定公開されたとのこと。

かねてから「Googleキラー」と噂されていた米Powersetが9月17日、テストサイト「Powerset Labs」を限定公開した。

Powersetは独自技術とPARC（XEROXパロアルト研究所）からライセンスを受けた技術を組み合わせて、単語やフレーズではなく文章でWebを検索する自然言語検索エンジンを開発している。同社の技術は現行の検索エンジンとは異なり、「Webページのすべての文章を読んで、その意味を抽出し、セマンティックインデックスを構築する」という。

Google 対抗の本命という触れ込みの検索エンジンベンチャーはいろいろありますが、その本命と言われるだけに注目が集まっているようです。一般公開は2008年ということですが、待てない人はメールアドレスを登録すれば招待待ちリストに登録されるとのことなので、私も登録してみました。気長に待ちたいと思います。もちろん英語にしか対応していないと思いますが。

Yahoo

いきなりですが現実的な選択肢です。Google に追い上げられているとはいえ、当面は Yahoo JAPAN がトップの座を守り続けることでしょう。ここにライブドアのトラフィックが加われば、2位以下をさらに引き離すことができます。

特に Yahoo のブログサービスはあまり繁盛していませんが、国内最大規模の livedoor blog は魅力的です。また、リスティング事業のJリスティングをオーバーチュアに統合できるほか、提携しているぽすれんの子会社化もありえます。また公衆無線サービスは、Yahoo BB の無線サービスに統合してシェアを不動のものにできるでしょう。

Google

スーパーエリート集団の Google が、(しかも日本の) livedoor を買うことはまず考えられないでしょう。強いて言えばデータセンターを買収する可能性はあるかもしれません。

楽天

楽天にとって、ライブドアを吸収することは理にかなっています。livedoor blog を楽天の商品を販売するチャネルに使うことができます。またベストリザーブを楽天トラベルに統合することで地位を固めることもできます。ライブドアギガメーラー未満の Infoseek メールも少しはマシにできるかもしれません。ただしライブドアはメールサービスを Gmail ベースに変更すると発表しています。

ダイナミックアドを開始し、モバイル検索を Fast と組んで自社開発するとした楽天は、Google に対抗していくと思われますが、技術的にはライブドアを買収してもメリットは少ないでしょう。

また、球団問題に端を発する対立から、ライブドア側からは受け入れがたいでしょうから、技術者が大量に辞めてしまうリスクがあります。

その他

金融事業から撤退し同じくネット事業にフォーカスする GMO や、カカクコムはポータルを欲しがるでしょうが、それぞれの時価総額は弥生の売却額にも達していません。意外ですね。ディーエヌエーは体力がありそうですが、ライブドアを欲しがるとは思えません。

エキサイトについては、むしろライブドアが買収する形になるでしょう。ポータル事業として生き残りをかけるライブドアがエキサイトを買収して、名前をエキサイトに変えるというのは良いかもしれませんが、相乗効果はあまりないでしょうし面白くもありません。

あとはポータル事業を強化したい ISP が買収を模索する可能性はあります。具体的にはニフティ、ソネット、KDDI あたりですが、ライブドアを丸ごと買えそうなのは KDDI くらいでしょうか。あとは、ライブドアがはてなを買収したら面白いなあと個人的には思うのですが。

実際にどのように使うかと HTTP のレスポンスヘッダ内にて、次のように出力します。

文書をインデックスさせたくない場合

X-Robots-Tag: noindex

文書をキャッシュさせず、スニペットも表示しない（インデックスはされる）

X-Robots-Tag: noarchive, nosnippet

指定期間後にインデックスから削除させたい時

X-Robots-Tag: unavailable_after: 27 Jul 2007 19:30:00 GMT

これをどこで指定するかというと、たとえば Apache ならば .htaccess ファイルでの指定が考えられます。

<Files "hogehoge.pdf">
Header set X-Robots-Tag "noarchive, nosnippet"
</Files>

HTTP ヘッダを確認に X-Robots-Tag: noarchive, nosnippet が付加されるはずです。mod_headers モジュールが有効になっている必要がありますが、たいていは有効になっているでしょう。

米マイクロソフトとヤフーが合併を含む提携交渉を進めていることが4日明らかになった。インターネット事業で急成長するグーグルに共同で対抗する狙い。実現すれば米検索サービスでのシェアは約4割と一大勢力となり、グーグルの独走が続いてきたネット業界の勢力図は大きく塗り替わる。

日本ではヤフーが強いですが、アメリカでは Google が脅威となっています。だから連合と言うことなのかも入れませんが、MS と Yahoo では企業文化も違いますし、単純な合併は考えにくいでしょう。それよりも AOL や eBay あたりを狙った方がよいと思うのですが。

追記

その後、やはり話はなくなりましたね。

たとえば PHP や WordPress の関数名を検索したときに、Yahoo だとかなりの確率で jp2.php.net のマニュアルや、wptags.com のリファレンスを表示してくれます。一方で、 Google でそれらのサイトは大抵 3位以下になるか、ミラーサイトが表示されることもあります。また www.php.net の英語マニュアルは表示されても、jp2.php.net のマニュアルが表示されないこともあります。（日本語サイトを対象にで検索しても。）

PHP ユーザの方はぜひ Yahoo を試してみてください。

この「キャッシュ」はユーザごとに登録したときに取得される内容が保存されますので、ブックマークしたタイミングによって各ユーザの「キャッシュ」は異なると思います。ここまで来るともはやキャッシュと呼ぶのはどうかと思います。「クリップ」といか「アーカイブ」に近いものがあります。記事中の画像などは保存されません。また「キャッシュ」自体は非公開なので、Livemark のようなものではありません。

また、「キャッシュ」に保存された記事の内容は全文検索できるそうなので、一定期間後に消えてしまうニュースサイトの記事を保存しておくには便利ですね。ただ、記事を保存するためのブックマークレットが「はてなブックマーク」と比べて使いづらい印象です。ポップアップでなく、同一画面上でブックマークして欲しいですね。

さて、今回のサービスは米 Yahoo との共同開発だそうですが、そうなると気になるのは Yahoo 傘下の deli.cio.us の日本語版は登場しないことになりそうなのですが……。まあ日本ではヤフーは勝ち組なので Yahoo ブランドを冠した方が圧倒的に有利なのでしょう。

また ITpro の記事によれば、robots.txt ファイルにサイトマップの場所を記述して、クローラにサイトマップファイルを知らせることができるようになったようです。

米Google，米Yahoo!，米Microsoftなどが検索エンジンの向上に向けて結成した団体Sitemaps.orgは，「Sitemap（ver.0.90）」プロトコルを強化した。Web作成者はrobots.txtファイルを使って，サイト内のクロール（インデックス）対象を指定できるという。（略） robots.txtファイルに「Sitemap: http://www.example.com/sitemap.xml」という1行を追加すればよい。「http://www.example.com/」部分には実際のURLを「http://」も含めて入力する。

追記

また CNET Japan の記事によれば、Ask.com もこの robots.txt の方式でサイトマップに対応するとのこと。日本の Ask.jp に関係するかどうかは分かりませんし、いまのところ影響も微々たるものだと思いますが、標準化されていくという点では間違いないようです。

しかし氏名は完全医一致検索でなければなりません。姓だけの検索やフリガナからの検索はできません。まあこれはよしとしましょう。

使い物にならないと感じるのは、該当する医師名で同姓同名があったときでも、登録年しか判断材料が表示されないので、どのデータが該当するのかをわかりません。また、すでに死亡した医師や結婚で姓が変わった医師が旧姓のまま登録されており、新しい姓では該当しないというケースも報告されています。これでは検索してデータがないから無資格者とは言えませんし、検索結果があっても同姓同名かもしれないのです。

データベースが正しく現状を反映していないことと、得られる検索結果では、利用者が求めている情報の一部しか得られないのは、問題だと思います。医療と行政のシステムはもっと頑張らなければなりません。

DoKoDa は 1996 年に開始した検索エンジンです。2000 年よりも前、1996年頃、初めてサイトを作っていろいろなサイトに登録した中に DoKoDa がありました。そのころは DOKODA～ というような綴りで、検索エンジンとして面白い名前だなあと思ったものです。

基本的にはキーワード検索中心で、2001 年頃から広告を販売して検索結果に表示するということをやっていたはずですが、時代の波には乗れなかったのでしょうね。