マッシュアップページを作ってみるその6

前回、の最後で以下のように書いてましたが、とりあえず作ってみました。

次回は、URLを入力して、それぞれの検索エンジンで何位になってるのかを表示させるところまでを実装しようと思っています。

とりあえずは、なんとなくそれらしきものが出来ましたが、ちょっとコードがショボ過ぎるんで、ソースは載せないでおきますが、一応、ソース一式は置いておきます。

Google, Yahoo!, Live Searchを同時検索して順位を表示するページ

ソース一式 [3search_xajax20080128.zip]

当初の目標は、初回にあったように、GoogleとYahoo!,live Searchの検索結果から検索順位を表示するってのです。

こちらは、どちらかというとSEOツール的な意味合いが強い。それとは別に、同時検索系のマッシュアップサイトで、割と検索サイトの上位に出るのはここいら辺。

今回、検索順位表示までやってみたけれど、イマイチ微妙。なんで、ちょっとオマケで最近話題に出ていた百度(Baidu)と同時検索を作ってみようかなぁ・・・って思ってたら、すでにGYM Searchでやってました。

という事で、「ファーストインプレッション」みたいなエントリー書こうと思ったけど、その辺は諸先輩方にお任せして、気になるbaiduの検索結果を他の検索エンジンと比較してみる事にしてみた。

[ 百度（Baidu）ファーストハッキング ::: creazy photograph ]

それは、さておき、Google,Yahoo!,Baiduの同時検索ページを作成してみました。金、土辺り手をつけられなかったんで、昨日やっつけで作ってみました。こちらは、一応検索クラスのソースを公開しておきます。 Googleのときのように、HTML解析しています。

<?php
require_once 'WebSearch.php';
require_once 'WebResult.php';
require_once 'WebResultSet.php';

/**
 * Baidu検索クラス
 */
class BaiduSearch extends WebSearch
{
	/**
	 * Baiduの場合のキャッシュPrefix
	 */
	protected $cachePrefix = "baidu";

/**
	 * Baidu
	 */
	protected $name = "Baidu";

/**
	 * Baiduを検索する
	 */
	protected function searchCore($query, $offset, $count)
	{
		 // 実際にBaiduを検索してしまう
		$url ='http://www.baidu.jp/s?';
		$url.='wd='.urlencode($query);
		$url.='&rn=' . $count . '&ie=utf-8&tn=baidujp';
		if($offset) {
			$url .= '&pn='.$offset;
		}

// DOMDocumentを作る
		$html = file_get_contents($url);

/**
		 * Parse the HTML source.
		 */
		require_once('./HTMLParser.class.php');
		$parser = new HTMLParser;
		$parser->setRuleFile('./xhtml1-transitional_dtd.inc.php');
		$parser->setRoot('html', array('lang' => 'ja'));
		$parser->setGenericParent('body');

$parser->parse($html);
		return $parser->dump();
	}
	
	/**
	 * 検索結果を整形して返す
	 */
	protected function getResult($data)
	{
		// DOMDocumentを生成
		$doc = new DOMdocument("1.0","UTF-8");

// Baidu検索結果取得(クエリには第一引数を)。そのhtmlを読ませる
		$doc->loadHTML($data);

// DOMXPathインスタンスを生成してDOMDocumentを関連づける
		$xpath = new DOMXPath($doc);

// 検索結果生成
		$webResultSet = new WebResultSet();
		// XPath式を評価する
		// 総件数取得
		$entries = $xpath->query("//h1/span");
		$countvar = array();
		$rcd = mbereg('検索した結果、関連ウェブは(約|)((\d|,)+)件', $entries->item(0)->nodeValue, $countvar);
		$count = str_replace(',','', $countvar[2]);
		$webResultSet->count = (int)($count);
		
		// 検索結果
		$entries = $xpath->query("//table[@class='n']/tr/td");

foreach($entries as $nodelist) {
			// Title
			$title = "";
			$titlepath = $xpath->query("font[@size='3']", $nodelist);
			if($titlepath->item(0)->childNodes) {
				$title = $titlepath->item(0)->nodeValue;
			}
			else {
			}
			
			// URL
			$url = "";
			$urlpath = $xpath->query("font[@size='3']/a/@href", $nodelist);
			if($urlpath->item(0)->childNodes) {
				$url = $urlpath->item(0)->nodeValue;
			}
			else {
			}

$webResult = new WebResult($title, $url);
			
			// 概要
			$descpath = $xpath->query("font[@size='-1']", $nodelist);
			$description = "";
			$childNodes = $descpath->item(0)->childNodes;
			if($childNodes) {
				foreach($childNodes as $descNode) {
					if($descNode->nodeName == 'span' || $descNode->nodeName == 'a') {
					}
					else {
						$description .= $descNode->nodeValue;
					}
				}
			}
			
			$webResult->description = $description;

// BaiduのキャッシュURL
			if($descpath->length) {
				$cachepath = $xpath->query("a[@class='m']/@href", $descpath->item(0));
				if($cachepath->length) {
					$cacheUrl = $cachepath->item(0)->nodeValue;
					$webResult->cacheUrl = $cacheUrl;
				}
			}

// 検索結果を収納
			array_push($webResultSet->result, $webResult);
		}

return $webResultSet;
	}
}
?>

で、↓がそのページです。最初は、Google, Yahoo!, Live Searchと合わせて、4列表示にしようと思ったんだけれど、しっくりこなかったんで諦めて、別ページにしました。

Google, Yahoo!, 百度(Baidu)で同時検索するページ

ソース一式 [3search_xajax_baidu.zip]

今後の展望ですが、これまでGoogleなんかをHTML解析してたりしてた都合で、サーバー側で処理させてたんだけれど、これくらいの事ならブラウザ側で処理してもいいかなぁとか、 Google Ajax Search APIを今後のために使っておこうかなぁとかいうのもあり、JQuery辺りを使って同じ様なのを作ってみようかなと思ってる。
それと平行して、公開している同時検索の体裁を整えて、それなりにサービスとして公開できるレベルにしようかなとも思ってる。こちらは、現行のとは別URLにする予定。あれこれ、バグがあるのも判ってるが現状のは放置されると思う。

←押すと一票入ります。