AWSは1クエリで4000件までしか取得できない

AmazonのAWSの書籍データベースを利用したWebサービスを作ろう!ということで、AWSをいじっていろいろと実験しました。
Webサービス側で検索やアクセスする度に、AWSにアクセスして商品データを引っ張ってきて、加工して出力ってかなり非効率的だし、検索性も悪いので、全部クロールしてデータベースにためることはできないかと、かなり無謀な実験をしたのですが・・・。

表題の通り、検索1クエリにつき4000件までしか取得できない仕様になっているようです。

そらそうだ。無制限だったらDB根こそぎコピーできちゃうもんね。

でも、検索性とか拡張性を考えると、クロールしてデータベースに溜め込みたい。何か良い方法はないものか・・・。

« 緯度経度から住所を取得するAPI「rgeocode.php」
» DoCoMo、au、SoftbankのGPSで位置情報をphpで取得する方法

Google AdSense

関連エントリー

  1. Google AJAX Language APIをPHPから叩いて翻訳する
  2. 「iKnow!」がAPIを公開!
  3. twitter API + PHP
  4. 緯度経度から住所を取得するAPI「rgeocode.php」
  5. skypeAPIでWebベースのサービスは作れない?

コメント投稿

(いままで、ここでコメントしたことがないときは、コメントを表示する前にこのブログのオーナーの承認が必要になることがあります。承認されるまではコメントは表示されません。そのときはしばらく待ってください。)

トラックバック

このエントリーのトラックバックURL:
http://mt.hiroyukiarai.jp/mt-tb.cgi/24

検索

Google AdSense

カテゴリー

Blog Parts

あわせて読みたいブログパーツ
フィードメーター - 日々是作譜
track feed