For Want Of A Better Word

【Googleトレンド】【Casperjs】急上昇中キーワードをスクレイピングで取得 – (4) Casper動くもGoogleトレンドのバグ?にはまる

      2015/04/19

casperjsで値を取るため

念のためもう一回埋め込み用のタグからURLを確認・取得してブラウザから打ち込んだらデータが取れたので、あれ?やった?と思ってcasperjsで実行してみたら。。

エラーが検出されました
割り当ての上限に達しています。しばらくしてからもう一度お試しください。

こんな事いわれたよ。Googleさんにこんな事言われたの初めて。
バッチからはだめなんでしょうか?ユーザーエージェントの問題でしょうか?…

ユーザーエージェント…もしやと思って設定してみたけど
だめだった。。

一晩なやんで、もう一回調べたら下記のリンクを発見。

「理由はわからないのですが、エラーメッセージが出た場合は、いったん Google のトップページを開いてみると良いようです。」
http://answers.microsoft.com/ja-jp/ie/forum/ie10-windows_8/google%E3%83%88%E3%83%AC%E3%83%B3%E3%83%89/7ea9ec80-1bd8-4d0c-b170-527a8b998af2

おい、まさか。。。ということで下記のように1回Googleトップにアクセスしたう上で、ふつうのGoogleトレンドにアクセス。

いけたよ。。。。。データとれたよ。これか!!ありがとうひよこの人!!
ということであとは、コツコツスクレイピングで無事データ取得完了。

 - casperjs, google, googleanalytics, javascript | js, スクレイピング

  関連記事

【メモ】Google Analyticsのリアルタイムで参照元がノーリファラー、 ソースの(not set)が増えている気がする。

ここ2か月ぐらいかな。 でも、集計されたデータを見ると、過去からあんまり変わって …

【Selenium】【ruby】Casperjsでどうも取得できないページがあるので…Selenium-webdriver!!

casperでダメなサイトがあったので…webdriverを試してみ …

アドテクまわりの用語

素人ながら「アドテクノロジープロフェッショナル養成講座」という本を読んでいて、用 …

クロスドメインのJSの利用とAjax通信の整理

jsonpとかcors設定とか、どういうときに必要か良く分からなくなったので整理 …

[js]JSONPについて整理

JSONPについて整理。   Contents1 JSONPとは2 な …