pytrends で Google トレンドのデータを取得する

% sw_vers
ProductName:    Mac OS X
ProductVersion: 10.13.6
BuildVersion:   17G65

from pytrends.request import TrendReq
pytrends = TrendReq(hl='ja-JP', tz=360)

from pytrends.request import TrendReq
pytrends = TrendReq(hl='en-US', tz=360, proxies = {'https': 'https://34.203.233.13:80'})

kw_list = ["Java","Python","JavaScript"]
pytrends.build_payload(kw_list, cat=0, timeframe='today 5-y', geo='JP', gprop='')
pytrends.related_queries()

{'Java': {'rising':                                   query  value
  0                             java 有償 化   6000
  1                        android studio   3700
  2                            java ラムダ 式   1800
  3   java セキュリティ によって ブロック され た アプリケーション    900
  4                           java silver    700
  5                      スッキリ わかる java 入門    700
  6                            java 8 api    600
  7                         java json パース    400
  8                           java stream    350
  9                           java bronze    350
  10                   oracle java silver    300
  11                               spring    250
  12                          java spring    250
  13                                 json    200
  14                       java 文字 列 切り出し    200
  15                            java json    190
  16                             java 1.7    190
  17                         java scanner    180
  18                       java list 初期 化    150
  19                       java メソッド 呼び出し    110
  20                         java foreach    110
  21                          java セキュリティ    110
  22                        java contains     90
  23                            minecraft     90
  24                    java for continue     80,
  'top':            query  value
  0    string java    100
  1        配列 java     71
  2        eclipse     71
  3   java eclipse     70
  4       java クラス     63
  5    java インストール     58
  6   android java     58
  7      java 文字 列     57
  8      java list     57
  9     javascript     44
  10      for java     44
  11     java メソッド     39
  12      java int     39
  13       java 確認     39
  14        oracle     38
  15   oracle java     38
  16   java ダウンロード     37
  17    java バージョン     36
  18       java 入門     36
  19      map java     35
  20       java 実行     35
  21      java api     34
  22     java file     34
  23           api     34
  24     java date     29},
 'JavaScript': {'rising':                      query  value
  0          ie11 javascript  58450
  1       javascript promise   4450
  2                angularjs   2850
  3   javascript object keys   1100
  4        javascript export    700
  5                bootstrap    650
  6           javascript let    500
  7          javascript blob    500
  8    javascript use strict    400
  9        javascript filter    350
  10      javascript require    300
  11    javascript json 読み込み    300
  12        javascript const    250
  13     javascript class 追加    200
  14          mdn javascript    190
  15       javascript minify    190
  16   javascript json parse    170
  17  javascript date format    170
  18     selenium javascript    160
  19     javascript new date    160
  20    javascript 文字 列 切り出し    160
  21              ドット インストール    160
  22  chrome javascript デバッグ    150
  23  javascript console.log    150
  24      foreach javascript    150, 'top':                   query  value
  0                jquery    100
  1                  html     85
  2       html javascript     83
  3         javascript 配列     60
  4                  java     44
  5                    js     44
  6       javascript 文字 列     42
  7       java javascript     42
  8        javascript css     37
  9                   css     36
  10                  php     31
  11       php javascript     31
  12      javascript イベント     27
  13     array javascript     26
  14        javascript 関数     25
  15        javascript 変数     25
  16      javascript json     25
  17       javascript for     23
  18    chrome javascript     22
  19       javascript ボタン     22
  20        ie javascript     22
  21  javascript function     20
  22    javascript オブジェクト     19
  23     javascript 正規 表現     19
  24        javascript if     19},
 'Python': {'rising':                         query  value
  0                  tensorflow  60100
  1              python jupyter  58500
  2                       pyenv  29550
  3            jupyter notebook  26350
  4               python データ 分析  18950
  5                    anaconda   9950
  6   退屈 な こと は python に やらせ よう   9050
  7              python reshape   7850
  8       python eating a horse   7750
  9                 python venv   6650
  10                     janome   5350
  11                    progate   4850
  12              python pandas   4750
  13            python anaconda   4700
  14                       atom   2850
  15               機械 学習 python   1700
  16                      qiita   1450
  17                      機械 学習   1250
  18               scikit-learn   1100
  19               python shape    850
  20           python json 読み込み    700
  21                    pycharm    700
  22                        aws    650
  23            python requests    600
  24        raspberry pi python    550, 'top':              query  value
  0      python ファイル    100
  1      python list    100
  2       python for     90
  3      python 文字 列     88
  4   python windows     81
  5    python インストール     81
  6     python numpy     65
  7        python 入門     64
  8            numpy     64
  9        python 配列     63
  10         python3     63
  11      python リスト     58
  12     python file     57
  13   python pandas     54
  14       python if     54
  15     python コマンド     53
  16      python pip     52
  17      mac python     51
  18          opencv     47
  19   python import     46
  20   python string     46
  21   python opencv     46
  22     python json     45
  23      csv python     45
  24       python 関数     45}}

# Java J2EE を指定
kw_list = ["Java","J2EE"]
# 過去3月分を指定
pytrends.build_payload(kw_list, cat=0, timeframe='today 3-m', geo='JP', gprop='')
# 関連トピックを取得
pytrends.related_topics()

{}

kw_list = ["Java","Python","JavaScript"]
pytrends.build_payload(kw_list, cat=0, timeframe='today 5-y', geo='JP', gprop='')
pytrends.interest_over_time()

kw_list = ["Java","Python","JavaScript"]
pytrends.build_payload(kw_list, cat=0, timeframe='today 5-y', geo='JP', gprop='')
df = pytrends.interest_over_time()
%matplotlib inline
df.plot()

<matplotlib.axes._subplots.AxesSubplot at 0x10d68cf28>

kw_list = ["Java","Python","JavaScript"]
pytrends.get_historical_interest(kw_list, year_start=2018, 
                                 month_start=1, 
                                 day_start=1, 
                                 hour_start=0, 
                                 year_end=2018, 
                                 month_end=3, 
                                 day_end=1, 
                                 hour_end=0, 
                                 cat=0, 
                                 geo='JP', 
                                 gprop='', sleep=0)

kw_list = ["Java","Python","JavaScript"]
df = pytrends.get_historical_interest(kw_list, year_start=2018, 
                                 month_start=1, 
                                 day_start=1, 
                                 hour_start=0, 
                                 year_end=2018, 
                                 month_end=3, 
                                 day_end=1, 
                                 hour_end=0, 
                                 cat=0, 
                                 geo='JP', 
                                 gprop='', sleep=0)
%matplotlib inline
df.plot()

<matplotlib.axes._subplots.AxesSubplot at 0x1138c8128>

pytrends.trending_searches(pn='p4')

pytrends.top_charts('2017', cid="cd9ba6e1-c3c1-418e-823b-dd7de3c5240d",  geo='JP', cat='')

---------------------------------------------------------------------------

ResponseError                             Traceback (most recent call last)

<ipython-input-44-42cf002dff85> in <module>()
----> 1 pytrends.top_charts('2017', cid="cd9ba6e1-c3c1-418e-823b-dd7de3c5240d",  geo='JP', cat='')


/usr/local/lib/python3.6/site-packages/pytrends/request.py in top_charts(self, date, cid, geo, cat)
    342             url=TrendReq.TOP_CHARTS_URL,
    343             method=TrendReq.POST_METHOD,
--> 344             params=chart_payload,
    345         )['data']['entityList']
    346         df = pd.DataFrame(req_json)


/usr/local/lib/python3.6/site-packages/pytrends/request.py in _get_data(self, url, method, trim_chars, **kwargs)
     99             # is not allowed by Google
    100             raise exceptions.ResponseError('The request failed: Google returned a '
--> 101                                            'response with code {0}.'.format(response.status_code), response=response)
    102 
    103     def build_payload(self, kw_list, cat=0, timeframe='today 5-y', geo='', gprop=''):


ResponseError: The request failed: Google returned a response with code 404.

pytrends.suggestions('Python')

[{'mid': '/m/05z1_', 'title': 'Python', 'type': 'プログラミング言語'},
 {'mid': '/m/0cv6_m', 'title': 'ニシキヘビ属', 'type': 'ヘビ'},
 {'mid': '/m/05tb5', 'title': 'ニシキヘビ科', 'type': 'ヘビ'},
 {'mid': '/m/06bxxb', 'title': 'CPython', 'type': 'トピック'},
 {'mid': '/g/1q6j3gsvm', 'title': 'Python', 'type': 'トピック'}]

pytrends.suggestions('Java')

[{'mid': '/m/07sbkfb', 'title': 'Java', 'type': 'プログラミング言語'},
 {'mid': '/m/02p97', 'title': 'JavaScript', 'type': 'プログラミング言語'},
 {'mid': '/m/05cntt',
  'title': 'JavaScript Object Notation',
  'type': 'プログラミング言語'},
 {'mid': '/m/045rk', 'title': 'Java仮想マシン', 'type': 'トピック'},
 {'mid': '/m/0bzzx', 'title': 'Java Servlet', 'type': 'トピック'}]

pytrends.categories()

{'children': [{'children': [{'children': [{'id': 188, 'name': 'クラブ、ナイトライフ'},
      {'id': 891, 'name': 'コンサート、音楽祭'},
      {'id': 1273, 'name': 'スポーツ観戦'},
      {'id': 614, 'name': 'チケット販売'},
      {'id': 1086, 'name': '映画祭'},
      {'id': 1085, 'name': '映画情報、劇場情報'}],
     'id': 569,
     'name': 'イベント情報'},
     ..........
  {'children': [{'id': 1339, 'name': 'カーシェアリング'},
    {'children': [{'id': 1389, 'name': 'アグリツーリズム'},
      {'id': 1005, 'name': 'エコツアー'},
      {'id': 1391, 'name': 'ブドウ園、ワイン ツーリズム'},
      {'id': 1390, 'name': '観光ツアー'},
      {'id': 707, 'name': '冒険旅行'}],
     'id': 1004,
     'name': 'テーマ旅行'},
    {'id': 708, 'name': 'バス、電車'},
    {'id': 179, 'name': 'ホテル、宿泊施設'},
    {'id': 205, 'name': 'レンタカー、タクシー'},
    {'children': [{'id': 1008, 'name': 'テーマパーク'},
      {'id': 1074, 'name': 'ビーチ、島'},
      {'id': 1120, 'name': '湖、川'},
      {'id': 1007, 'name': '公園、庭園'},
      {'id': 1119, 'name': '山岳、スキー リゾート'},
      {'id': 1006, 'name': '史跡、歴史的建造物'},
      {'id': 1009, 'name': '動物園、水族館、自然保護地域'}],
     'id': 208,
     'name': '観光名所'},
    {'children': [{'children': [{'id': 1147, 'name': '自家用航空機'}],
    {'children': [{'id': 1019, 'name': 'ツアー旅行'},
      {'id': 1392, 'name': '観光局、案内所'}],
     'id': 1010,
     'name': '旅行代理店、旅行サービス'}],
   'id': 67,
   'name': '旅行'}],
 'id': 0,
 'name': 'すべてのカテゴリ'}