Google Apps Script

商品ごとの最安値を価格コムから参照して、スプレッドシートに記入。毎日、自動更新で。

ふと、カメラレンズの価格が知りたくなった。その数、50本くらい。いや、もっと増えるだろう。価格コムの最安値を参考価格とする。さっそく、Googleスプレッドシートで調査したいカメラレンズ名を列記した。そして、価格コムで商品検索して、価格をコピーして、シートにペーストして。
・・・。
ちょ、ちょっと待って。10本くらいならまだしも、50本もしくはもっと増える可能性を考えると、この単純作業、正直しんどい。ミスする可能性もある。しかも価格は変動することもあるので、定期的に再調査する必要がある。さすがにその運用は現実的ではない。

はい、自動化しよう。

実現したい2つのポイント

  • スプレッドシートの決めたセルに、価格コムの最安値を自動入力する(価格を取得した日時も)
  • 毎日、決めた時間に自動で更新する

事前準備として、価格を知りたいレンズ名と、その価格はどのページを参照するのかのURL(レンズごとに、価格コムのそのレンズの詳細ページ)を記述する。
この記事で紹介するスプレッドシートのフォーマットは下記とする。

  • シート名を「価格表」とする
  • 1列目にレンズ名、2列目に価格コムのURL、3列目に最安値、4列目に最安値取得日時、とする
  • 1行目は項目名で、2行目以降に各データを入力する

ちなみに、スプレッドシートのファイル名はなんでもよい。

なぜ、スプレッドシート??

実装方法はいろいろある。
ちなみに、特定のページからデータを収集してデータベースやスプレッドシートに保存することをWebスクレイピングと言う。Webスクレイピングサービスはいろいろあるので、そういったものを使うのももちろんアリ(だが、サービス依存なので拡張性、柔軟性、安全性で不安が残る)。
また、Webコンテンツという視点であれば、たとえば、PHP + Database + Cron でも実装できる(が、開発環境を用意する手間が必要)。

そこで、Googleスプレッドシートを利用すれば、Googleアカウントさえあれば、Web上ですべて完結できる。
Googleというブランド力(信頼性)、容易さ(JavaScriptベースで実現可能)、そして拡張性の高さ(スプレッドシートで管理することで、Web API としても利用できる)を考慮して決定した。

それでは実装していこう。

スプレッドシートの決めたセルに、価格コムの最安値を自動入力する(取得した日時も)

1. スプレッドシートのタブ「ツール」→「スクリプトエディタ」を選択

Apps Script が新規ウィンドウで開かれるので、コード.gs のところに下記の内容を入力する(あらかじめ、2, 3行入力されている場合は、それは削除)。

/**
 * 価格コムのページを表示した時点での最安値を取得する
 * config_(*) の値がエラーケースは含めていないので、必ず有効な値をセットする
 */
function setPrice() {
  const config_sheetname = '価格表',
        config_url_cell = 2,
        config_price_cell = 3,
        config_date_cell = 4;

  const spreadsheet = SpreadsheetApp.getActiveSpreadsheet(),    // 現在のスプレッドシートを取得する
        sheet = spreadsheet.getSheetByName(config_sheetname),   // シートを取得する
        last_row = sheet.getDataRange().getLastRow(),   // 最終行を取得する
        today = new Date();    // 現在の日時情報を取得する

  let year = today.getFullYear(),
      month = today.getMonth() + 1,
      day = today.getDate(),
      hour = today.getHours(),
      minute = today.getMinutes(),
      now_date = '';
  
  /**
   * 1桁の場合は、0をつける
   * 
   * @param {number} num*: 0-59
   * @return {string|number}
   */
  getNumberText = function (num) {
    return (num < 10)? '0' + num: num;
  }

  /**
   * 価格コムのページソースの文字列から最安値価格を抽出する 
   * 
   * @param {string} htmltext*
   * @return {string} 
   */
  getPriceContent = function (htmltext) {
    let price = '';

    // 最安値を表示しているhtmlソースが、&yen;12,345 となっていたので、
    // この部分をピックアップするようにする。&yen; を含めることで、販売前や販売終了している場合にもケアする。
    if (htmltext.match('<span class="priceTxt">&yen;')) {
      price = htmltext.split('<span class="priceTxt">&yen;')[1];
      price = price.split('</span>')[0];
    }
    return price;
  }  

  // 現在時刻をセットする
  now_date = year + '-' + getNumberText(month) + '-' + getNumberText(day) + ' ' + 
             getNumberText(hour) + ':' + getNumberText(minute);  

  // 2行目から最終行までループする
  for (var i = 2; i <= last_row; i++) {
    const url = sheet.getRange(i, config_url_cell).getValue(),    // セルの値を取得する
          response = UrlFetchApp.fetch(url),    // URLページを取得
          htmltext = response.getContentText('shift_jis'),    // テキストで取得する
          price = getPriceContent(htmltext);    // 価格を取得する
  
    // 価格を取得した場合はセルを上書きする
    if (price != '') {
      sheet.getRange(i, config_price_cell).setValue(price);   // 価格を上書きする
      sheet.getRange(i, config_date_cell).setValue(now_date);    // 取得日時を上書きする
    }
  }
}

2.「保存アイコン」をクリックする

コード入力した上のところに、「実行」ボタンがあるが、その左に保存アイコンがある。マウスオーバーすると「プロジェクトを保存」と表示されるので、そのアイコンをクリックして保存する。

3.「実行」をクリックする

「実行」をクリックすると、実際に処理が始まる。

注意:はじめて「実行」した場合、「承認が必要です」というダイアログ画面が表示されます。そのときは後述の「補足:「承認が必要です」というダイアログ画面が表示された場合」で回避します。

処理が終わるとスプレッドシートの「最安価格」と「取得日時」が更新されているのを確認できる。

これだけ。以上。

補足:「承認が必要です」というダイアログ画面が表示された場合

「承認が必要です」というダイアログ画面が表示されるのでアクセスのリクエストを許可する必要がある。

毎日、決めた時間に自動で更新する

1. トリガーを追加する

左側のメニューの時計アイコン「トリガー」をクリックして、トリガー画面を表示させ、画面右下の「トリガーを追加」ボタンをクリックする

2. 設定項目を入力して保存する

実行する関数を選択「setPrice」、実行するデプロイを選択「Head」、イベントのソースを選択「時間手動型」を選択する。
毎日更新とする場合は、時間ベースのトリガーのタイプを選択「日付ベースのタイマー」を選択して、時刻を選択する。

設定が終わったら、画面右下の「保存」ボタンをクリックする

以上。

これで、毎日決められた時間に、商品ごとの最安値を価格コムから参照して、スプレッドシートが更新されるようになった。超絶簡単である。

最近の記事

文章のユーザビリティ

この書籍の中で、ライティングのユーザビリティについて触れている項目があり、激しく共感する部分だったので、ここで備忘録としてピックアップする。 ・・・

ライティング

インタフェースデザイン

この書籍は、I部 リサーチ、II部 デザイン、III部 インプリメンテーションと三部構成になっている。この記事では、その中から、I部 リサーチ、・・・

デザイン思考

フルHD映像を4Kにする → スーパースケール

これを知ったときはマジか!と飛び跳ねた。あらためて思い返してみると、確かに公式チュートリアルでも触れていたことをうっすら思い出す。そしてそのときとやり方がなん・・・

DaVinci Resolve

Macで編集時と書き出し後で色味が変わってしまう場合に試してみたいこと

試したことはまだないけど、Macで編集時と書き出し後で色味が変わって困ったときのために備忘録。 プロジェクト設定 > 「カラーマネジメント・・・

DaVinci Resolve

プロジェクト設定と環境設定

プロジェクト設定と環境設定について詳しく解説されている情報がなかなか見つからないので、要所要所で知り得た情報を更新していきます。 プロジェクト設定 ・・・

DaVinci Resolve

項目”Clipy”は開いているため、ゴミ箱に入れることができません。←アンインストールしようとしたときの話し

Clipyが超絶便利そうだったので、macOS Big Sur にインストール&再起動して使ってみた。ところが、command + c を複数の箇所で行い、c・・・

徒然なままに

setTimeout は requestAnimationFrame に変えるべき?

requestAnimationFrame をはじめて見たので調べていたら、setTimeout や setInterval は requestAnimati・・・

JavaScript

書籍「小さなチーム、大きな仕事」からピックアップ

6年ぶりに読み返したが、今なおハッとさせられることが多く見つかる。 この本で忘れないようにしたい項目をピックアップするだけでも役に立ちそ・・・

起業向け情報

書籍「完全網羅 起業成功マニュアル」からピックアップ

この記事では、以前に読んだ際に付箋を付けていたが、その部分だけを備忘録としてピックアップするため、本の要約ではない。実際は、何倍も濃い内容で、練・・・

起業向け情報

書籍「はじめの一歩を踏み出そう」から気になったフレーズをピックアップ

もう一回、全部読み返したいところだが、書籍がありすぎるので、当時付箋紙をつけていたところだけをピックアップ。書籍内ではより具体的な説明があるので・・・

起業向け情報

人気の記事

iOS Safariで絶対配置(position:fixed)して惰性スクロールしてもロックしない、フリーズ回避方法

iPhoneやiPadで position: fixed; で絶対配置したエリア内をスクロールするとき、最上部をより上にスクロールしようとしたり、最下部をより・・・

JavaScript2021年4月28日

WP_Queryを使って絞り込み検索するのにコレは便利!

めっちゃ参考になるページを見つけた。 絞り込みをするたびに色々ググっていたが、これがあればほとんどのことが解決できそうな気がする。 参考: これは便利!Word・・・

WordPress2018年10月11日

overflowをautoにした要素のスクロール位置を変更する → scrollTop scrollLeft

まずはサンプル。 これは、overflowをautoにした要素のスクロール位置を変更するサンプルです。 これは、overflowをautoにした要素のスクロ・・・

JavaScript2017年7月19日

Instagram API を使ってインスタに投稿した画像データを取得する

インスタに投稿した画像を自動でホームページでも更新されるようにしたい。もっとも簡単に実現する方法を紹介する。 公式リファレンスInstagram・・・

API2021年2月22日

iframeの高さを自動調整する

iframeで呼び出した際、iframe自体はスクロールさせずに高さを取得してiframe全体を表示させます。 サンプル:iframeの高さを自動調整するデモ・・・

JavaScript2015年3月17日

WordPressのカテゴリー一覧ページでカテゴリー名とスラッグを取得する → get_queried_object()

やりたいこと カテゴリー一覧ページで、そのカテゴリー一覧ページに属する記事一覧を取得するためにループさせるのとは別に、タイトルやカテゴリー別にデザインを変・・・

WordPress2019年2月11日

イラストレーターでレイヤーごとにPNGで書き出す

【2020年07月13日】 macOS Catalina(10.15.5) / Adobe iLLustrator 2020(24.2.1) にて動作確認済・・・

Illustorator2018年2月2日

配列の重複を削除する

配列の場合 /** * 配列の重複を削除する * * @param {array} ary* * @return {array} 処理後のary・・・

JavaScript2020年12月14日

favicon.icoをWordPressの管理画面からアップロードできない→ wp-config.php を一時的に修正

いつもは直接アップロードしているので気にしていなかったが、WordPress管理画面のメニュー「メディア」からfavicon.icoをアップロードしようとした・・・

WordPress2020年8月4日

背景画像の拡大・縮小 → background-size !

W3Cで「モジュール背景とボーダー」について2011年2月15日付けで更新されてますね。 CSS3では、背景画像の幅・高さを拡大・縮小するプロパティが追加され・・・

CSS2011年3月7日

コメントありの記事

Sony Eマウント フルサイズ対応のカメラレンズを収集するページを作ってみた

「SIGMAから超軽量で明るい単焦点レンズが2本発売になりましたので、リストにレンズ情報追加しました!」

お仕事・制作日記

overflowをautoにした要素のスクロール位置を変更する → scrollTop scrollLeft

「>名無しさん ご指摘、ありがとうございます! 記事冒頭の「まずはサンプル」のサンプルが動いていませんでしたので修正しました。」

JavaScript

えっ!?Yahooの検索結果から遷移しようとしたら全く違うサイトにリダイレクトされてしまった...

「>前田さん コメントありがとうございます。 環境は分かりかねますが、修正したいファイルのパーミッションを604や644に変更すると書き込みできるようになります(・・・」

お仕事・制作日記

記事の投稿IDなどの投稿者(ユーザー)情報を取得する方法 → get_the_author_meta

「アバターを取得する「get_avatar」についても追記しました!」

WordPress

jQueryでformを操る【nameの値を取得する/クリアする】

「「値をクリアする」を追加しました。チェックボックスやラジオボタンの値を何も選択していない状態に戻すときについて触れています。」

JavaScript

iframeの高さを自動調整する

「>匿名さん コメントありがとうございます。 サンプルでは、beforeは何も処理していないので期待する表示にならない、で正解です。 クリックした後が、対応・・・」

JavaScript

Instagram API を使ってインスタに投稿した画像データを取得する

「コメントに嬉しいお言葉、ありがとうございます!」

API

MAMPでMySQL Serverが突然起動しなくなった時 → ログファイル削除

「(匿名)さん コメントありがとうございます。何も設定変更していないのに、それまで使用できていたサーバーが突然使えなくなるのは辛いですよね、、。 ここで紹介したや・・・」

MAMP

イラストレーターでレイヤーごとにPNGで書き出す

「コメントありがとうございます! そもそもできるかはわかりませんが、ソースを書き換える必要はあります。 下記記事などが参考になるかもしれません。 illustra・・・」

Illustorator

05_各種キーワードツール

「公開から14年振りの更新w デッドリンクを削除しました。ツール系は「SEO対策に役立つ便利ツール」に集約します。」

SEO

WEB制作アプリケーションGoogle Apps Script商品ごとの最安値を価格コムから参照して、スプレッドシートに記入。毎日、自動更新で。 | シンプルシンプルデザイン