Google Apps ScriptにおけるGmailの読み取り件数の制限とその対処法

コメント

1. Fujii より:

   2018-07-26 11:12 PM

   はじめまして。貴重な情報をシェアしていただいていつも有難うございます。初めて組んでみたGoogleスプレッドシートのスクリプトでGmailApp.searchの上限に達してしまった様で悩んでいます。Gmailの特定ラベル内のメールをスプレッドシートへインポートするものです。
   ============================
   function mailToSheet () {

   // —– ここから書き換え —–
   // 書き込むシートURL
   var sheet_url = ‘https://docs.google.com/spreadsheets/d/xxxxxxxxxxxxx/edit’;
   // 書き込むシート名
   var sheet_name = ‘シート1’;
   // Gmailの抽出条件
   var mail_query = ‘Label:BTA’;
   // 存在チェック（既にシートに書き込み済のメールは処理しない（日付、from、to、件名の一致で判定））
   var existence_check = true;
   // —– ここまで書き換え —–

   var ss = SpreadsheetApp.openByUrl(sheet_url);
   var sheet = ss.getSheetByName(sheet_name);
   var existence_keys = fetchExistenceKeys();
   var mail_data = fetchMailData();
   for (var i = 0; item = mail_data[i]; i++) {
   if (existence_check && existsData(item)) {
   continue;
   }
   sheet.appendRow(itemToRow(item));
   }

   function fetchExistenceKeys () {
   var existence_keys = {};
   var sheet_data = sheet.getDataRange().getValues();
   for (var i = 0; row = sheet_data[i]; i++) {
   existence_keys[generateKey(rowToItem(row))] = true;
   }
   return existence_keys;
   }

   function existsData (item) {
   if (existence_keys[generateKey(item)]) {
   return true;
   }
   return false;
   }

   function generateKey (item) {
   var key = item[‘date’] + ‘_’ + item[‘subject’] + ‘_’ + item[‘from’] + ‘_’ + item[‘to’];
   // Logger.log(key);
   return key;
   }

   function rowToItem (row) {
   var item = {};
   item[‘date’] = row[0];
   item[‘subject’] = row[1];
   item[‘from’] = row[2];
   item[‘to’] = row[3];
   return item;
   }

   function itemToRow (item) {
   var row = [];
   row[0] = item[‘date’];
   row[1] = item[‘subject’];
   row[2] = item[‘from’];
   row[3] = item[‘to’];
   row[4] = item[‘body’];
   return row;
   }

   function fetchMailData () {
   var result = [];
   var threads = GmailApp.search(mail_query);
   for (var i = 0; it = threads[i]; i++) {
   var messages = it.getMessages();
   for (var j = 0; message = messages[j]; j++) {
   var item = {};
   item[‘date’] = message.getDate();
   item[‘subject’] = message.getSubject();
   item[‘from’] = message.getFrom();
   item[‘to’] = message.getTo();
   item[‘body’] = message.getBody();
   result.push(item);
   }
   }
   return result;
   }
   }
   =======================
   このようなスクリプトです。
   当初、何もわからずトリガーを5分間隔で設定していましたら、3日目にLimitに達したというエラーが出るようになってしまいました。今は一日一度のトリガーに変更しましたが、それで回避策になるでしょうか？一日に新しい該当メールは1000通ほど届きます。
   もし教えていただけるようであれば救われます・・どうぞよろしくお願いいたします。
   • タカハシノリアキ より:

     2018-07-27 11:51 AM

     Fujiiさん

     コメントありがとうございます。
     GmailApp.searchメソッドで指定している検索条件のクエリがラベルだけで、かつ最大取得数を指定していないので、毎回500スレッドを取得する形になっているものと思います。
     対策としては、未読のスレッドだけを拾って処理済みのスレッドは既読にする、処理済みのスレッドには別のラベルをつけてそのラベルは検索条件の対象外にするなどが対策としてはあるかと思います。

     今は一日一度のトリガーに変更しましたが、それで回避策になるでしょうか？一日に新しい該当メールは1000通ほど届きます。

     記事にもある通り、Gmailの読み取りは一日20000件ですので、1日1回のトリガーなら制限にはかかりません。ただ、1回あたり500件までしか取得しないので、1000通届くなら取得漏れする可能性があるかと思います。
2. 人造人間クリリン40号 より:

   2018-10-08 5:00 PM

   こんにちは、タカハシさん

   いつも大変助かっております。
   1点質問です。

   Gmail内でスレッド化したものは、その最初のメールの内容しか届かないようなのですが、
   どうにか切り分ける方法は無いでしょうか？

   どうぞよろしくお願いいたします。
   • タカハシノリアキ より:

     2018-10-19 11:47 AM

     人造人間クリリン40号さん

     お返事遅くなりましてごめんなさい。
     実際におっしゃる通りの仕様になっています。

     解決する方法はありますので、別途記事にて紹介したいと思います。

     お待ちいただければありがたく思います。
     よろしくお願いいたします。