Обработка xml в таблице google на примере zakupki.gov.ru

Получать информацию с различных сайтов можно по разному: 

1. сидеть долго и упорно, отслеживая поступающую на сайт информацию,
2. использовать специально предназначенные для этого парсеры,
3. написать свой собственный велосипед - парсер.

В первом случае тратиться очень много времени, которое можно было бы использовать для общения с друзьями, коллегами, семьёй. Самое ценное, что есть у нас, это время. 

Во втором случае можно потратить очень много денег, которые можно было бы направить на приятное времяпровождение с друзьями, коллегами, семьёй. Ведь самое ценное, что есть у нас, это время. А время проведённое в хорошей компании бесценно.

Ну а для того, чтобы затраченное время и деньги перестали нас так волновать, надо написать скрипт, который будет брать информацию с нужного нам сайта. Так почему же не взяться за Официальный Сайт Единой Информационной Системы в сфере закупок.

Для начала ознакомимся со статьёй в которой описано каким образом можно получить ссылку на RSS ленту нужную именно нам.

 Если правильно составим запрос, то можно считать что половина дела сделана.

Остаётся дело за малым - скрипт, который нужно создать в таблице google.

function parseZakupki() {
  var url = 'http://zakupki.gov.ru/tinyurl/4995bdbb-597a-495b-9856-aff3a0d50b0a';
  var options={
      'header':'User-Agent: Mozilla/5.0 (iPhone; CPU iPhone OS 10_3_1 like Mac OS X) AppleWebKit/603.1.30 (KHTML, like Gecko) Version/10.0 Mobile/14E304 Safari/602.1',
   }
  var xml = UrlFetchApp.fetch(url,options).getContentText();
  var document = XmlService.parse(xml);
  var root = document.getRootElement().getChildren('channel');
  var entries=root[0].getChildren('item');
  var sheetData=[]
  for (var i = 0; i < entries.length; i++) {
    var title = entries[i].getChild('title').getText();
    var link = entries[i].getChild('link').getText();
    var pubdate=new Date(entries[i].getChild('pubDate').getText())
    var who = entries[i].getChild('author').getText()
    var description=entries[i].getChild('description').getText().replace(/\<\/b>/g,'').replace(/\
/g,'\n').replace(/\/g,'\n').replace(/"/g,'"').replace(/ /g,'"').replace(/«/g,'"').replace(/»/g,'"').replace(/–/g,'–').split('\n\n')[1].split('\n')[1]
for (var j=0;j<description.length;j++){       
    if (description[j].indexOf('Наименование объекта закупки:')!=-1)
     {
       var what=description[j].split(': ')[1];break;       
     }     
}     
if (link.indexOf('http')==-1){
        link='http://zakupki.gov.ru'+link
     }      
sheetData.push([Utilities.formatDate(pubdate, Session.getScriptTimeZone(), "dd.MM.YY HH:mm"),link ,title,what,who])   }     SpreadsheetApp.getActiveSheet().getRange(2, 1, sheetData.length, sheetData[0].length).setValues(sheetData) }

Что делает скрипт: 

1. Получает RSS ленту по адресу, который указан в url, притворяясь браузером Safari.
2. Парсит xml (да, да RSS на самом деле простой xml файл).
3. Заполняет активную страницу данными из RSS ленты в порядке Дата размещения, Ссылка, Название, Описание, Кто разместил, начиная со второй строчки. Первую можно будет использовать для заголовков.

Если поставить триггер на выполнение данному скрипту, можно будет получать нужную информацию в автоматическом режиме, не мониторя, сам сайт zakupki.gov.ru. При этом будем экономить время и деньги, которых нам так часто не хватает.
Эх, к этому скрипту прикрутить бы ещё бота Telegram, который бы по триггеру отправлял только новые данные.

Вопросы и здравая критика принимаются.

PS:
25.11.2018 поправил скрипт, т.к. заметил что zakupki на запросы RSS,без указания клиента, начал выдавать 403 ошибку.