Skrobanie Netflix

Question

Próba automatycznego programowego przejrzenia ostatnio wyświetlanych danych poza programem Netflix, ale z pewnymi problemami tylko w fazie logowania. Mój obecny kod właśnie powoduje Netflix pluć powrotem We were unable to process your request. strony:

var request = require('request').defaults({jar: true}); 
var cheerio = require('cheerio'); 

var url = "https://www.netflix.com/Login?locale=en-GB&nextpage=https%3A%2F%2Fwww.netflix.com%2FWiViewingActivity"; 

request(url, function (error, response, body) { 
    if (!error && response.statusCode == 200) { 
     var $ = cheerio.load(body); 
     var authCode = $("#login-form > input").attr("value"); 
     request.post(url+"?email=myemail%40gmail.com&password=mypassword&RememberMe=on&authURL="+authCode, { 
     }, function(err, response, body){ 
      console.log(body); 
     }); 
    } 
}) 

jakieś pomysły?

Co zaskakujące, Google nie ma prawie nic na Scraping Netflix.

Answer 1

Zdobione potrzebne do:

1. Wyślij jakikolwiek user-agent ciąg
2. Wyślij dane formularza za pomocą życzenie za form param
3. Wyślij ciasteczka ręcznie

tutaj mój ostatni kod, który otrzymuje najnowszą obserwowaną pozycję:

var request = require('request').defaults({jar: true}); 
var cheerio = require('cheerio'); 

var url = "https://www.netflix.com/Login"; 

request(url, function (error, response, body) { 
    if (!error && response.statusCode == 200) { 
     var $ = cheerio.load(body); 
     var authCode = $("#login-form > input").attr("value"); 
     request.post({url: url, 
      form: { 
       "email": "email@gmail.com", 
       "password": "password", 
       "authURL": authCode, 
       "RememberMe": "on" 
      }, 
      headers:{ 
       'User-Agent': "NodeScrape" 
      } 
     }, function(err, response, body){ 
      var cookies = response.headers['set-cookie']; 
      request({url: "https://www.netflix.com/WiViewingActivity", headers: {'Cookie': cookies, 'User-Agent': "NodeScrape"}}, function(error, response, body){ 
       var $ = cheerio.load(body); 
       console.log($(".seriestitle").eq(0).text()); 
      }); 
     }); 
    } 
})