PhantomJS를 사용하여 양식을 제출하는 방법


161

phantomJS (굉장한 도구 btw!)를 사용하여 로그인 자격 증명이있는 페이지의 양식을 제출 한 다음 대상 페이지의 내용을 stdout으로 출력하려고합니다. 팬텀을 사용하여 양식에 액세스하고 값을 성공적으로 설정할 수 있지만 양식을 제출하고 후속 페이지의 내용을 출력하는 올바른 구문이 무엇인지 잘 모르겠습니다. 내가 지금까지 가지고있는 것은 :

var page = new WebPage();
var url = phantom.args[0];

page.open(url, function (status) {

  if (status !== 'success') {
      console.log('Unable to access network');
  } else {

    console.log(page.evaluate(function () {

      var arr = document.getElementsByClassName("login-form");
      var i;

      for (i=0; i < arr.length; i++) {

        if (arr[i].getAttribute('method') == "POST") {
          arr[i].elements["email"].value="mylogin@somedomain.com";
          arr[i].elements["password"].value="mypassword";

          // This part doesn't seem to work. It returns the content
          // of the current page, not the content of the page after 
          // the submit has been executed. Am I correctly instrumenting
          // the submit in Phantom?
          arr[i].submit();
          return document.querySelectorAll('html')[0].outerHTML;
        }

      }

      return "failed :-(";

    }));
  }

  phantom.exit();
}

답변:


227

나는 그것을 알아. 기본적으로 비동기 문제입니다. 제출하고 후속 페이지를 즉시 렌더링 할 수는 없습니다. 다음 페이지에 대한 onLoad 이벤트가 트리거 될 때까지 기다려야합니다. 내 코드는 다음과 같습니다.

var page = new WebPage(), testindex = 0, loadInProgress = false;

page.onConsoleMessage = function(msg) {
  console.log(msg);
};

page.onLoadStarted = function() {
  loadInProgress = true;
  console.log("load started");
};

page.onLoadFinished = function() {
  loadInProgress = false;
  console.log("load finished");
};

var steps = [
  function() {
    //Load Login Page
    page.open("https://website.com/theformpage/");
  },
  function() {
    //Enter Credentials
    page.evaluate(function() {

      var arr = document.getElementsByClassName("login-form");
      var i;

      for (i=0; i < arr.length; i++) { 
        if (arr[i].getAttribute('method') == "POST") {

          arr[i].elements["email"].value="mylogin";
          arr[i].elements["password"].value="mypassword";
          return;
        }
      }
    });
  }, 
  function() {
    //Login
    page.evaluate(function() {
      var arr = document.getElementsByClassName("login-form");
      var i;

      for (i=0; i < arr.length; i++) {
        if (arr[i].getAttribute('method') == "POST") {
          arr[i].submit();
          return;
        }
      }

    });
  }, 
  function() {
    // Output content of page to stdout after form has been submitted
    page.evaluate(function() {
      console.log(document.querySelectorAll('html')[0].outerHTML);
    });
  }
];


interval = setInterval(function() {
  if (!loadInProgress && typeof steps[testindex] == "function") {
    console.log("step " + (testindex + 1));
    steps[testindex]();
    testindex++;
  }
  if (typeof steps[testindex] != "function") {
    console.log("test complete!");
    phantom.exit();
  }
}, 50);

3
이것은 훌륭한 템플릿입니다. 여기에 내가 추가 한 몇 가지가 있습니다 : inside setIntervaluse var func = steps[testindex], then console.log("step " + (testindex + 1) + ": " + funcName(func)). 이를 통해 수행중인 단계에 설명을 추가 할 수 있습니다.
Jonno

자세한 내용은 여기 를 참조 하십시오funcName . 또한 일련의 웹 페이지를 탐색하고 다른 기술을 사용하여을 사용하여 마지막 페이지를 렌더링하는 것이 더 쉽다는 것을 알았습니다 page.render("output.png");.
Jonno

2
이것은 정말 유용한 게시물입니다. 하나의 질문입니다. POST를 사용하여 양식을 제출하면 데이터가 서버로 전송되고 서버가 응답을 리턴합니다. 이 응답을 처리하는 코드는 어디에 있습니까? 아니면 phantomjs가 자동으로 수행합니까? 또한 양식 제출 후 서버가을 반환 할 수 COOKIE있으며 내 질문은 다음과 같습니다. *이 쿠키는 phantom.cookies서버가 응답을 반환 할 때 객체 에서 사용할 수 있습니까?
MrD

CasperJS를 PhantomJS보다 더 잘 사용하십시오. 복잡한 코딩없이 양식에 게시 할 수 있습니다
waza123


62

또한 CasperJS는 링크 클릭 및 양식 작성을 포함하여 PhantomJS 탐색을위한 훌륭한 고급 인터페이스를 제공합니다.

캐스퍼 JS

PhantomJS와 CasperJS를 비교하는 2015 년 7 월 28 일 기사 를 추가하도록 업데이트되었습니다 .

(Mr 씨를 추천 해 주셔서 감사합니다!)


1
이름을 사용하여 양식 입력 만 채울 수 있기 때문에 캐스퍼가 작동하지 않았습니다. 나는 id를 사용해야했다.
user984003

4
@ user984003 #someidID를 기반으로 선택하도록 셀렉터를 설정할 수 있어야합니다 .
arboc7

2
CasperJS는 신의 선물입니다! ASPX 페이지를 긁는 것은 산들 바람입니다. 감사합니다!
Tobia

@ user984003 이전 버전을 사용하고 있는지 모르겠지만 현재 버전에는 선택기를 사용하여 양식 필드를 채우는 fillSelectors ()가 있습니다.
Tobia

3
PhantomJS를 사용하는 사람은 CasperJS를 사용해야합니다. 이유는 다음과 같습니다. code-epicenter.com/why-is-casperjs-better-than-phantomjs
MrD

19

원시 POST 요청을 보내는 것이 때로는 더 편리 할 수 ​​있습니다. 아래 에서 PhantomJS의 post.js 원본 예제 를 볼 수 있습니다

// Example using HTTP POST operation

var page = require('webpage').create(),
    server = 'http://posttestserver.com/post.php?dump',
    data = 'universe=expanding&answer=42';

page.open(server, 'post', data, function (status) {
    if (status !== 'success') {
        console.log('Unable to post!');
    } else {
        console.log(page.content);
    }
    phantom.exit();
});

6
독자는 GET요청을 유사하게 수행하면 (같은 page.open(server, 'get', data, ...작업을 수행) 작동하지 않는다는 점에 유의하십시오 .
zbr

7

위에서 언급했듯이 CasperJS 는 양식을 작성하고 보내는 가장 좋은 도구입니다. fill () 함수를 사용하여 양식을 채우고 제출하는 방법에 대한 가장 간단한 예 :

casper.start("http://example.com/login", function() {
//searches and fills the form with id="loginForm"
  this.fill('form#loginForm', {
    'login':    'admin',
    'password':    '12345678'
   }, true);
  this.evaluate(function(){
    //trigger click event on submit button
    document.querySelector('input[type="submit"]').click();
  });
});
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.