web-dev-qa-db-de.com

Wie verwende ich CasperJS in node.js?

Ich möchte CasperJS in node.js verwenden.

Ich habe auf die folgenden URLs verwiesen, um CasperJS in node.js zu verwenden:

Mit Hilfe der obigen URLs habe ich folgenden Code geschrieben:

//DISPLAY=:0 node test2.js
var phantom = require('phantom');
console.log('Hello, world!');
phantom.create(function (ph) {
    ph.casperPath = '/opt/libs/casperjs'
    ph.injectJs('/opt/libs/casperjs/bin/bootstrap.js');
    var casper = require('casper').create();
    casper.start('http://google.fr/');

    casper.thenEvaluate(function (term) {
        document.querySelector('input[name="q"]').setAttribute('value', term);
        document.querySelector('form[name="f"]').submit();
    }, {
        term: 'CasperJS'
    });

    casper.then(function () {
        // Click on 1st result link
        this.click('h3.r a');
    });

    casper.then(function () {
        console.log('clicked ok, new location is ' + this.getCurrentUrl());
    });

    casper.run();
});

Wenn ich diesen Code ausführte, erhielt ich die folgende Fehlermeldung:

ERROR MSG:

[email protected]:/opt/workspaces/TestPhantomjs$ DISPLAY=:0 node test2.js 
Hello, world!
Error: Cannot find module 'casper'
    at Function._resolveFilename (module.js:332:11)
    at Function._load (module.js:279:25)
    at Module.require (module.js:354:17)
    at require (module.js:370:17)
    at /opt/workspaces/TestPhantomjs/test2.js:6:14
    at Object.<anonymous> (/opt/workspaces/TestPhantomjs/node_modules/phantom/phantom.js:82:43)
    at EventEmitter.<anonymous> (/opt/workspaces/TestPhantomjs/node_modules/phantom/node_modules/dnode/index.js:215:30)
    at EventEmitter.emit (events.js:67:17)
    at handleMethods (/opt/workspaces/TestPhantomjs/node_modules/phantom/node_modules/dnode-protocol/index.js:138:14)
    at EventEmitter.handle (/opt/workspaces/TestPhantomjs/node_modules/phantom/node_modules/dnode-protocol/index.js:98:13)
phantom stdout: Unable to load casper environment: Error: Failed to resolve module fs, tried fs
34
atian25

https://groups.google.com/group/casperjs/browse_thread/thread/641e9e6dff50fb0a/e67aaef5ab4ec918?hl=zh-CN#e67aaef5ab4ec918

Nicolas Perriault
2012/2/27 天 猪 蓝 虫. : 

Ich wollte casperjs in nodejs verwenden. und verweist auf: https://github.com/sgentle/phantomjs-node und http://casperjs.org/index.html#faq-executable

Sie können CasperJS nicht auf diese Weise ausführen. QtWebKit und V8 haben nicht dasselbe js-Umgebung (und Ereignisschleife), sodass Ihre node.js-App nicht in der Lage ist laden und verwenden Sie ein CasperJS-Modul. Sie müssen Ihr CasperJS-Skript ausführen separat mit einem Unterprozessaufruf, wie dieser auf github . ICH Planen Sie nicht, CasperJS mit phantomjs-node kompatibel zu machen, da es verwendet alert()- basierte schmutzige Hacks, mit denen ich nicht einfach bin. 

Prost, - Nicolas Perriault

21
atian25

Sie können SpookyJS verwenden, um CasperJS von Node aus auszuführen.

25
NiKo

CasperJS enthält einen Webserver, um mit der Außenwelt zu kommunizieren . Node (mit request, superagent usw.) kann jetzt über HTTP mit casper kommunizieren.

In scraper.js:

#!/usr/bin/env casperjs

// I AM NOT NODEJS
// I AM CASPER JS
// I RUN IN QTWEBKIT, NOT V8

var casper = require('casper').create();
var server = require('webserver').create();
var ipAndPort = '127.0.0.1:8585';

server.listen(ipAndPort, function(request, response) {

    casper.start('https://connect.data.com/login');
    casper.userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.106 Safari/537.36");
    casper.then(function(){
        // lots of code here, and a few more cassper.then()s
    });

    casper.run(function(){
        console.log('\n\nFinished')
        response.statusCode = 200;
        var body = JSON.stringify({
            phoneNumber: '1800-YOLO-Swag'
        })

        response.write(body);
        response.close();
    });
});

Sie können jetzt scraper.js als Webserver ausführen:

chmod +x scraper.js
./scraper.js

Sie sollten führen Sie es wie eine Node-App als Linux-Dienst aus .

17
Hemerson Varela

Eine Lösung (die für mich funktioniert hat) ist, Ihren Server auf Testbasis zu starten und zu stoppen. Zum Beispiel habe ich einen runtests.coffee, der wie folgt aussieht:

http = require 'http'
glob = require 'glob'
spawn = require('child_process').spawn

db = require './db' # Contains all database stuff.
webapp = require './webapp' # Contains all of the Express stuff.

db.connect 'test' # Connects to the db server and creates an empty test db.
server = http.createServer webapp.makeApp()
server.listen 0, ->
    port = server.address().port
    process.env.URL = "http://localhost:#{ port }"
    glob 'tests/*', (err, filenames) ->
        child = spawn 'casperjs', ['test'].concat(filenames)
        child.stdout.on 'data', (msg) -> process.stdout.write msg
        child.stderr.on 'data', (msg) -> process.stderr.write msg
        child.on 'exit', (code) ->
            db.disconnect() # Drops the test db.
            server.close()
            process.exit code

Und meine CasperJS-Tests in tests/ sehen folgendermaßen aus:

URL = require('system').env.URL # Note, Casper code here, not Node.

casper.test.begin 'Test something', 1, (test) ->
    casper.start "#{ URL }/welcome"
    casper.then ->
        test.assertHttpStatus 200
        # ....
    casper.run ->
        test.done()
3
a paid nerd

Ich habe auch versucht, casper für node cron job auszuführen. Hier ist meine Lösung

in casper.js wiederholen Sie Ihre Antwort:

casper.then(function() {
    var comments = this.evaluate(getComments);
    this.echo(JSON.stringify(comments));
})

verwenden Sie node-cmd in der Knotendatei casper_wrapper.js:

var cmd = require('node-cmd');

module.exports = function(url) {
    return new Promise(function(resolve, reject) {
        cmd.get(
            'casperjs casper.js ' + url, // casper takes args to run the script
            function(err, data, stderr){
                if (err) {
                    reject(err);
                    return;
                }
                var obj = JSON.parse(data);
                resolve(obj);
            }
        );
    });
}
0
Allen Wong

Im Grunde bedeutet dies, dass Ihr Skript Casper nicht finden kann. Haben Sie den Pfad überprüft und sichergestellt?

/opt/libs/casperjs 

und:

/opt/libs/casperjs/bin/bootstrap.js

Sind für einen Website-Benutzer zugänglich? In Anbetracht des Standorts ist es wahrscheinlich nicht wahrscheinlich ./opt ist ein Unix-Pfad, aber die Website sucht in {websiterootpath}/opt.

Ich würde einen Unterordner "casperjs" im Stammverzeichnis Ihrer Website erstellen und den Inhalt von kopieren

/opt/libs/casperjs 

Zu dort . Dann ändere deine Pfade von

/opt/libs/casperjs

Zu

/casperjs
0
Russ Clarke