¿Hay alguna manera de usar PhantomJS en Python?

Quiero usar PhantomJS en Python . Busqué en Google este problema pero no pude encontrar las soluciones adecuadas.

Creo que os.popen() puede ser una buena opción. Pero no pude pasarle algunos argumentos.

Usar subprocess.Popen()puede ser una solución adecuada por ahora. Quiero saber si hay una mejor solución o no.

¿Hay alguna manera de usar PhantomJS en Python?

La forma más fácil de usar PhantomJS en Python es a través de Selenium. El método de instalación más simple es

1. Instalar NodeJS
2. Usando el administrador de paquetes de Node, instale phantomjs: npm -g install phantomjs-prebuilt
3. instale selenium (en su virtualenv, si lo está usando)

Después de la instalación, puede usar fantasma tan simple como:

from selenium import webdriver

driver = webdriver.PhantomJS() # or add to your PATH
driver.set_window_size(1024, 768) # optional
driver.get('https://google.com/')
driver.save_screenshot('screen.png') # save a screenshot to disk
sbtn = driver.find_element_by_css_selector('button.gbqfba')
sbtn.click()

Si la variable de entorno de la ruta del sistema no está configurada correctamente, deberá especificar la ruta exacta como argumento webdriver.PhantomJS(). Reemplace esto:

driver = webdriver.PhantomJS() # or add to your PATH

... con lo siguiente:

driver = webdriver.PhantomJS(executable_path='/usr/local/lib/node_modules/phantomjs/lib/phantom/bin/phantomjs')

Referencias

• http://selenium-python.readthedocs.io/
• ¿Cómo configuro un proxy para phantomjs / ghostdriver en python webdriver?
• https://dzone.com/articles/python-testing-phantomjs

PhantomJS recientemente abandonó el soporte de Python por completo. Sin embargo, PhantomJS ahora incorpora Ghost Driver .

Ya que un nuevo proyecto ha intensificado para llenar el vacío: ghost.py. Probablemente quieras usar eso en su lugar:

from ghost import Ghost
ghost = Ghost()

with ghost.start() as session:
    page, extra_resources = ghost.open("http://jeanphi.me")
    assert page.http_status==200 and 'jeanphix' in ghost.content

Ahora que el GhostDriver viene incluido con el PhantomJS, se ha vuelto aún más conveniente usarlo a través de Selenium.

Probé la instalación del Nodo de PhantomJS, como lo sugirió Pykler, pero en la práctica me pareció más lento que la instalación independiente de PhantomJS. Supongo que la instalación independiente no proporcionó estas características antes, pero a partir de v1.9, lo hace mucho.

1. Instale PhantomJS ( http://phantomjs.org/download.html ) (Si está en Linux, seguir las instrucciones lo ayudará a https://stackoverflow.com/a/14267295/382630 )
2. Instale Selenium usando pip.

Ahora puedes usar así

import selenium.webdriver
driver = selenium.webdriver.PhantomJS()
driver.get('http://google.com')
# do some processing

driver.quit()

Así es como pruebo javascript usando PhantomJS y Django:

mobile / test_no_js_errors.js :

var page = require('webpage').create(),
    system = require('system'),
    url = system.args[1],
    status_code;

page.onError = function (msg, trace) {
    console.log(msg);
    trace.forEach(function(item) {
        console.log('  ', item.file, ':', item.line);
    });
};

page.onResourceReceived = function(resource) {
    if (resource.url == url) {
        status_code = resource.status;
    }
};

page.open(url, function (status) {
    if (status == "fail" || status_code != 200) {
        console.log("Error: " + status_code + " for url: " + url);
        phantom.exit(1);
    }
    phantom.exit(0);
});

mobile / tests.py :

import subprocess
from django.test import LiveServerTestCase

class MobileTest(LiveServerTestCase):
    def test_mobile_js(self):
        args = ["phantomjs", "mobile/test_no_js_errors.js", self.live_server_url]
        result = subprocess.check_output(args)
        self.assertEqual(result, "")  # No result means no error

Ejecutar pruebas :

manage.py test mobile

La respuesta de @Pykler es excelente, pero el requisito de Node está desactualizado. Los comentarios en esa respuesta sugieren la respuesta más simple, que he puesto aquí para ahorrar tiempo a otros:

1. Instalar PhantomJS

   Como señala @ Vivin-Paliath, es un proyecto independiente, no parte de Node.

   Mac:

   brew install phantomjs

   Ubuntu:

   sudo apt-get install phantomjs

   etc.

2. Configure un virtualenv(si aún no lo ha hecho):

   virtualenv mypy  # doesn't have to be "mypy". Can be anything.
   . mypy/bin/activate

   Si su máquina tiene Python 2 y 3, es posible que necesite ejecutar virtualenv-3.6 mypyo similar.

3. Instalar selenio:

   pip install selenium

4. Pruebe una prueba simple, como esta prestada de los documentos :

   from selenium import webdriver
   from selenium.webdriver.common.keys import Keys
   
   driver = webdriver.PhantomJS()
   driver.get("http://www.python.org")
   assert "Python" in driver.title
   elem = driver.find_element_by_name("q")
   elem.clear()
   elem.send_keys("pycon")
   elem.send_keys(Keys.RETURN)
   assert "No results found." not in driver.page_source
   driver.close()

esto es lo que hago, python3.3. Estaba procesando grandes listas de sitios, por lo que el incumplimiento del tiempo de espera era vital para que el trabajo se ejecutara en toda la lista.

command = "phantomjs --ignore-ssl-errors=true "+<your js file for phantom>
process = subprocess.Popen(command, shell=True, stdout=subprocess.PIPE)

# make sure phantomjs has time to download/process the page
# but if we get nothing after 30 sec, just move on
try:
    output, errors = process.communicate(timeout=30)
except Exception as e:
    print("\t\tException: %s" % e)
    process.kill()

# output will be weird, decode to utf-8 to save heartache
phantom_output = ''
for out_line in output.splitlines():
    phantom_output += out_line.decode('utf-8')

Si usa Anaconda, instálelo con:

conda install PhantomJS

en tu guión:

from selenium import webdriver
driver=webdriver.PhantomJS()

funciona perfectamente.

En caso de que esté utilizando Buildout , puede automatizar fácilmente los procesos de instalación que Pykler describe utilizando la receta gp.recipe.node .

[nodejs]
recipe = gp.recipe.node
version = 0.10.32
npms = phantomjs
scripts = phantomjs

Esa parte instala node.js como binario (al menos en mi sistema) y luego usa npm para instalar PhantomJS. Finalmente crea un punto de entrada bin/phantomjs, con el que puede llamar al controlador web PhantomJS. (Para instalar Selenium, debe especificarlo en sus requisitos de huevo o en la configuración de Buildout).

driver = webdriver.PhantomJS('bin/phantomjs')