Desarrollo de Python
  1. Desarrollo de Python
  3. Usando Requests y BeautifulSoup – Python devuelve la etiqueta sin texto
Intereting Posts
Tensorflow python: acceso a elementos individuales en un tensor Bares y estrellas en general. Desactivar la consola ipython en pycharm Crear nuevas listas a partir de elementos de una lista Cómo comprobar si un objeto existe en python Imprima la clave del valor máximo en un diccionario de forma pirónica ¿Cómo crear un DataFrame de enteros aleatorios con Pandas? ¿Por qué son algunas de las nuevas versiones de Python 3 en versiones anteriores de Python 3? Django @property calculando un campo modelo: FieldError: No se puede resolver la palabra clave Determinación programática de la cantidad de parámetros que requiere una función – Python Cómo dejar / salir / desactivar un virtualenv de Python Error de instalación de la almohada: el comando ‘gcc’ falló con el estado de salida 1 ¿Cómo escribir un método getitem estático en python? Multiproceso Python con Cluster Distribuido La forma más rápida de crear vectores de entidades de cadena Python

Usando Requests y BeautifulSoup – Python devuelve la etiqueta sin texto

Estoy intentando capturar el número de visitas en esta página, pero python devuelve la etiqueta sin texto.

Esto es lo que he hecho. 

import requests from bs4 import BeautifulSoup r = requests.get("http://www.kijiji.ca/v-2-bedroom-apartments-condos/city-of-halifax/clayton-park-west-condo-style-luxury-2-bed-den/1016364514") soup = BeautifulSoup(r.content) print soup.find_all("span",{"class":"ad-visits"})

Los valores que está intentando raspar están rellenados por javascript, por lo que en este caso no funcionarán las requests o los requests se beautfulsoup .

Tendrá que usar algo como el selenium para obtener la salida. 

 from bs4 import BeautifulSoup from selenium import webdriver driver = webdriver.Firefox() driver.get("http://www.kijiji.ca/v-2-bedroom-apartments-condos/city-of-halifax/clayton-park-west-condo-style-luxury-2-bed-den/1016364514") soup = BeautifulSoup(driver.page_source , 'html.parser') print soup.find_all("span",{"class":"ad-visits"})

Selenium devolverá la fuente de la página como se representa y luego puede usar beautifulsoup para obtener el valor 

 [385]