Desarrollo de Python
  1. Desarrollo de Python
  3. Usando Requests y BeautifulSoup – Python devuelve la etiqueta sin texto
Intereting Posts
Python, OpenCV – Alineando y superponiendo múltiples imágenes, una tras otra Cómo modificar el espacio de nombres local en Python Error de importación de Theano: ningún módulo llamado cPickle Obtener ruta desde archivo abierto en Python Matplotlib enganchando a eventos de botón de inicio / retroceso / avance ¿Es posible modificar líneas en un archivo en el lugar? ¿Qué es una expresión en Python? H2O R api: recuperando el modelo óptimo de la búsqueda de cuadrícula ¿Tiene Python un módulo para analizar las solicitudes y respuestas HTTP? Importando un módulo python sin ejecutarlo realmente ¿Es posible implementar un Python para un bucle de rango sin una variable de iterador? Pyusb en Windows 8.1 – no hay backend disponible – ¿Cómo instalar libusb? ¿Cómo buscar y reemplazar en Python? Consulta del filtro SQLAlchemy “columna LIKE ANY (matriz)” Cómo explotar una lista dentro de una celda de Dataframe en filas separadas

Usando Requests y BeautifulSoup – Python devuelve la etiqueta sin texto

Estoy intentando capturar el número de visitas en esta página, pero python devuelve la etiqueta sin texto.

Esto es lo que he hecho. 

import requests from bs4 import BeautifulSoup r = requests.get("http://www.kijiji.ca/v-2-bedroom-apartments-condos/city-of-halifax/clayton-park-west-condo-style-luxury-2-bed-den/1016364514") soup = BeautifulSoup(r.content) print soup.find_all("span",{"class":"ad-visits"})

Los valores que está intentando raspar están rellenados por javascript, por lo que en este caso no funcionarán las requests o los requests se beautfulsoup .

Tendrá que usar algo como el selenium para obtener la salida. 

 from bs4 import BeautifulSoup from selenium import webdriver driver = webdriver.Firefox() driver.get("http://www.kijiji.ca/v-2-bedroom-apartments-condos/city-of-halifax/clayton-park-west-condo-style-luxury-2-bed-den/1016364514") soup = BeautifulSoup(driver.page_source , 'html.parser') print soup.find_all("span",{"class":"ad-visits"})

Selenium devolverá la fuente de la página como se representa y luego puede usar beautifulsoup para obtener el valor 

 [385]