| Nombre y Apellidos | Correo | GitHub |
|---|---|---|
| Ariel Plasencia Díaz | arielplasencia00@gmail.com | @ArielXL |
| Adriana Plasencia Díaz | adricivilpd@gmail.com | @fcadrianapladia |
El objetivo de esta pequeña tarea es proporcionar un scrapper para páginas web con el objetivo de poder descargar todo su contenido. También con esta técnica podemos extraer información y transformarla en información estructurada que podemos analizar y almacenar.
La implementación se encuentra totalmente en python 3. Pensamos que es una implementación legible y fácil de entender donde no hace falta tener conocimientos profundos de este lenguaje de programación. Nos apoyamos fundamentalmente en la librería beautifulsoup4 para la implementación. La clase Scrapper recibe la url en forma de string y un entero que representa el nivel de profundidad a realizar el web scrapping. Los resultados se muestran en la carpeta downloads.
Para la instalación de la misma ejecutamos el siguiente comando:
pip install -r requirements.txtEn el archivo makefile proveemos una manera fácil, sencilla y rápida para correr nuestra implementación.
Para la ejecución, escriba las siguientes líneas en una terminal abierta en este directorio:
cd src/
make run