An open API service indexing awesome lists of open source software.

https://github.com/ronierisonmaciel/crawler

Um crawler utilizando BeautifulSoup tem como objetivo extrair informações de sites de maneira eficiente e estruturada. BeautifulSoup é uma biblioteca Python que facilita a análise e extração de dados de páginas HTML e XML. O projeto permite coletar e organizar informações relevantes.
https://github.com/ronierisonmaciel/crawler

beautifulsoup4 crawler crawling python python3

Last synced: about 1 year ago
JSON representation

Um crawler utilizando BeautifulSoup tem como objetivo extrair informações de sites de maneira eficiente e estruturada. BeautifulSoup é uma biblioteca Python que facilita a análise e extração de dados de páginas HTML e XML. O projeto permite coletar e organizar informações relevantes.

Awesome Lists containing this project

README

          

# Crawler Tutorial

Clone the Crawler.

```bash
git clone git@github.com:RonierisonMaciel/crawler.git
```

Create an environment virtual `venv`

```python
python3 -m venv .venv
source .venv/bin/activate
```

Install the requirements

```python
pip install -r requirements.txt
```

Execute the command

```python
python script.py
```