Ecosyste.ms: Awesome

An open API service indexing awesome lists of open source software.

Awesome Lists | Featured Topics | Projects

https://github.com/yryryk/little-parser

Last synced: about 1 month ago
JSON representation

Host: GitHub
URL: https://github.com/yryryk/little-parser
Owner: yryryk
Created: 2023-11-29T08:50:30.000Z (about 1 year ago)
Default Branch: main
Last Pushed: 2023-12-03T11:51:30.000Z (about 1 year ago)
Last Synced: 2024-12-10T20:40:06.838Z (about 1 month ago)
Language: JavaScript
Size: 28.3 KB
Stars: 0
Watchers: 1
Forks: 0
Open Issues: 0
Metadata Files:
- Readme: README.md

Awesome Lists containing this project

README

        # little-parser

Тестовое задание 

## Описание

Парсер позволяющий собрать информацию обо всех товарах категории сайта DNS-shop.ru (по умолчанию https://www.dns-shop.ru/catalog/17a8d26216404e77/vstraivaemye-xolodilniki/) (Url в файле "constants.js").


Сохраняет наименования и цены в папку src в файл формата .csv типа "\-\.csv"


## Стек технологий

JavaScript


NodeJS


Puppeteer


## Запуск проекта

`npm i` — загружает зависимости


`npm start` — запускает проект 
 

## Исправления

Проведён рефакторинг в соответствии с: https://stackoverflow.com/questions/55664420/page-evaluate-vs-puppeteer-methods 


Исправлен баг с режимом работы в ```headless: "New"```. Оказалось, что баг возникает только в безголовом режиме из-за использования ```const page = (await browser.pages())[0];``` вместо ```const page =  await browser.newPage();```, при том что в режиме ```headless: false``` всё работало.