https://github.com/terratensor/kremlin-parser
https://github.com/terratensor/kremlin-parser
Last synced: 3 months ago
JSON representation
- Host: GitHub
- URL: https://github.com/terratensor/kremlin-parser
- Owner: terratensor
- License: bsd-3-clause
- Created: 2024-02-05T20:27:34.000Z (about 2 years ago)
- Default Branch: main
- Last Pushed: 2024-02-28T21:14:32.000Z (about 2 years ago)
- Last Synced: 2024-06-19T14:16:04.349Z (almost 2 years ago)
- Language: Go
- Size: 89.8 KB
- Stars: 0
- Watchers: 2
- Forks: 0
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
- License: LICENSE
Awesome Lists containing this project
README
# kremlin-parser
```
CONFIG_PATH=./config/local.yaml go run ./cmd/kremlin-parser/main.go
```
### Реализовано
- парсер rss ленты сайта кремля, русская и английская версии ленты
- добавление новых записей из ленты событий в мантикору
- обновление существующих записей из ленты в мантикору
- реализована возможность спарсить всю ленту событий
- для этого при запуске парсера необходимо указать флаг `parser -p=N`, где N — необходимое количество страниц ленты, которые должен обработать парсер. На данный момент 3323 страницы на русском языке и 1904 на английском языке.
- запуск парсера в качестве службы, при запуске указать флаг `parser -s`
#### TODO
- фронтенд для поиска.