https://github.com/oditynet/websearch

web search
https://github.com/oditynet/websearch

Last synced: about 1 year ago
JSON representation

web search

• Host: GitHub
• URL: https://github.com/oditynet/websearch
• Owner: oditynet
• License: apache-2.0
• Created: 2025-04-03T18:07:22.000Z (about 1 year ago)
• Default Branch: main
• Last Pushed: 2025-04-03T18:12:41.000Z (about 1 year ago)
• Last Synced: 2025-04-03T19:23:34.203Z (about 1 year ago)
• Language: Python
• Homepage:
• Size: 108 KB
• Stars: 0
• Watchers: 1
• Forks: 0
• Open Issues: 0
• Metadata Files:
  • Readme: README.md
  • License: LICENSE

Awesome Lists containing this project

README

          
# websearch

Моя попытка проиндексировать интернет и сделать свою поисковую систему. 

Авто не несет ответственность за незаконное сканирование интернета.



TODO:

  1) Robot and header проверка что можно а что нельза сканировать

  2) SNI check реализовать

  3) Resolve host name | сделал +