Böyle bir şey buldum, ama hiç denemedim.
belki işe yarar
https://pythonrepo.com/repo/VeNoMouS...n-web-crawling