对于scrapy ，一般都是定向爬虫，目标很明确，那对于不定向的爬虫，有什么好的框架推荐吗？

重要提示：提问者不能发表回复，可以通过评论与回答者沟通，沟通后可以通过编辑功能完善问题描述，以便后续其他人能够更容易理解问题.