您好, 欢迎来到 !    登录 | 注册 | | 设为首页 | 收藏本站

非常基本的例子

非常基本的例子

与“ Scrapy一目了然”网页相反,你可能会更幸运地先阅读本教程。

该教程暗示,Scrapy实际上是一个单独的程序。

运行该命令scrapy startproject tutorial将创建一个tutorial已为你设置的名为多个文件文件夹。

例如,在我的情况下,所述模块/包items,pipelines,settings和spiders已被添加到根包tutorial。

tutorial/
    scrapy.cfg
    tutorial/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...

TorrentItem班将被放在里面items.py,而MininovaSpider类会去里面spiders文件夹。

设置项目后,Scrapy的命令行参数似乎非常简单。它们采用以下形式:

scrapy crawl <website-name> -o <output-file> -t <output-type>

另外,如果你希望在没有创建项目目录的开销的情况下运行scrapy,则可以使用runtimepider命令:

scrapy runspider my_spider.py
其他 2022/1/1 18:19:49 有527人围观

撰写回答


你尚未登录,登录后可以

和开发者交流问题的细节

关注并接收问题和回答的更新提醒

参与内容的编辑和改进,让解决方法与时俱进

请先登录

推荐问题


联系我
置顶