网站建设资讯

NEWS

网站建设资讯

scrapy在python爬虫中建立目录的方法-创新互联

这篇文章主要介绍scrapy在python爬虫中建立目录的方法,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联公司是一家集做网站、网站制作、网站页面设计、网站优化SEO优化为一体的专业网站制作公司,已为成都等多地近百家企业提供网站建设服务。追求良好的浏览体验,以探求精品塑造与理念升华,设计最适合用户的网站页面。 合作只是第一步,服务才是根本,我们始终坚持讲诚信,负责任的原则,为您进行细心、贴心、认真的服务,与众多客户在蓬勃发展的市场环境中,互促共生。

scrapy代码目录

运行:

scrapy startproject tutorial

即可自动创建官方标准的代码目录。

tutorial/
    scrapy.cfg
    tutorial/
        __init__.py
        items.py
        pipelines.py
        settings.py
        spiders/
            __init__.py
            ...

其中:

tutorial/: 该项目的python总模块。

tutorial/items.py: 项目中的item文件,编写爬取的字段名称等;

tutorial/pipelines.py: 项目中的pipelines文件;

tutorial/settings.py: 项目的设置文件,较为重要;

tutorial/spiders/: 放置spider代码的主目录;


本文名称:scrapy在python爬虫中建立目录的方法-创新互联
文章起源:http://cdweb.net/article/goipj.html