标签 scrapy 下的文章

步骤/目录:
1.需求介绍
2.准备工作
    (0)安装python库
    (1)创建scrapy项目
    (2)创建并运行mysql
    (3)创建并运行redis
    (4)创建python自建库
        a.log.py
        b.redis.py
        c.mysql.py
        d.interaction.py
        e.torrent_parser.py
        f.其他
3.scrapy项目的修改
    (1)items.py
    (2)middlewares.py
    (3)pipelines.py
    (4)settings.py
    (5)爬虫
4.使用说明

- 阅读剩余部分 -

步骤/目录:
1.运行mysql数据库与准备工作
2.自建库
3.创建、修改、运行scrapy项目
    (1)其他配置
    (2)爬虫配置
        a.a2u.py
        b.clarketm.py
        c.cool_proxy.py
        d.free_proxy_list.py
        e.ip3366.py
        f.ipaddress.py
        g.jiangxianli.py
        h.kuaidaili.py
        i.pubproxy.py
        j.rmccurdy.py
        k.sunny9577.py
        l.TheSpeedX.py
    (3)运行爬虫
4.验证ip
5.日常使用

- 阅读剩余部分 -