ccsens_wiki
/
wiki_enterprise_python
5
0
Fork 0
Code Issues Pull Requests Releases Wiki Activity
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.
5 Commits
1 Branch
0 Tags
676 KiB
 
Tree: 80e47111c2
Branches Tags
${ item.name }
Create tag ${ searchTerm }
Create branch ${ searchTerm }
from '80e47111c2'
${ noResults }
wiki_enterprise_python/demo1/logs/2020_7_25.log

342 lines
37 KiB
Raw Blame History

2020-07-25 09:09:10 [scrapy.utils.log] INFO: Scrapy 2.2.0 started (bot: demo1)
2020-07-25 09:09:10 [scrapy.utils.log] INFO: Versions: lxml 4.5.1.0, libxml2 2.9.5, cssselect 1.1.0, parsel 1.6.0, w3lib 1.22.0, Twisted 20.3.0, Python 3.7.8 (tags/v3.7.8:4b47a5b6ba, Jun 28 2020, 08:53:46) [MSC v.1916 64 bit (AMD64)], pyOpenSSL 19.1.0 (OpenSSL 1.1.1g 21 Apr 2020), cryptography 2.9.2, Platform Windows-10-10.0.18362-SP0
2020-07-25 09:09:10 [scrapy.crawler] INFO: Overridden settings:
{'BOT_NAME': 'demo1',
'CONCURRENT_REQUESTS': 1,
'DOWNLOAD_DELAY': 8,
'LOG_ENABLED': False,
'LOG_FILE': 'logs/2020_7_25.log',
'LOG_LEVEL': 'INFO',
'LOG_STDOUT': True,
'NEWSPIDER_MODULE': 'demo1.spiders',
'RETRY_HTTP_CODES': [500, 502, 503, 504, 400, 403, 404, 408],
'RETRY_TIMES': True,
'SPIDER_MODULES': ['demo1.spiders']}
2020-07-25 09:09:10 [scrapy.extensions.telnet] INFO: Telnet Password: 356dd55a959a2996
2020-07-25 09:09:10 [scrapy.middleware] INFO: Enabled extensions:
['scrapy.extensions.corestats.CoreStats',
'scrapy.extensions.telnet.TelnetConsole',
'scrapy.extensions.logstats.LogStats']
2020-07-25 09:09:10 [stdout] INFO: 我是RundomUserAgentMiddleware
2020-07-25 09:09:10 [scrapy.middleware] INFO: Enabled downloader middlewares:
['scrapy.downloadermiddlewares.httpauth.HttpAuthMiddleware',
'scrapy.downloadermiddlewares.downloadtimeout.DownloadTimeoutMiddleware',
'scrapy.downloadermiddlewares.defaultheaders.DefaultHeadersMiddleware',
'demo1.middlewares.RundomUserAgentMiddleware',
'demo1.middlewares.DingZhiCookieMiddleware',
'scrapy.downloadermiddlewares.retry.RetryMiddleware',
'scrapy.downloadermiddlewares.redirect.MetaRefreshMiddleware',
'scrapy.downloadermiddlewares.httpcompression.HttpCompressionMiddleware',
'scrapy.downloadermiddlewares.redirect.RedirectMiddleware',
'scrapy.downloadermiddlewares.cookies.CookiesMiddleware',
'scrapy.downloadermiddlewares.httpproxy.HttpProxyMiddleware',
'scrapy.downloadermiddlewares.stats.DownloaderStats']
2020-07-25 09:09:10 [scrapy.middleware] INFO: Enabled spider middlewares:
['scrapy.spidermiddlewares.httperror.HttpErrorMiddleware',
'scrapy.spidermiddlewares.offsite.OffsiteMiddleware',
'scrapy.spidermiddlewares.referer.RefererMiddleware',
'scrapy.spidermiddlewares.urllength.UrlLengthMiddleware',
'scrapy.spidermiddlewares.depth.DepthMiddleware']
2020-07-25 09:09:10 [stdout] INFO: 我也不知道啊
2020-07-25 09:09:10 [scrapy.middleware] INFO: Enabled item pipelines:
['demo1.pipelines.MysqlYiBUPipeline']
2020-07-25 09:09:10 [scrapy.core.engine] INFO: Spider opened
2020-07-25 09:09:10 [scrapy.extensions.logstats] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min)
2020-07-25 09:09:10 [scrapy.extensions.telnet] INFO: Telnet console listening on 127.0.0.1:6023
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66899
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66901
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66875
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66916
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66903
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66917
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66904
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66497
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66907
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66905
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66486
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66498
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66014
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65854
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65861
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65869
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65637
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65515
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65853
2020-07-25 09:09:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65516
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65867
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65904
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65903
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65855
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65889
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65850
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64663
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65870
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65908
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63857
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63631
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63242
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62685
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62398
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65888
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62107
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61458
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61395
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61389
2020-07-25 09:09:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61396
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65396
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65517
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65518
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65864
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65873
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65872
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64665
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65907
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65875
2020-07-25 09:09:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65876
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64246
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64243
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64244
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65877
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65399
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64242
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63843
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63632
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65879
2020-07-25 09:09:29 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65884
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/59300
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58975
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/59298
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58832
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58833
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58091
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57600
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57589
2020-07-25 09:09:36 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56711
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56521
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56730
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56513
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56734
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55638
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55707
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55829
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55709
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/53756
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/53743
2020-07-25 09:09:37 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55773
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65884
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65882
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64241
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64240
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62693
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65887
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62416
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64239
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62267
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62272
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64245
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61772
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61381
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61457
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61399
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60714
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60713
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60731
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/64174
2020-07-25 09:09:46 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60745
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55856
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55773
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/53746
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55724
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/53174
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55781
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/50444
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/50445
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/50447
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/50448
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49738
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/50451
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49933
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49737
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49746
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49739
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57523
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49740
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49741
2020-07-25 09:09:57 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/49742
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66918
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/66500
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65858
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65890
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65909
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65678
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65295
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65862
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65893
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65896
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65898
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65900
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65865
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65902
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63856
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65857
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/65866
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/63386
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62269
2020-07-25 09:10:05 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62268
2020-07-25 09:10:10 [scrapy.extensions.logstats] INFO: Crawled 7 pages (at 7 pages/min), scraped 0 items (at 0 items/min)
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55839
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55841
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55836
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/55831
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/46922
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/46923
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/46924
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/42979
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/42994
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40859
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/42997
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40330
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40327
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/39293
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40306
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40307
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40338
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40309
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40341
2020-07-25 09:10:14 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40340
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62271
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62120
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62109
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/62115
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61388
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/61391
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60721
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60732
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60725
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60734
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60728
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60246
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60242
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60717
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60237
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60240
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/59695
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/60718
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/59303
2020-07-25 09:10:26 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/59307
2020-07-25 09:10:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40310
2020-07-25 09:10:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40342
2020-07-25 09:10:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40312
2020-07-25 09:10:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40345
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40346
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40317
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40356
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/32286
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31963
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/40357
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31044
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31051
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31040
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31050
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31048
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31047
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31041
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31046
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31049
2020-07-25 09:10:35 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31052
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58968
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58971
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58831
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58838
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58961
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58837
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58841
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58503
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58505
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58103
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/58258
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57828
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57461
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57598
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57593
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57465
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57156
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57601
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/57158
2020-07-25 09:10:45 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/56926
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31041
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31055
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31056
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31011
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/29854
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/31402
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/29869
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/29871
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/28194
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/26630
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/25042
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/23115
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/23117
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/21870
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/20963
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/20721
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/19099
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/18143
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/17298
2020-07-25 09:10:55 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/17297
2020-07-25 09:11:00 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6188
2020-07-25 09:11:00 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=1&citycode=RegisterArea_HBDQ_Shanxi_DaTongShi&more=False----这个就是一页啊
2020-07-25 09:11:10 [scrapy.extensions.logstats] INFO: Crawled 13 pages (at 6 pages/min), scraped 0 items (at 0 items/min)
2020-07-25 09:11:11 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/7275
2020-07-25 09:11:11 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=2&citycode=RegisterArea_HBDQ_Shanxi_DaTongShi&more=False----这个就是一页啊
2020-07-25 09:11:23 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=3&citycode=RegisterArea_HBDQ_Shanxi_DaTongShi&more=False----没有发布过内容
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6193
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6192
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6190
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6194
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6189
2020-07-25 09:11:34 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6195
2020-07-25 09:11:34 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=4&citycode=RegisterArea_HBDQ_Shanxi_DaTongShi&more=False----这个就是一页啊
2020-07-25 09:11:44 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=1&citycode=RegisterArea_HBDQ_Shanxi_YangQuanShi&more=False----没有发布过内容
2020-07-25 09:11:56 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6205
2020-07-25 09:11:56 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=2&citycode=RegisterArea_HBDQ_Shanxi_YangQuanShi&more=False----这个就是一页啊
2020-07-25 09:12:06 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=3&citycode=RegisterArea_HBDQ_Shanxi_YangQuanShi&more=False----没有发布过内容
2020-07-25 09:12:10 [scrapy.extensions.logstats] INFO: Crawled 19 pages (at 6 pages/min), scraped 0 items (at 0 items/min)
2020-07-25 09:12:16 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=4&citycode=RegisterArea_HBDQ_Shanxi_YangQuanShi&more=False----没有发布过内容
2020-07-25 09:12:28 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/9357
2020-07-25 09:12:28 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=1&citycode=RegisterArea_HBDQ_Shanxi_JinZhongShi&more=False----这个就是一页啊
2020-07-25 09:12:38 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/7283
2020-07-25 09:12:38 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/7279
2020-07-25 09:12:38 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6523
2020-07-25 09:12:38 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/6296
2020-07-25 09:12:38 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=2&citycode=RegisterArea_HBDQ_Shanxi_JinZhongShi&more=False----这个就是一页啊
2020-07-25 09:12:50 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=3&citycode=RegisterArea_HBDQ_Shanxi_JinZhongShi&more=False----没有发布过内容
2020-07-25 09:12:58 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=4&citycode=RegisterArea_HBDQ_Shanxi_JinZhongShi&more=False----没有发布过内容
2020-07-25 09:13:07 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=1&citycode=RegisterArea_HBDQ_Shanxi_XinZhouShi&more=False----没有发布过内容
2020-07-25 09:13:10 [scrapy.extensions.logstats] INFO: Crawled 25 pages (at 6 pages/min), scraped 0 items (at 0 items/min)
2020-07-25 09:13:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/7697
2020-07-25 09:13:18 [stdout] INFO: 这个链接已经爬过了-----：https://www.chacewang.com/news/NewsDetail/5416
2020-07-25 09:13:18 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=2&citycode=RegisterArea_HBDQ_Shanxi_XinZhouShi&more=False----这个就是一页啊
2020-07-25 09:13:26 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=3&citycode=RegisterArea_HBDQ_Shanxi_XinZhouShi&more=False----没有发布过内容
2020-07-25 09:13:36 [stdout] INFO: url:https://www.chacewang.com/news/PIndex_New?chaPlate=4&citycode=RegisterArea_HBDQ_Shanxi_XinZhouShi&more=False----没有发布过内容
2020-07-25 09:13:36 [scrapy.core.engine] INFO: Closing spider (finished)
2020-07-25 09:13:36 [stdout] INFO: 爬虫运行完毕了
2020-07-25 09:13:36 [scrapy.statscollectors] INFO: Dumping Scrapy stats:
{'downloader/request_bytes': 12478,
'downloader/request_count': 28,
'downloader/request_method_count/GET': 28,
'downloader/response_bytes': 337611,
'downloader/response_count': 28,
'downloader/response_status_count/200': 28,
'elapsed_time_seconds': 265.967696,
'finish_reason': 'finished',
'finish_time': datetime.datetime(2020, 7, 25, 1, 13, 36, 488601),
'log_count/INFO': 289,
'request_depth_max': 2,
'response_received_count': 28,
'scheduler/dequeued': 28,
'scheduler/dequeued/memory': 28,
'scheduler/enqueued': 28,
'scheduler/enqueued/memory': 28,
'start_time': datetime.datetime(2020, 7, 25, 1, 9, 10, 520905)}
2020-07-25 09:13:36 [scrapy.core.engine] INFO: Spider closed (finished)