imported>Soleverlee：/* 运行 */

2017-01-11T06:39:54Z

运行

←上一版本		2017年1月11日 (三) 06:39的版本
第42行：		第42行：
	<source lang="bash">		<source lang="bash">
	cd riguz		cd riguz
	scrapy crawl helloworld		scrapy crawl helloworld -s LOG_FILE=scrapy.log
	</source>		</source>
	运行结果为两个下载的页面:		运行结果为两个下载的页面:

imported>Soleverlee：以“=创建项目= scrapy startproject riguz 生成的项目如下：

 E:. │  scrapy.cfg │ └─riguz     │  items.py     │...”为内容创建页面

2017-01-10T09:40:07Z

以“=创建项目= <source lang="bash"> scrapy startproject riguz </source> 生成的项目如下： <pre> E:. │ scrapy.cfg │ └─riguz │ items.py │...”为内容创建页面

新页面

=创建项目=
<source lang="bash">
scrapy startproject riguz
</source>
生成的项目如下：
<pre>
E:.
│ scrapy.cfg
│
└─riguz
│ items.py
│ middlewares.py
│ pipelines.py
│ settings.py
│ __init__.py
│
└─spiders
__init__.py
</pre>
=创建爬虫=
在spiders文件夹下面新建一个文件，例如hello_spider.py:
<source lang="python">
import scrapy
class QuotesSpider(scrapy.Spider):
name = "helloworld"

def start_requests(self):
urls = [
'https://quotes.toscrape.com/page/1/',
'http://quotes.toscrape.com/page/2/',
]
for url in urls:
yield scrapy.Request(url=url, callback=self.parse)
def parse(self, response):
page = response.url.split("/")[-2]
filename = 'quotes-%s.html' % page
with open(filename, 'wb') as f:
f.write(response.body)
self.log('Saved file %s' % filename)
</source>
=运行=
<source lang="bash">
cd riguz
scrapy crawl helloworld
</source>
运行结果为两个下载的页面:
<pre>
│ quotes-1.html
│ quotes-2.html
│ scrapy.cfg
</pre>
[[Category:Programe]]

[[Category:Programe]]

Scrapy:Hello World - 版本历史

imported>Soleverlee：/* 运行 */

imported>Soleverlee：以“=创建项目= scrapy startproject riguz 生成的项目如下：
E:. │ scrapy.cfg │ └─riguz │ items.py │...”为内容创建页面

Scrapy:Hello World - 版本历史

imported>Soleverlee：​/* 运行 */

imported>Soleverlee：​以“=创建项目= scrapy startproject riguz 生成的项目如下： E:. │ scrapy.cfg │ └─riguz │ items.py │...”为内容创建页面

imported>Soleverlee：/* 运行 */

imported>Soleverlee：以“=创建项目= scrapy startproject riguz 生成的项目如下：
E:. │ scrapy.cfg │ └─riguz │ items.py │...”为内容创建页面