创建多个spider， scrapy genspider spidername domain

Urllib 模块提供了读取web页面数据的接口，我们可以像读取本地文件一样读取www和ftp上的数据

HTML本质上是XML的子集，但是HTML的语法没有XML那么严格，所以不能用标准的DOM或SAX来解析HTML

类定义：class <类名>: <语句> 类实例化后，可以使用其属性，实际上，创建一个类之后，可以通过类名访问其属性

yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make

使用Python的包管理工具pip或者easy_install来安装Scrapy

c/_cffi_backend.c:2:20: fatal error: Python.h: No such file or directory

最简单方法 sudo yum install MySQL-python

在Thread和Process中，应当优选Process，因为Process更稳定，而且，Process可以分布到多台机器上，而Thread最多只能分布到同一台机器的多个CPU上。

由于CentOS默认自带都python(2.4.3)版本较低,所以我们采用手动编译安装python的方式来使用python 2.7.2