crawl_xiaohua/docs/Development.md

Development

[x]提供 web ui 和命令行两种模式。

目前支持如下网站：

[x] xiaohua.com
[x] meizitu.com
[x] qinimg.com

flask web ui操作；

cd /d C:/Users/dell/Desktop/xiaohua-crawl
virtualenv .venv
source .venv/bin/activate
pip install -r requirements.txt

python main.py server
python mian.py server --config xx

命令行模式：

#python setup.py --requires | xargs pip install

# 校花网
python main.py run --extractor xiaohua --cmd crawl
# python main.py shell --extractor xiaohua --cmd crawl

# 妹子网项目：
python main.py run --extractor meizitu

# coser `scrapy crawl coser -o items.csv -t csv`
# WorldCosplay `python worldcosplay.py 53056`

打包exe：

virtualenv .venv 

pip install -r requirements.txt

pip install pyinstaller
pyinstaller -F -c -i launch200.ico main.py

扩展打包：

python setup.py bdist_wheel

python setup.py install