scrapy xpath抓取节点的文本innerText、innerHTML、outerHTML

假设抓取：<p> xx<b>x< b>< p> 抓取p节点本身，得到的内容：<p>xx<b>x< b>< p>response xpath(& 39; div[@class="question"] div[2] div[2] div[1] p[1]& 39;) extract() 抓

【解决】scrapyd启动job时报错：exceptions.TypeError: __init__() got an unexpected keyword argument '_job'

进入项目spiders目录, 修改 spider py 文件（你自己的spider的主文件）：def __init__(self):改为：def __init__(self, *args, **kwargs):最后不要忘了重新部署一下：scrap

scrapyd 转入后台daemon守护模式运行的方法

scrapyd默认不会以daemon守护方式运行，想要转入后台守护运行的话，其实使用nohup就可以了：nohup scrapyd >> var log scrapyd log 2>&1 &以下是 scrapyd 注册成系统后台