
Python
我吃饭炒蛋
这个作者很懒,什么都没留下…
展开
-
关于xpath解析网页中tbody问题
关于xpath解析网页中tbody问题在用xpath解析网页的时候,会遇到tbody标签。tbody标签有的时候可以解析,有的时候不可以解析,遇到tbody标签时要看网页源代码,如果源代码有tbody标签,就要加上tbody标签才能解析。 如果源代码没有tbody标签,那么tbody标签是浏览器对html文本进行一定的规范化而强行加上去的,这时如果xpath中有tbody则无法解析出来,此时...原创 2018-09-05 16:03:44 · 3437 阅读 · 1 评论 -
'str' object does not support item assignment
'str' object does not support item assignmentif reltime != None: item['reltime'] = reltime.replace(u'\u3000', '').replace(u'\r', '')else: item= '' item['xxx'] = 'sss'if editor != None:it...原创 2018-10-11 18:02:08 · 826 阅读 · 0 评论 -
scrapy 在不同的Request之间传递参数的办法
scrapy 在不同的抓取级别的Request之间传递参数的办法下面的范例中,parse_item方法通过meta向parse_details方法中传递参数item,这样就可以在parse_details方法中获取到这个参数的值。注意:meta={'item': item}中如果有多个参数,则每个参数间用英文逗号隔开,例如:met...转载 2018-10-15 15:00:15 · 690 阅读 · 0 评论