Cocytusla-优快云博客

原创 BeautifulSoup

beautifulsoup4 安装 sudo pip3 install beautifulsoup4 使用流程 from bs4 import BeautifulSoup #1.创建解析对象 soup=BeautifulSoup(html,'lxml') #2.调用find_all()方法 r_list=soup.find_all(节点,条件) BeautifulSoup支持的解析库 1.lxm...

2019-10-24 10:01:33 172

原创 scrapy抓取360图片

items.py import scrapy class SoItem(scrapy.Item): # define the fields for your item here like: # name = scrapy.Field() img_url = scrapy.Field() so.py # -*- coding: utf-8 -*- import scra...

2019-10-22 11:33:32 206

原创 scrapy抓取盗墓笔记小说

scrapy startproject Daomu cd Daomu/ scrapy genspider daomu www.daomubiji.comom

2019-10-21 16:47:42 273

原创 scrapy抓取猫眼电影

# -*- coding: utf-8 -*- import scrapy from ..items import MaoyanItem class MaoyanSpider(scrapy.Spider): name = 'maoyan' allowed_domains = ['maoyan.com'] start_urls = ['https://maoyan.com...

2019-10-21 16:18:51 264

原创 cookie模拟登录人人网

方法一 - 登录网站手动抓取Cookie 方法二 - Cookie处理为字典方法三 - Request模块处理Cookie 1.先post到web站点 post_url=‘http://www.renren.com/PLogin.do’ 2.再get要抓取的页面 get_url=‘http://www.renren.com/972496128/profile’ import requests ...

2019-10-17 11:26:04 274

原创 Redis

sudo /etc/init.d/redis-server status /etc/redis/redis.conf /etc/mysql/mysql.conf.d/mysqld.cnf 更该密码 500 行设置远程连接 1.bind 127.0.0.1 ::1 2.protected

2019-09-30 11:32:25 97

原创 hasattr

hasattr（对象，‘属性名称’）：返回True/False;当前对象是否有对应属性名称的属性 getattr(对象，‘属性名称’)：返回具体值/error src='http://127.0.0.1:8000/media/xxx/xxx' ###2.models里面给对应表添加如下字段 avatar=models.ImageField(upload_to='avatar/',null=Tu...

2019-09-26 15:06:23 241

原创 mysql问题

1.get 和post 区别 2.Mysql锁有几种，死锁怎么产生 3.session和cookie的联系与区别，session为什么说是安全的 4.什么是生成器 5.primary key 和unique的区别 6.索引有什么用，大致原理是什么，设计索引有什么注意点 ...

2019-09-23 09:30:58 218

原创 AJAX

1.用计js触发xhr对象，异步的发送请求，并能接受响应。 2.特点：局部刷新 / 异步 3.GET请求 1.>创建xhr -> 1.IE7以上 2.IE6一下 2.->创建请求 xhr.open(‘get’,url,asyn[ture[false]]) 3.->设置回调函数 xhr.onreadystartechange=funcation(){ if (xhr.rea...

2019-09-20 10:22:57 151

原创中间件

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

2019-09-18 09:50:24 175

coccytusla的博客