laval_liyichen-优快云博客

原创 pygal输出png问题：dlopen() failed to load a library: cairo / cairo-2

背景最近一个比较棘手的问题，需要python程序可以直接根据数据生成图片。而之前做数据可视化，无论是echart还是其他和js相关的可视化库，都是通过js在浏览器中生成交互图像的。都不能直接生成图片，而py最常用的Matplotlib虽然数据图像准确度够了，但是美化太麻烦……最后找了一圈，发现了pygal这个，能生成本地图片美化程度也不错的库……然后又坑了pygal的坑pygal的结果输出默认为sv

2017-08-11 18:24:23 8174 1

转载 ssh登陆linux后台运行脚本不关闭

最近在将自己的一个项目从win转移到linux，所以在测试一些ssh启动脚本的事情。有一个问题就是通过ssh启动的脚本你一断开ssh，脚本就会被关闭掉。查了很多个办法比如nohup等，发现screen是个非常简单的办法。下文是使用方法以下全文转载 https://www.vpser.net/manage/screen.html VPS侦探在刚接触Linux时最怕的就是SSH远程登录Linux V

2017-05-07 21:44:56 2438

原创每日一坑 pyinstaller 将.py生成.exe 报错 “IndexError: tuple index out of range”

为了方便运营人员使用脚本，只好用pyinstaller将py打包为exe文件，用pysintaller居然报错 File "c:\anaconda3\lib\site-packages\PyInstaller\depend\utils.py", line 226, in __scan_code_instruction_for_ctypes name = co.co_names[oparg]

2017-04-07 18:16:18 20251 1

原创 python--threading 多线程的简单应用

最近做一个基于itchat的微信机器人，涉及到了点多线程运行的事项。基于itchat库进行的机器人具有信息监听功能，代码如下。@itchat.msg_register([TEXT],isFriendChat=True)def message_reply(msg): try: FromUserName = msg['FromUserName'] except:

2017-04-07 15:15:19 1503

原创 Python练手爬虫系列No.2 抓取知乎问题下所有回答中的图片（待续）

接着上一篇Python练手爬虫系列No.1 知乎福利收藏夹图片批量下载，今天我们来按照知乎问题抓图片！比起收藏夹，更加直接精准。为什么先抓收藏夹后抓取问题呢，其实是因为知乎的一点限制。那就是！知乎问题下方的回答是通过动态加载的……普通的静态网站抓取的办法是没办法获取到所有的数据的。那么怎么处理呢？我们一起试试。网页数据分析这个时候跟我做打开Firefox浏览器，按F12,进入网络模式下，

2017-03-29 00:07:55 2055

原创 selenium又一小坑无法用XPATH直接获取属性值需要使用.get_attribute(“href”)

在使用selenium进行抓取url的时候，试图使用find_elements_by_xpath来获取。因此想当然的直接使用XPATH的语法进行获取属性事例缩略后xml结构如下<div class="qg-limit-list" data-spm="1998564503" data-spm-max-idx><a href="//item.taobao.com/item.htm?spm=a

2017-03-23 22:48:51 30526 6

原创 Selenium配合chromedriver提示“Message: 'chromedriver' executable needs to be in PATH.Please see ...”

作为第一篇blog确实有点小儿科了，拖很久没开始写，为了开始写技术博客，先赶紧记录一个刚刚的麻烦事吧。最近用Selenium配合爬虫抓取淘抢购数据，结果刚写一段代码就开始报错。from selenium import webdriverbrowser = webdriver.Chrome()browser.get('https://qiang.taobao.com/')Traceback (

2017-03-23 16:59:32 39594 10

hacklyc的博客