- 博客(6)
- 收藏
- 关注
原创 小试牛刀-如何用数据洞察一场直播
一 数据本文以映客直播为例,首先是数据抓取,通过websocket方式抓取弹幕信息,数据是长这样的:{"b":{"ev":"s.m"},"f":0,"dest":3,"userid":83014596,"p":"r","liveid":"1487430423167097","ms":[{"id":33,"tp":"like","cl":[103,195,184]}],"timeStamp":148
2017-02-20 22:34:58
592
转载 [转]Python字符串的编码转换、存储
文章转载自http://www.qmailer.net/遇到的情况主要是,程序打日志的时候直接把中文的utf8编码值写到了日志文件里,在分析日志的时候需要将这类文本再转换为utf8编码的数据。 用到的就是string-escape到utf-8的转换方法: strescapestr.decode(‘string-escape’)
2016-12-09 16:59:26
462
原创 python aerospike client 实现CAS更新操作
有需求是对aerospike的数据先取出来,修改后再写入aerospike,这个时候就需要实现aerospike的CAS(Compare and Set/Swap)操作。Google以后发现利用Generation policy可以实现。 先记录读取数据时返回的meta信息,然后put()的时候比较当时的meta信息与读数据时的是否一致,一致时才写入,否则会报错。 代码:bin_name =
2015-12-15 10:14:30
1121
原创 vim删除文本文件行末的^M符号
一些来源于windows平台的文本文件,在linux平台下打开后行末会显示^M符号。 使用vim将其删除。 vim命令:%s/^M//g^M符号要用 [ctrl+v][ctrl+m] 按出来
2015-11-09 16:13:41
420
原创 python 提取url中的主域名
python 提取url中的主域名参考了Ourren的博客。目录python 提取url中的主域名 目录 需求 方法 urlparse 正则表达式 tldextract需求给定url,比如 http://blog.youkuaiyun.com ,提取出youkuaiyun.com方法urlparse使用python的urlparse模块解析只能得到完整的域名,不能提取出主域名。import urlparse url =
2015-11-06 13:09:57
6281
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅