- 博客(10)
- 收藏
- 关注
RSS订阅原创 BeautifulSoup 判断是不是 NavigableString 类型
from bs4.element import NavigableString print(isinstance('a', NavigableString))
2019-05-14 13:35:14
3873
原创 BeautifulSoup获取包含某字符串的元素
取出含有某个字符串的所有标签 response = requests.get(url='https://www.cnbc.com/2017/12/14/the-bitcoin-holiday-gift-guide-including-diamond-earrings-travel-and-soap.html') soup = BeautifulSoup(response.text, 'h...
2019-05-14 10:26:49
7985
原创 获取某tr在table中的索引
如图，要获取包含“数字式多道心电图”的td所在tr是table的第几个tr. content="<html> <head></head> <body> <table> <tbody> <tr> <td>序号</td> <td>标...
2019-05-14 10:16:30
1500
原创 索引的删除与重建是有顺序的，不然容易出问题
索引的删除与重建是有顺序的，不然容易出问题： 先在phoenix中删除索引 hbase中的索引会自动删除
2019-04-23 10:02:47
905
原创 java.io.IOException: Incompatible clusterIDs in /data/hadoop-2.7.7/tmp/dfs/data: namenode clusterID
2019-04-19 15:52:03
1089
原创 phoenix添加索引
在hbase-site.xml中增加如下配置 <property> <name>hbase.regionserver.wal.codec</name> <value>org.apache.hadoop.hbase.regionserver.wal.IndexedWALEditCodec</value> </prope...
2019-04-17 10:52:29
952
原创 pip freeze >xxx.txt
python项目在本地开发完成后，部署到其他服务器的时候总是要一直 python xxx.py运行后根据报错信息才知道缺少哪些包，不断地根据报错信息来安装包，非常的不方便，查阅资料发现这么做可以方便部署： 1、在当前项目所在目录下执行 pip freeze >xxx.txt 将当前环境的包导出到requirements.txt文件中 2、pip3 install -r xxx.txt...
2019-04-08 15:47:03
639
原创 DeprecationWarning: count is deprecated. Use Collection.count_documents instead.
提示count方法已经过时了，虽然能查出结果，但是受不了看见报错 改成如下它推荐的方法就可以了 count = mycollection.count_documents({"contentId": contentId})
2019-04-03 18:44:25
8405
2
原创 sleep(long millis, int nanos)没有精确纳秒级别
做一个rabbitMq的生产者消费者任务，生产者负责从数据库查询数据，放入mq,消费者从mq取数据，对数据进行解析，提取想要的字段。由于生产者放数据的速度超级快，而消费速度很慢，很容易造成队列中数据堆积。 首先想到的是多个消费者进行消费，采用mq的交换机的direct模式，随机生成abcd四个routing_key放入交换机。在消费端，声明四个队列，分别绑定abcd四个routing_key，这...
2019-03-29 15:32:41
1437
原创 squirrel无法连接阿里云hbase
本地在虚拟机上搭建了hbase集群，squirrel和java代码连接都是没问题的，生产环境用阿里云搭建了一套hbase集群（一台一hmaster：namenode和2个regionserver：hbase2和hbase3）却怎么都连不上。。 squirrel连接hbase连接超时： 只报了连接超时，并没有具体的报错信息，于是尝试用java来连接，java连不上，但还好有报错如下： 这个问题首先想...
2019-03-04 15:13:09
439
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人