python对于mongodb微博数据的操作

最新推荐文章于 2023-07-13 16:51:14 发布

原创最新推荐文章于 2023-07-13 16:51:14 发布 · 494 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #大数据

python 专栏收录该内容

4 篇文章

订阅专栏

本文介绍了一个使用Python和pymongo库来查询MongoDB数据库的方法。该脚本从文本文件中读取ID列表，并统计每个ID在指定MongoDB集合中出现的次数。此过程涉及到将文本文件中的数据转换为列表，然后遍历MongoDB数据库中的记录，查找匹配的ID并计数。

自己现在正在使用python对于mongdb数据库的一些内容查询筛选

#coding=utf-8
#!/usr/bin/python 
from pymongo import MongoClient


#打开uids.txt
f = open('/Users/pc/Desktop/beifen.txt', 'r')
#读取出uids的内容存入list1中
list1 = f.read()
#以回车符把list1转化为arrr（其中arr的每个元素都是字符串）
arr = list1.split("\n")
#把arr的每个元素转化为int型数据
#arr = [int(arr) for arr in arr if arr ]
#计算arr的长度
lens = len(arr)
print lens
#定义一个数组长度与arr相同，全部赋值为0（作为储存id的次数的数组）
arrynum = [0 for x in len(arr)]
j = 0
#建立MongoDB数据库连接
client = MongoClient('222.27.227.104',27017)
#连接所需数据库,test为数据库名
db=client.test
#遍历weibo中的对象
for i in db.weibo_pc.find():
    flag = i.has_key("reId")
    j = j+1
    if flag == True:
         print '正在进行这是第',j,'条数据'
         arrynum[arr.index(str(i["reId"]))] = arrynum[arr.index(str(i["reId"]))] + 1
    else:
        print '正在进行这是第',j,'条数据'
        arrynum[arr.index(str(i["oriId"]))] = arrynum[arr.index(str(i["oriId"]))] + 1
print arrynum
p = open('/Users/pc/Desktop/huizong.txt', 'w+')
for x in range (0,957650):
    p.write(arr[x])
    p.write(",")
    p.write(str(arrynum[x]))
    p.write("\n")
f.close()
p.close()