Python 中使用 MongoDB 存儲爬蟲數據

碼頭工人 10年前發布 | 2K 次閱讀 Python

現在在做一個簡單的搜索引擎,使用今日頭條的新聞數據作為數據源。這些數據都是非結構性的,比較適合用 MongoDB 來進行存儲。

以下為簡單使用的示例。

#!/usr/bin/python
# -*- coding:utf-8 -*-

import pymongo

class documentManager(object):
    def __init__(self):
        pass

    def connect_mongo(self):
        client = pymongo.Connection("127.0.0.1",27017)
        db = client.data_db
        collection = db.data_collection
        mydict = {"name":"Lucy", "sex":"female","job":"nurse"}
        collection.insert(mydict)

        for i in collection.find({"name":"Lucy"}):
            print i

if __name__ == '__main__':
    manager = documentManager()
    manager.connect_mongo()

來自:http://my.oschina.net/lvyi/blog/599719

 本文由用戶 admin 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!