pymongo是在Python環境下使用MongoDB的方法。
以某電商網站搜索“連衣裙”的第一頁商品數據抓取下來並存入MongoDB數據庫。
import requests import pymongo client = pymongo.MongoClient('localhost',27017) # 創建數據庫 taobao = client['taobao'] # 新建表 search_result = taobao['search_result'] # 爬取數據 url = '***' strhtml = requests.get(url) result = strhtml.json() for item in result['listItem']: json_data = { 'title':item['title'], 'price':float(item['price']), 'sold':int(item['sold']), 'location':item['location'] } # 表中寫入數據 search_result.insert(json_data)
查詢位置在“浙江 杭州”,並且價格大於100元的商品數據
for item in search_result.find({"location":"浙江 杭州","price":{'$gt':100}}) print(item)
將位置“浙江 杭州”改為“浙江”
search_result.update({"location":"浙江 杭州"},{"$set":{"location":"浙江”}})
刪除銷量小於1000件的商品數據
search_result.remove({"sold":{'$lt':1000}})