request模塊讓http請求變的更加簡單。最簡單的一個示例:
1: var request = require('request');
2:
3: request('http://www.google.com', function (error, response, body) {
4: if (!error && response.statusCode == 200) {
5: console.log(body);
6: }
7: })
安裝:
npm install request
可以用request的pipe方法很方便的獲取圖片的文件流
1: var request = require('request'),
2: fs = require('fs');
3:
4: request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));
request也支持OAuth的簽名請求
更多使用方法和說明可點擊這里繼續閱讀:https://github.com/mikeal/request/
這里寫了一個很簡單的示例,用來抓取去哪兒網的酒店查詢數據(獲取酒店某一時間段內各房型的價格排名):
1: var request = require('request'),
2: fs = require('fs');
3:
4:
5: var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5';
6:
7: request({uri:reqUrl}, function(err, response, body) {
8:
9: //console.log(response.statusCode);
10: //console.log(response);
11:
12: //如果數據量比較大,就需要對返回的數據根據日期、酒店ID進行存儲,如果獲取數據進行對比的時候直接讀文件
13: var filePath = __dirname + '/data/data.js';
14:
15: if (fs.exists(filePath)) {
16: fs.unlinkSync(filePath);
17:
18: console.log('Del file ' + filePath);
19: }
20:
21: fs.writeFile(filePath, body, 'utf8', function(err) {
22: if (err) {
23: throw err;
24: }
25:
26: console.log('Save ' + filePath + ' ok~');
27: });
28:
29: console.log('Fetch ' + reqUrl + ' ok~');
30: });
這個例子源於一個做酒店業務的朋友,想知道自己在網站上提供給客戶的價格的競爭力:
1、如果提供的價格過低,自己賺到的錢就會少了,所以如果自己價格是最低了,就需要看第二低是多少,然后決定是否調整;
2、如果提供的價格過高,那么被搜索出來的排名結果就比較靠后,沒什么客戶來預訂酒店,業務就沒有了
因為做的酒店預訂業務很多,比如超過2千家以上,如果一個一個依賴人工去查詢排名就比較被動,而且很難再做大,所以他的這個需求我分析了一下是可行的,而且可以做成一個很好的實時預警系統(當然數據5~10分鍾會自動在頁面刷新一次)。這樣才能保障利潤最大化,提高銷售、客戶部門的工作效率,加快酒店的合作數量和公司的人員擴張:
1、不虧本,虧本的買賣不做;
2、如果發現提供的價格過低或是過高,需要支持調用平台的api接口,直接修改價格;
3、有自動生成分析報表功能,分析競爭對手在價格調整策略上的變化情況;