原文:寫一個shell腳本利用wget抓取股票歷史數據

今天,大數據部老大交給我一項任務 抓取股票歷史數據。於是乎,我自行在網上找了一下,發現wget真真是一個非常強大的linux下載工具。我已經被深深震撼到了。下面敘述今天的一些過程,還是比較坎坷的。 首先,我利用公司現在存在的股票數據,使用hive查詢所有的股票代碼並導入本地: PS:上面這一步驟,因為一個小小的問題 開始沒有加關鍵字distinct,結果導致后期抓取數據抓到一大堆重復的股票代碼的 ...

2015-07-13 17:03 0 5058 推薦指數:

查看詳情

股票歷史數據

騰訊 分時成交 當天 http://stockhtm.finance.qq.com/sstock/quotpage/q/600103.htm#detail http://stock.gtimg. ...

Mon Nov 28 05:31:00 CST 2016 0 3026
Python股票歷史數據的獲取

獲取股票數據的接口很多,免費的接口有新浪、網易、雅虎的API接口,收費的就是證券公司及相應的公司提供的接口。收費試用的接口一般提供的數據只是最近一年或三年的,限制比較多,除非money足夠多。所以本文主要討論的是免費數據的獲取及處理。 國內提供股票數據的接口如sinajs ...

Tue Dec 17 02:55:00 CST 2019 0 10010
股票歷史數據下載梳理匯總(一)

1、股票基本信息接口描述:獲取滬深股票、港股基本信息接口地址:http://api.waizaowang.com/doc/getStockInfo?stockType=0接口參數: 字段 類型 是否必填 描述 ...

Thu Apr 08 06:27:00 CST 2021 1 206
股票歷史數據下載梳理匯總(一)

1、股票基本信息接口描述:獲取滬深股票、港股基本信息接口地址:http://api.waizaowang.com/doc/getStockInfo?stockType=0接口參數: 字段 類型 是否必填 描述 ...

Thu Apr 08 06:29:00 CST 2021 2 474
分享一個天氣歷史數據的采集腳本

最近一個項目中需要用到過往的天氣數據, 我找到了天氣后報這個網站 (www.tianqihoubao.com), 並在SS中完成了相關采集, 和大家分享一下. 首先分析這個網站提供了兩種信息: 1. 省市關系 2. 天氣記錄 對應的我們創建數據結構: >> ...

Wed Jan 22 19:28:00 CST 2014 4 4556
股票數據下載-下載股票歷史數據

下載股票歷史數據 今天介紹最簡單的股票數據下載方法,只要電腦安裝了Python就行(沒安裝或者不想折騰,點上面的鏈接也行)。 眾所周知股票歷史行情數據是做量化分析的第一步,如何下載股票歷史數據也成了入門第一坎,不過不要怕,只要你懂一點Python,一切都非常簡單。 在此我們假設已經安裝 ...

Thu Dec 26 22:38:00 CST 2019 0 302
股票編程之股票歷史數據獲取

由於雅虎接口的改變 ,雅虎的接口可能已經停用了,請用網易接口,只要把時間區間設大點即可 網易的接口是: 網易的數據格式為csv文件 日線 http://quotes.money.163.com/service/chddata.html?code=代碼&start=開始時 ...

Mon Feb 13 21:01:00 CST 2017 4 6493
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM