使用迴圈抓取網頁data - 財經

Annie avatar
By Annie
at 2013-01-23T02:06

Table of Contents


各位好

小弟最近有在寫交易程式 我用的是VBA

不過需要 歷史 數據

我發現到網路上歷史數據常常是不正確的..而我又很龜毛..

所以我去台灣期貨交易所抓取

如果網頁是html 像是

http://www.twse.com.tw/ch/trading/indices/MFI94U/genpage
/Report201301/A941201301.php?STK_NO=&myear=2013&mmon=01

這類的php "問號" 後面有參數可以讓你導入..

你可以使用迴圈 再利用excel 讀取外部web資料來抓取

無奈 有一些網頁是沒有參數給你導入的

例如http://www.taifex.com.tw/chinese/3/3_1_1.asp

這種是要你自己選擇 然後按確定來得到你要的

請問這種的要怎麼使用迴圈抓取呢?

我會vba 以及 一點點javascript...

敬請高手指教~





--
Tags: 財經

All Comments

Kama avatar
By Kama
at 2013-01-26T09:04
你用VBA,就可以透過支援DDE的券商看盤軟體抓資料.
這比Parse HTML要快多了
Vanessa avatar
By Vanessa
at 2013-01-29T12:25
目前還不會使用劵商VBA與API做連結..><
Brianna avatar
By Brianna
at 2013-02-03T11:48
我也會html 以及 一滴滴 ASP and PHP ..
Liam avatar
By Liam
at 2013-02-07T02:54
GOOGLE之後還是沒有想到什麼idea..請高手給個提示..
Kelly avatar
By Kelly
at 2013-02-11T18:52
我用永豐的eleader看盤軟體為例:
Tristan Cohan avatar
By Tristan Cohan
at 2013-02-15T13:47
1. 把你要抓的資料透過DDE導入到Excel中(看eleader說明就會)
2.寫你的VBA程式去抓Excel儲存格中即時變動的資料
Mia avatar
By Mia
at 2013-02-19T17:33
3.永豐有提供一套API讓你呼叫下單,API的說使用說明裏面就有
Valerie avatar
By Valerie
at 2013-02-23T20:00
VBA的程式範例.
Erin avatar
By Erin
at 2013-02-26T06:41
永豐API網址:
http://www.sinotrade.com.tw/ec/eleader1/API.htm
Sandy avatar
By Sandy
at 2013-02-27T08:40
程式交易還抓網頁啊…
Genevieve avatar
By Genevieve
at 2013-03-01T02:21
DDE^^
Gary avatar
By Gary
at 2013-03-01T07:13
DDE比抓網頁簡單多了吧.....建議稍微了解一下摟
Skylar DavisLinda avatar
By Skylar DavisLinda
at 2013-03-06T04:25
我記得永豐的程式交易合作對象是奇狐,可以問有沒有便宜
Isla avatar
By Isla
at 2013-03-06T22:03
不過我們那個年代要這樣搞也就算了
Necoo avatar
By Necoo
at 2013-03-08T17:20
現在這麼方便的環境,幹嘛連一個月一千塊錢都捨不得花
Franklin avatar
By Franklin
at 2013-03-13T06:07
抓網頁啊..這個已經過時十年以上了耶.. @@"
Edith avatar
By Edith
at 2013-03-16T15:11
你們說的是即時資料嗎?? 我想要的是歷史資料
我記得DDE 是抓即時資料 對吧?
Edward Lewis avatar
By Edward Lewis
at 2013-03-17T04:47
要歷史資料很簡單
kimo打 群益multicharts 或 元大multicharts
Genevieve avatar
By Genevieve
at 2013-03-20T07:30
灌好主程式跟十年資料之後, 從quotemanager導出即可
國內跟國外期貨都有....
Andy avatar
By Andy
at 2013-03-23T22:07
進階的都是花點小錢搞定資料問題，這問不到就到codejob去
Caroline avatar
By Caroline
at 2013-03-28T19:02
用DDE資料品質容易有些參差不齊,還是推花錢買的 @@
Kristin avatar
By Kristin
at 2013-04-01T21:48
一定要抓網頁資料的話,請愛用AutoIt搭配excel呼叫外部
Andy avatar
By Andy
at 2013-04-06T03:52
網頁的資料不外乎Request跟Response，研究一下吧
Ina avatar
By Ina
at 2013-04-08T03:03
上面說的用DDE抓的大部分應該是K線的資料或是Tick資料

請教是否有用TS9.1跟MSA的人

Leila avatar
By Leila
at 2013-01-21T14:28
小的這邊遇到一個問題就是,用msa的function想輸出檔案給MSA3吃 但TS本身的策略市有多重進場的,結果卷出來的檔案就有問題,但單一進出場點的策略 又可以正常使用,不知道有沒有前輩有相關經驗跟解決方式可以share p.s.因為想輸出每天atr的資料所以必須用msa的function輸出資料 - ...

跳空停損的問題..

Olive avatar
By Olive
at 2013-01-16T23:45
如圖粉紅色的區域 http://ppt.cc/mXoj 最近拿chartgame來練習自己抓停損停利的感覺(條件?) 目前有一個感想就是如果出現圖中的這種情形, 不只預設好的停損沒辦法執行,還會把先前的獲利幾乎吐光. 爬了一下舊的文章, 滿多人都提到可以用資金配置來降低跳空對虧損的影響 請問真 ...

X-程式交易全紀錄1/15

Skylar DavisLinda avatar
By Skylar DavisLinda
at 2013-01-15T22:12
最近黃金似乎有點不一樣的感覺了。 進場日期 進場點位 多空 口數 出場日期 出場點位 損益 2013-01-03 7,814 Sell 2 2013-01-09 7,738 152 2013-01-09 7,738 ...

請問有人可以分享hsp的實際使用經驗嗎？

Olivia avatar
By Olivia
at 2013-01-13T20:22
（已爬文） 剛剛上網買書看到hsp這個東西 好奇之下就去查了一下，原來是一個國人自製的程式交易軟體 其中最好奇的是他號稱可以用this bar下單，如果是真的就太好了 不過沒開放試用，不能直接試用看看確認 有人有實際使用過hsp的經驗可以分享一下這個軟體的優點和缺點之類的嗎？ - ...

寫好程式不敢用

Carolina Franco avatar
By Carolina Franco
at 2013-01-12T16:23
寫了一個陽春的程式 回測兩年績效也還可以 進場都是用 next bar 誤差可能是換月價差 常常虧多筆不大不小 才賺一筆大的 請問這樣的程式要如何修正才可以放心用? 這種情況是正常的嗎? 謝謝 - ...