ftp下載每日rpt檔(期貨及選擇權)2011.3.17起

小娃

[free]
小娃把Linux自動抓rpt檔的shell script和ftp設定好了，
建議大家近30日的資料還是上期交所抓，過期的資料再來ftp抓，
這樣子COCO的流量才能更有效率的使用。

ftp連進去有2個folder, future_rpt是期貨的rpt檔。
op_rpt是選擇權的rpt檔。本ftp只能下載不能上傳，檔案從2011.3.17起



以下分享自動抓rpt檔的shell script。
抓期貨rpt檔

1. #!/bin/sh
   
2. today_tickfile=http://www.taifex.com.tw/DailyDownload/Daily_`date +%Y_%m_%d`.zip
   
3. wget -c -a /root/rpt/future_tick.log -P /home/cocoin/future_rpt/ $today_tickfile
   

複製代碼

抓選擇權rpt檔

1. #!/bin/sh
   
2. today_tickfile=http://www.taifex.com.tw/OptionsDailyDownload/OptionsDaily_`date +%Y_%m_%d`.zip
   
3. wget -c -a /root/rpt/op_tick.log -P /home/cocoin/op_rpt/ $today_tickfile
   

複製代碼

自動排程工作的crontab檔案(新增最後2行)

1. SHELL=/bin/bash
   
2. PATH=/sbin:/bin:/usr/sbin:/usr/bin
   
3. MAILTO=root
   
4. HOME=/
   
5. # run-parts
   
6. 01 * * * * root run-parts /etc/cron.hourly
   
7. 02 4 * * * root run-parts /etc/cron.daily
   
8. 22 4 * * 0 root run-parts /etc/cron.weekly
   
9. 42 4 1 * * root run-parts /etc/cron.monthly
   
10. #wawa88123
    
11. 00 3 * * * root /root/local/bakdzmysql.sh
    
12. #everyday am 3:00 backup
    
13. #everyday get rpt
    
14. 00 18 * * * root /root/local/download_rpt_future.sh
    
15. 05 18 * * * root /root/local/download_rpt_op.sh
    

複製代碼

我設定每天晚上6:00抓檔，不過說不定會有剛好server連不上的時候，
這個我就不敢保證了。

oneman001

小娃大
這資料有免費軟體可讀出來使用嗎

Branson

回復 1# 小娃


   小娃站長，請問ＦＴＰ的資料可以從 2011/1/1 開始放起嗎？一是我剛好有缺一些 2011 年第一季的部份。二是這個起始點感覺也比較完整。
非常感謝妳的分享，最近我也開始寫些程式自動抓取台股的資料，如果妳有甚麼需要或是漏資料，我這裡也可以當備援。

Dogfaceman

yeah 第一個買
{:4_97:}
COCO有個會程式又熱心的站長
是大家的福氣～
福氣啦～

小娃

回復 3# Branson


    晚上我回去開一個upload folder，徵求志願者上傳2011/1/1起的資料。
再整理好給大家使用。

verilog

推推推，我正需要。

小娃

回復 3# Branson

    整理好了，資料由今年1月1日起，歡迎大家來抓。因為我這一篇強制退款就不能再設價，
所以另外開一篇，本篇關閉。
http://www.coco-in.net/viewthread.php?tid=10548