东方财富网股票数据爬虫

所要爬的数据描述

如下图所示,所要爬的第一个数据是每个股票每日均线对应的MA5,MA10,M20,M30的数据。

其次,需要爬取股票每日的BOLL的数据,包括BOLLUP,BOLLMB,BOLLDN
东方财富网股票数据爬虫_第1张图片

再者,爬取的数据有每个股票对应的开盘,最高,最低,收盘等数据。
东方财富网股票数据爬虫_第2张图片

main程序

package navi.main;
/**
 * @author:合肥工业大学 管理学院 钱洋
 * @email:[email protected]
 * @ 
 */
import java.util.List;
import db.MYSQLControl;
import model.StockDetailInfoModel;
import parse.StockParse;
public class StockDetailInfoMain {

	public static void main(String[] args) throws Exception {
		//从数据库获取所有的股票id
		List stockidlist = MYSQLControl.getListOneBySQL("SELECT stock_info_id FROM stock_basicinfo","stock_info_id");
		//针对每个股票进行数据爬取
		for (int i = 0; i < stockidlist.size(); i++) {
			String stock_inputid = stockidlist.get(i).toString();
			System.out.println("stock_inputid:"+stock_inputid);
			//解析数据
			List stockdetailinfo=StockParse.parseStockDetailInfo(stock_inputid);
			//存储数据
			MYSQLControl.insertStocksDetailInfo(stockdetailinfo);


		}
		/*测试程序*/
		/*String stock_inputid="6000171";
		List stockdetailinfo=StockParse.parseStockDetailInfo(stock_inputid);
		MYSQLControl.insertStocksDetailInfo(stockdetailinfo);*/
	}

}


数据库数据展示

东方财富网股票数据爬虫_第3张图片

你可能感兴趣的:(基于java网络爬虫)