【迅投qmt系列】2、历史数据获取

2024-04-25 07:04

本文主要是介绍【迅投qmt系列】2、历史数据获取,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1、基本思想

在 xtquant 中,历史数据要先下载(download_history_data)到本地的缓存文件中,之后才能获取(get_market_data)使用。
如果确认之前已经下载过,且数据完整,那么后续使用前可以不用再次下载。

2、常用函数

xtdata.download_history_data()		# 下载单个资产的历史数据
xtdata.download_history_data2()		# 下载多个资产(资产代码装在[]中)的历史数据xtdata.get_market_data()			# 从已下载的本地数据中取数据方法1
xtdata.get_market_data_ex()			# 从已下载的本地数据中取数据方法2
xtdata.get_local_data()				# 从本地取已下载的数据

为方便,其中 get_market_data 和 get_market_data_ex 合称 gmd 函数。
以下分别简介各个函数的用法。

2.1、下载资产历史数据到本地缓存文件中

下载资产的历史数据,需要用到 download_history_data 和 download_history_data2,他们的使用方法几乎一样。
download_history_data 的使用方法是:

# download_history_data
xtdata.download_history_data(stock_code='xxxxxx.SH', period='1x', start_time='20230101', end_time='20231115',incrementally=True)		# 是否只下载增量数据
)# download_history_data2
def on_callback(data):print("data call back!")print(data)xtdata.download_history_data2(stock_list=['xxxxxx.SH', 'xxxxxx.SZ'], period='1x', start_time='20230101', end_time='20231115',callback=on_callback,incrementally=True)		# 是否只下载增量数据
)

其中:
1、period 的取值是 :1m、5m、15m、30m、1h、1d、tick。。。 时,能取到指定资产指定周期的行情数据
2、period 的取值是:transactioncount1d、orderflow1m 时,能取到指定资产的资金流向数据、订单流数据等数据(需要权限)
3、period 的取值是:northfinancechange1m,同时资产代价是 ’FFFFFF.SGT’ 或者 [‘FFFFFF.SGT’],能取到北向资金数据(需要权限)。其他可下载数据见官方知识库。
4、start_time、end_time 的格式是 ‘yyyymmddHHMMSS’,当只取日线数据时,可以简化为 ‘yyyymmdd’
5、当 start_time=“”,就是从该资产的历史最早时间开始取,当 end_time=“”,就是取到该资产最新的历史数据(如果取的是日内数据,就按周期取到当时最近的日内数据),两者可以都为 “”…
6、download_history_data2 相对 download_history_data 的改进,除了能批量下载资产的历史数据,还支持回调函数
7、incrementally=True 时,用download_history_data2下载多个资产的历史数据,如果不同资产的最新数据日期不同,download_history_data2能根据各个资产的最新日期补齐数据至end_time
8、使用 token 的模式下,支持下载到指定目录,具体实现后续再展开(坑1)

2.2、从本地获取历史数据

get_market_data、get_market_data_ex、get_local_data 都是从本地数据缓存中获取已经下载的数据,三个函数的使用参数也差不多:

history_data = xtdata.get_market_data(field_list=[],stock_list=etf_list,period=period,start_time=start_date,end_time=end_date,count=-1,dividend_type='none',fill_data=True
)xtdata.get_market_data_ex(field_list=[],# 字段stock_list=[],# 合约代码列表period='1d',# 数据周期——1m、5m、1d、tickstart_time='',# 数据起始时间%Y%m%d或%Y%m%d%H%M%Send_time='',# 数据结束时间%Y%m%d或%Y%m%d%H%M%Scount=-1, # 数据个数。1为只取最新的行情数据,-1为取全部数据dividend_type='none', # 除权方式fill_data=True, # 是否填充数据
)xtdata.get_local_data(field_list=[],# 字段stock_list=[],# 合约代码列表period='1d',# 数据周期——1m、5m、1d、tickstart_time='',# 数据起始时间%Y%m%d或%Y%m%d%H%M%Send_time='',# 数据结束时间%Y%m%d或%Y%m%d%H%M%Scount=-1, # 数据个数。1为只取最新的行情数据,-1为取全部数据dividend_type='none', # 除权方式fill_data=True, # 是否填充数据
)

三者的共同点是,返回的都是 {keys: DataFrames} 格式的数据
三者的区别是:
get_market_data 返回的是两层 dict,第一层 key 是资产代码,第二层 key 是 field_list 中的每个字段,第二层 value 是对应字段的 DataFrame 类型的数据,内容除了本地数据,在订阅之后,也包含有最新的行情数据。
get_market_data_ex 返回的是一层dict,key是 资产代码,value 是包含 field_list 中的所有字段的 DataFrame,内容除了本地数据,在订阅之后,也包含有最新的行情数据。
get_local_data 返回的结果格式与 get_market_data_ex 一样,但是内容只有之前用 download_history_data 下载到本地的数据。

如何同时获取到拼接完整的历史数据和实时行情数据,后续再展开(坑2)。

(内容随时迭代更新中,欢迎常回来看看)

这篇关于【迅投qmt系列】2、历史数据获取的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/933995

相关文章

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

科研绘图系列:R语言扩展物种堆积图(Extended Stacked Barplot)

介绍 R语言的扩展物种堆积图是一种数据可视化工具,它不仅展示了物种的堆积结果,还整合了不同样本分组之间的差异性分析结果。这种图形表示方法能够直观地比较不同物种在各个分组中的显著性差异,为研究者提供了一种有效的数据解读方式。 加载R包 knitr::opts_chunk$set(warning = F, message = F)library(tidyverse)library(phyl

【生成模型系列(初级)】嵌入(Embedding)方程——自然语言处理的数学灵魂【通俗理解】

【通俗理解】嵌入(Embedding)方程——自然语言处理的数学灵魂 关键词提炼 #嵌入方程 #自然语言处理 #词向量 #机器学习 #神经网络 #向量空间模型 #Siri #Google翻译 #AlexNet 第一节:嵌入方程的类比与核心概念【尽可能通俗】 嵌入方程可以被看作是自然语言处理中的“翻译机”,它将文本中的单词或短语转换成计算机能够理解的数学形式,即向量。 正如翻译机将一种语言

flume系列之:查看flume系统日志、查看统计flume日志类型、查看flume日志

遍历指定目录下多个文件查找指定内容 服务器系统日志会记录flume相关日志 cat /var/log/messages |grep -i oom 查找系统日志中关于flume的指定日志 import osdef search_string_in_files(directory, search_string):count = 0

Android Environment 获取的路径问题

1. 以获取 /System 路径为例 /*** Return root of the "system" partition holding the core Android OS.* Always present and mounted read-only.*/public static @NonNull File getRootDirectory() {return DIR_ANDR

GPT系列之:GPT-1,GPT-2,GPT-3详细解读

一、GPT1 论文:Improving Language Understanding by Generative Pre-Training 链接:https://cdn.openai.com/research-covers/languageunsupervised/language_understanding_paper.pdf 启发点:生成loss和微调loss同时作用,让下游任务来适应预训

Java基础回顾系列-第七天-高级编程之IO

Java基础回顾系列-第七天-高级编程之IO 文件操作字节流与字符流OutputStream字节输出流FileOutputStream InputStream字节输入流FileInputStream Writer字符输出流FileWriter Reader字符输入流字节流与字符流的区别转换流InputStreamReaderOutputStreamWriter 文件复制 字符编码内存操作流(

Java基础回顾系列-第五天-高级编程之API类库

Java基础回顾系列-第五天-高级编程之API类库 Java基础类库StringBufferStringBuilderStringCharSequence接口AutoCloseable接口RuntimeSystemCleaner对象克隆 数字操作类Math数学计算类Random随机数生成类BigInteger/BigDecimal大数字操作类 日期操作类DateSimpleDateForma

Java基础回顾系列-第三天-Lambda表达式

Java基础回顾系列-第三天-Lambda表达式 Lambda表达式方法引用引用静态方法引用实例化对象的方法引用特定类型的方法引用构造方法 内建函数式接口Function基础接口DoubleToIntFunction 类型转换接口Consumer消费型函数式接口Supplier供给型函数式接口Predicate断言型函数式接口 Stream API 该篇博文需重点了解:内建函数式

Java基础回顾系列-第二天-面向对象编程

面向对象编程 Java类核心开发结构面向对象封装继承多态 抽象类abstract接口interface抽象类与接口的区别深入分析类与对象内存分析 继承extends重写(Override)与重载(Overload)重写(Override)重载(Overload)重写与重载之间的区别总结 this关键字static关键字static变量static方法static代码块 代码块String类特