Auto Byte

专注未来出行及智能汽车科技

微信扫一扫获取更多资讯

Science AI

关注人工智能与其他前沿技术、基础学科的交叉研究与融合发展

微信扫一扫获取更多资讯

胡笳、Aileen编译

驰骋股市!手把手教你如何用Python和数据科学赚钱?

金融领域或许是数据科学应用场景中最充满想象力的部分,毕竟它跟财富结合地无比紧密。

不管是否是经济达人,数据科学都是一种帮你了解一支股票的高效方式。本文作者把数据科学和机器学习技术应用到金融领域中,向你展示如何通过数据分析的方式驰骋股市,搭建自己的金融模型!

让我们先了解一些基本定义。

定义和假设

什么是交易算法?

Quantopian定义:

交易算法是一种计算机程序,它定义了一套买卖资产的规则。大多数交易算法基于研究历史数据得出的数学或统计模型来做出决策。

我们使用什么平台?

我使用Anaconda, Jupyter Notebooks, 和 PyCharm实现Python建模,使用这些工具非常容易。但是,你也可以使用Quantopian平台内置内核工具,或者甚至可以根据需要将代码修改为R或者其他语言。

我使用Mac系统,并将全程分享所用的UNIX命令。Windows用户请自行搜索答案!

我们关注哪些资产?

Apple苹果(AAPL)是一支很好的股票,因为目前为止(2018年9月)它已经是世界上价值最高的公司,不仅拥有相对稳定的股票价格,而且拥有足够多与品牌相关的体量、新闻和人气。

需要提醒:此处涵盖的原则对于较小的公司股本,或不同的行业等的适用性有所不同。

环境搭建

要在本地电脑上获取Quantopian平台,请在终端执行以下命令:

# create conda py35 since that's the newest version that works conda create -n py35 python=3.5 conda install -c quantopian/label/ci -c quantopian zipline

为了确保Quandl正常运行,请根据账号创建说明和API文档加载金融数据。另外,请保存好你的API key,因为需要用到它来加载所有重要数据。

加载数据

让我们开始使用代码库:

import pandas as pd import numpy as np import patsy pd.core.common.is_list_like = pd.api.types.is_list_like from pandas_datareader import data import quandl quandl.ApiConfig.api_key = "##############"

现在让我们来拉取些Apple股票数据:

df = quandl.get("WIKI/" + 'AAPL', start_date="2014-01-01")

注意观察这些列,注意其中一个名为“分割比例”的列。这是一个非常重要的指标;它标志着股票拆分发生。在2014年,Apple决定采用7:1进行股票分割,我们可以使用Python 和pandas 来查询发生的日期:

len(df) df['Split Ratio'].value_counts() df[df['Split Ratio'] == 7.0]

我们从而找到了2014-06-09。让我们拉取这个日期后的股票价格信息:

aapl_split = quandl.get("WIKI/" + 'AAPL', start_date="2014-06-10") aapl_split.head()

顺便说一句,我在GitHub上找到了所有财富500强的股票代码清单。如果你想将自己的分析扩展到股票集,可以像这样将它们加载到列表中:

f500 = pd.read_csv('https://raw.githubusercontent.com/datasets/s-and-p-500-companies/master/data/constituents.csv') tickers = f500.Symbol.tolist()

关键统计数据

增广迪基-福勒检验(Augmented Dickey-Fuller test),简称ADF检验

我们需要检验单位根是否存在,可以使用ADF测试完成检验。简而言之,单位根存在则预示存在驱动AAPL的潜在趋势,从而我们可以提取模式并用于预测。

# run ADF to determine unit root import statsmodels.tsa.stattools as ts cadf = ts.adfuller(aapl_split.Close) print('Augmented Dickey Fuller:') print('Test Statistic =',cadf[0]) print('p-value =',cadf[1]) print('Critical Values =',cadf[4]) Augmented Dickey Fuller: Test Statistic = -0.731194982176 p-value = 0.838503045276 Critical Values = {‘1%’: -3.4372231474483499, ‘5%’: -2.8645743628401763, ‘10%’: -2.5683856650361054}

我们将上面的测试统计值与临界值进行比较;如果它低于我们选择的阈值,则拒绝存在单位根的零假设。正如你所见,p-value比较大,所以我们必须接受原假设(Ho):即AAPL存在单位根。这个结果很好,因为我们可以利用潜在的趋势和模式进行预测。

与其他股票的相关性

Apple被认为是一个巨头技术品牌。假如我们能够计算与其他股票的强相关性会怎么样?

请注意相关性并不意味着因果关系,并且可能存在着哪个股票是先行者的问题,但是模式和关系对于提高模型性能总是一件好事。

我建议你查看三支股票,以及AAPL如何与它们关联:

  • 微软Microsoft (MSFT)

  • 因特尔Intel (INTC)

  • 蒂芙尼Tiffany & Co. (TIF)

import matplotlib.pyplot as plt import seaborn as sns %matplotlib inline MSFT = quandl.get("WIKI/" + 'MSFT', start_date="2014-06-10") INTC = quandl.get("WIKI/" + 'INTC', start_date="2014-06-10") TIF = quandl.get("WIKI/" + 'TIF', start_date="2014-06-10")

时间缘故,我们在这里只关注Intel数据;让我们绘制AAPL与INTC的收盘价:

sns.jointplot(INTC.Close, aapl_split.Close, kind="reg");

Intel vs. Apple

我们还可以看看相关值数据( correlation value ):

np.corrcoef(INTC.Close, aapl_split.Close)

我们注意到r-value为0.7434;就预测来说不错,但我们需要记住一个重要的事实:如果我们知道INTC的收盘价,我们也可以看查AAPL的收盘价。所以让我们查看下INTC七天前的收盘价的相关性,来获得更可行的指标:

# seven day lead np.corrcoef(INTC.Close[:-7], aapl_split.Close[7:])

这次我们得到r-value为0.7332;还是很不错的!

谷歌趋势(Google Trends)

我们可以比较Twitter和其他社交网络人气数据如何影响股价。现在让我们看看Google Trends是否与AAPL相关。请确保为指定时间范围,或使用此链接(https://trends.google.com/trends/explore?date=2014-06-10%202018-04-02&q=%2Fm%2F0k8z)来进行准确搜索(注意我在四月多添加了几天来处理半周问题),然后将CSV加载到Python中:

# Google Trends aapl_trends = pd.read_csv('/Users/jb/Desktop/multiTimeline.csv', header=1) aapl_trends.tail()

注意每周的数据格式,因此我们需要使用 pandas.resample() 转换我们的股票价格数据集:

API链接:

http://pandas.pydata.org/pandas-docs/stable/generated/pandas.DataFrame.resample.html

aapl_split_week = aapl_split.resample('W', convention='end').last()

现在让我们检查相关性并绘制给定周的Google搜索请求数据总和图表,以及该周最后一个工作日的收盘价格:

# trend and price corr np.corrcoef(aapl_trends['Apple: (Worldwide)'], aapl_split_week.Close)

哎呀!我们得到了一个微不足道的0.0454,这个数据有些道理,我们可以想一下:AAPL相关的新闻/活动/闲谈并不是影响股票价格的积极因素。像人气这种对其有重要影响应该能提供更强的信号,但我们在下次再做讨论。

结语

我们只是浅显的讨论了下部分EDA( Exploratory Data Analysis)可以做的金融分析,但是在下一篇文章中,我们将过渡到建立预测模型并通过高级软件包来为我们实现繁重的工作。

我们希望这篇文章对你有帮助,并且很乐意在评论中听到你的意见:

运行代码是否遇到任何问题?有时候环境和版本会搞砸一切……

  • 你使用什么包和技术?

  • 那些可视化工具有助于了解股票价格的变动?

  • 你认为哪些因素会最大化模型预测效果?

最后,如果你恰好知道一种持续赚大钱的建模技术,请直接告诉我们 ! 如果你们喜欢这个系列,请持续关注大数据文摘的后续文章。

最后的最后,本文提供的信息和随附材料仅供参考。本文不应被当做法律或财务建议。你应咨询律师或其他专业人士来确定什么最适合你的个人需求。

祝大家赚钱开心!

相关报道:

https://towardsdatascience.com/on-making-money-with-python-and-data-science-1-setup-and-statistics-1d69f1a68661?from=singlemessage&isappinstalled=0

大数据文摘
大数据文摘

秉承“普及数据思维,传播数据文化,助⼒产业发展”的企业⽂化,我们专注于数据领域的资讯、案例、技术,形成了“媒体+教育+⼈才服务”的良性⽣态,致⼒于打造精准数据科学社区。

工程Python数据科学
62
相关数据
英特尔机构

英特尔(NASDAQ: INTC)是全球半导体行业的引领者,以计算和通信技术奠定全球创新基石,塑造以数据为中心的未来。我们通过精尖制造的专长,帮助保护、驱动和连接数十亿设备以及智能互联世界的基础设施 —— 从云、网络到边缘设备以及它们之间的一切,并帮助解决世界上最艰巨的问题和挑战。

http://www.intel.cn/
相关技术
机器学习技术

机器学习是人工智能的一个分支,是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、计算复杂性理论等多门学科。机器学习理论主要是设计和分析一些让计算机可以自动“学习”的算法。因为学习算法中涉及了大量的统计学理论,机器学习与推断统计学联系尤为密切,也被称为统计学习理论。算法设计方面,机器学习理论关注可以实现的,行之有效的学习算法。

F检验技术

F检验(F-test),最常用的别名叫做联合假设检验(英语:joint hypotheses test),此外也称方差比率检验、方差齐性检验。它是一种在零假设(null hypothesis, H0)之下,统计值服从F-分布的检验。其通常是用来分析用了超过一个参数的统计模型,以判断该模型中的全部或一部分参数是否适合用来估计母体。 F检验这名称是由美国数学家兼统计学家George W. Snedecor命名,为了纪念英国统计学家兼生物学家罗纳德·费雪(Ronald Aylmer Fisher)。Fisher在1920年代发明了这个检验和F分配,最初叫做方差比率(英语:Variance Ratio)

大数据技术技术

大数据,又称为巨量资料,指的是传统数据处理应用软件不足以处理它们的大或复杂的数据集的术语。

查询技术

一般来说,查询是询问的一种形式。它在不同的学科里涵义有所不同。在信息检索领域,查询指的是数据库和信息系统对信息检索的精确要求

你好,一种持续赚大钱的建模技术,请直接告诉我们 !我有这个模型和代码,python写的,售价100万人民币,有兴趣请与我联系。
联系方式 qq 26603182 请注明 机器之心