阅读326 返回首页    go 阿里云 go 技术社区[云栖]


摩根大通机器学习与金融大数据指南——未来的华尔街大亨|大数据+机器学习+金融工程师

首发地址:https://yq.aliyun.com/articles/93512

https://yq.aliyun.com/cloud

215ad55f60f503bec0ad56ab7c2b49538f252702

金融服务工作流行得快、过时得也快。2001风靡一时;2006CDOs有着偏爱;2010信贷交易商很受欢迎2014又轮到了合规专家;而2017的时代,如果你能涉足该领域那么你的未来将会有所保证

J.P.Morgan的定量投资和衍生策略团队发布了关于金融服务领域大数据和机器学习的最全面的报告报告称,大数据和人工智能AI战略机器学习和另类数据投资方式机器学习将对未来市场运作至关重要分析师投资组合经理交易员和首席投资官都需要机器学习技术熟练掌握如果不这样做,那么就会被淘汰像季度收益GDP传统数据源将变得越来越不相关这是因为使用更新的数据集和方法的管理人员能够提前预测,并在发布之前就完成交易。

由于280报告太长无法详细介绍,现总结一些突出的观点。

1. 

摩根警告银行和金融公司优先考虑基于市场知识的数据分析技能的方式,这样做是相当危险的,而了解数据和信号背后的经济学比开发复杂的技术解决方案更为重要

2. 

摩根指出,人类已经被排除在高频交易之外。未来,机器在中期交易中也将越来越普遍:机器有能力快速分析新闻消息和推文处理收益报表、挖掘网站和瞬时交易,这将有助于削弱多基础分析师长短期股票管理者和宏观投资者需求。

3. 

   长期来看,人类保留的一个优势就是对制度的把握及人类反应的预测比机器做得更好,这些预测涉及解读诸如政治家和央行行长复杂的人类反应、了解客户定位或预期拥挤等。如果你想作为一个人类投资者生存下去,那需要打造出自身的优势

4. 

在实施机器学习策略之前,数据科学家和定量研究人员需要获取数据并对其分析以获得可交易信号和深刻见解。

数据分析很复杂今天的数据集通常比昨天的数据更大,这些数据集可能包括个人(社交媒体帖子产品评论搜索趋势等)业务流程(公司废气数据商业交易信用卡数据等)和传感器(卫星图像数据交通、轮船定位等)生成的数据数据很少呈现出干净的内容,无法直接提供给机器学习算法使用,因此需要专门的团队预处理数据后才能在交易策略中使用。另外还需要评估alphaAlpha依赖于数据的成本所需的处理量以及数据集的使用情况。

6d6cfc0f3cc0b4fb762eb9a2abcad1da02316a2c

5. 

机器学习有多种迭代算法,包括监督学习无监督学习以及增强学习

监督学习的目的是建立两个数据集之间的关系,使用一个数据集预测另一个数据集无监督学习目的是尝试了解数据的结构并确定其背后的主要驱动力学习的目的是使用多层神经网络来分析一个趋势,而增强学习则鼓励算法来探索和找到最有利可图的交易策略。——

1f8d94d680cc6cae1ef31a5fe74075c8695fdd41

6. 

在财务背景下,摩根表示,监督学习算法根据提供的历史数据找出最佳预测关系。一般来讲,有监督学习算法有两:回归和分类

  • 基于回归的监督学习方法尝试基于输入变量来预测输出。
  • 分类方法逆向操作,并尝试确定一组分类属于哪个类别。

7. 

在无监督学习中,机器从大量变量中获得回归,并且不知道哪些是依赖和独立变量。概括来讲无监督学习方法被归为聚类或因子分析

  • 聚类基于一些相似性概念将数据集分成较小的组。
  • 因子分析旨在识别数据的主要驱动因素或确定数据的最佳表示。在资产投资组合中,因子分析将确定动力、价值等主要驱动因素。

8. 

深度学习实际上是人为重建人类智慧的一种尝试。摩根表示,深度学习特别适用于非结构化大数据集的预处理(例如,可用于统计卫星图像中的汽车数、或在新闻稿中识别情绪)。深度学习模型可以使用假设的财务数据系列来估计市场调整的可能性

深度学习方法基于神经网络,这些神经网络类似于人类大脑的神经网络。在网络中,每个神经元接收来自其他神经元的输入,并且计算这些输入的加权平均值不同输入的相对权重取决于以往的经验,一层连接一层,网络层数越高,学习到的特征越抽象

595b0df099fb69a24f54797169f23ea73d191e56

9. 

增强学习的目标是选择一系列连续的行动以最大化最终(或累积)奖励,这与监督学习(通常一步过程)不同,增强学习模型并不清楚每个步骤的正确操作

摩根的电子交易部门已经增强学习开发了一些算法下图显示了银行机器学习模型(怀疑是故意模糊)。

d2e07861640f8b517db549ebfebb73c13c5c3bf7

10. 

摩根表示,数据科学家所要求掌握的技能与定量研究员几乎相同。因此,有着计算机科学统计学数学金融工程计量经济学和自然科学背景的买方和卖方都能重新塑造自我。量化交易策略将是关键技能,这是由于量化研究者IT/采用更好的统计和机器学习工具。

另外不需要知道机器学习的详细细节,这是因为大多数机器学习方法已经被编程,你只需要应用现有的模型。作为新手WekaPythonKeras这样丰富的库,以及Tensorflow

fdad0822b4296a15d36e44c5b37b4f2c98e9bc5d

11. 

如果只R语言以及对应数据C ++Python对应的机器学习应用程序。

8220f3ec0633502c674129dc8f07a39342e4ea64

65704c453b6b931b003df8706c71883173813a00

4a1b734f65c9eaf9e5e1da83842256bb16c893d0

12. 

78477232ba629ab4ae7b54301196159154e62dd9

887bb50d5e19674ab2fe0a8a5e82137773940d18

f448d08691a8e6bcea81687b3246621ae032d43a

13. 

也需要了解大数据。报告指出,多招聘人员和招聘经理无法区分人工智能和实际设计可交易策略的这种能力,合规团队还需要能够审查机器学习模型以确保数据被正确地匿名化金融领域的机器学习时代已然来临,那些不学习、拒绝进化的人将面临过时的风险。分析师投资组合经理、交易和首席信息官最终将不得不熟悉大数据和机器学习的发展和相关的交易策略。

Sarah ButchereFinancialCareers特约作家毕业于英国牛津大学,对银行金融业感兴趣

Linkedinhttps://www.linkedin.com/in/sarahbutcherjournalist/?ppe=1

Twitterhttps://twitter.com/MadameButcher

本文由北邮@老师推荐,阿里云云栖社区组织翻译。

J.P.Morgan’s massive guide to machine learning and big data jobs in financeSarah Butcher,译者:海棠,审阅:东东邪

pdf

文章为简译,更为详细的内容,请查看

最后更新:2017-07-12 22:12:00

  上一篇:go  干货|大神教你如何参加kaggle比赛——根据CT扫描图预测肺癌
  下一篇:go  七招教你处理非平衡数据——避免得到一个“假”模型