【重磅】揭开高频交易神秘面纱

点击标题下「大数据文摘」可快捷关注

【一张图了解高频交易历史】

摘自:华尔街见闻(微信ID:wallstreetcn)

美国著名金融作家Michael Lewis的一本《Flash Boys》又将高频交易推上了风口浪尖,到现在为止,读者应该知道美国股市绝大多数交易都是由程序机器人而不是人来完成,自动交易的份额已经占到了股市交易总量的70%。

高频交易的最早历史及原型可以追溯到17世纪,而且其原理并不复杂,主要基于两个重要因素。一是速度,现在能比竞争对手快万分之一甚至百万分之一秒就是胜利;第二,尽管每一笔交易的利润只有万分之一厘钱,赚钱靠的是高频的大交易量。下面让我们通过一组图带领大家简要回顾高频交易的历史:

【什么是高频交易系统】

作者:董可人 http://www.zhihu.com/people/dongkeren

摘自:知乎

“高频交易”是一个挺差劲的名字。按照字面意思,任何能够以较高频率进行交易的系统都可以叫“高频交易系统”。比如说你用VBA写个小程序,连上券商给你的接口,也完全可以按毫秒级进行交易,你也可以说自己开发了一个“高频交易系统”。 不过,按照现在市面上的主流认知,我想大多数人概念里的高频交易系统是这样的:

  • 交易指令完全由电脑发送,对市场数据的响应延时在微秒级(VBA退散)。
  • 系统由专用的软硬件组成,研发时需要大量计算机专家级的工作(散户随便编个小程序退散)。
  • 系统的硬件需要放在离交易所主机很近的位置上,所谓co-location。并且得到专门的准入许可证,交易指令直接发送至交易所(而不是通过券商中转)。

符合这三点的,就可以叫做高频交易系统。有人说你这三条没有一条在说频率,只能叫低延迟系统不叫高频交易。的确,我再一次深切赞同“高频交易”是一个很差劲的名字。但现在市面上的主流媒体,包括大部分新闻和畅销书在谈到这个话题时,说的就是这种系统,所以我在这里就不纠结字面意思了。 相比起这种形象: <img src="http://pic4.zhimg.com/e5a8174dbc22abda33c46eba6b53bd8f_b.jpg" data-rawwidth="620" data-rawheight="327" class="origin_image zh-lightbox-thumb" width="620" data-original="http://pic3.zhimg.com/e5a8174dbc22abda33c46eba6b53bd8f_r.jpg">

更真实的一面的其实是这样的: <img src="http://pic1.zhimg.com/6c742396bd79c419d76c652bdfec0ff6_b.jpg" data-rawwidth="320" data-rawheight="201" class="content_image" width="320">

除此之外,存在很多妖魔化高频交易的言论,比如:

  • 超强的盈利能力,仿佛高频交易的机器就跟印钞机似的。
  • 纯粹靠交易赚钱,有着神秘的数学模型和尖端科技,精准的预测市场走势,带着无可比拟的优势在市场上呼风唤雨。
  • 利用速度优势割其他机构类交易者的肉,大家认为这是作弊。

回想一下,有没有人对你高谈阔论高频交易提到这里任何一点?你听完以后有何感想,好生羡慕,心潮澎湃,还是满腔愤恨上天不公?别着急,继续往下看,相信你看完这个回答以后,能够建立起一个正确的概念,下次遇到这种人,直接请他闭嘴。特别是那些对高频交易有兴趣,还没入门的朋友,希望你们有一个正确的认识。否则,当你历尽千辛万苦,怀着满腔热情加入一家HFT,以为从此以后你的工作就是对海量数据做高深莫测的数学模型,架起机器冲进市场草割那些无知的低频交易者,白花花的银(da)子(tui)像雪片一样冲进你的口袋,你很可能要失望。 摒除这些错误的观念,这个行业的真正的精髓才能向你展开:偏执的科技至上理念,极其复杂的技术难题,疯狂追求机器极致的性能,以及,高强度的同业竞争。这才是我认为本行业最吸引人的特点,它本身就足够让人着迷了。至于赚钱,建议你把它当作承担压力,努力工作之后的回报,而不是被葵花宝典砸到无意间学得惊世神功,从此纵横股市点石成金,这种神话至少在这个行业是不存在的。 下面来说一说这几条有什么问题。 高频交易的盈利能力很高吗? 传说是这样的: <img src="http://pic3.zhimg.com/01ba0826a1afa3a3dd793d9f8ab14b6b_b.jpg" data-rawwidth="320" data-rawheight="240" class="content_image" width="320">

但现实很残酷。和任何其他行业一样,赚大钱的的确有,赔钱的也大把存在。我想这个行业特别吸引眼球的原因主要是因为它融合了金融和计算机这两个热门词汇,而且确实是一个高科技行业(相信没几个行业会关心光速在不同介质中的区别),很容易给外人一种神秘感。但如果只盯着金字塔顶端的几家公司而下结论,就好像看了乔丹集锦以后就认为所有打篮球的人都能扣篮一样,是不现实的。 特别需要说明的是,因为高频交易系统对低延迟的敏感性,研发时需要投入大量的人力物力,要高薪聘专业的计算机专家,花钱买昂贵的硬件,租用专门的微波通信线路。但这一切也不能保证你得到一个预想中的“低延迟”系统。整个系统的设计和开发是一个非常复杂的工程。而且交易系统对于准确性和稳定性要求极高,不够精密的话上线后会出现各种问题,根本无法使用。 如此大规模的投入,很多时候换来的是一个残次品系统。 <img src="http://pic1.zhimg.com/6274919293fc751300c0bac356c502c8_b.jpg" data-rawwidth="300" data-rawheight="200" class="content_image" width="300">

非常非常多的公司因为搞不定技术问题而赔钱关门。 <img src="http://pic1.zhimg.com/f070d4c93327f6cede3d8c6cfd5dd717_b.jpg" data-rawwidth="400" data-rawheight="300" class="content_image" width="400">

这里有一个深远的问题是,高频交易是一个金融和计算机结合的产业,但同时精通这两者的人才是非常稀少的。金融人士主导的项目会缺乏对技术的判断能力,IT人士主导又会对需求把握不清。在对性能不敏感的行业这可能不是太大问题,可以按照传统的甲方乙方方式解决,有问题慢慢扯皮。但在这个高竞争行业,没有太多时间可以用来浪费在扯皮上。投产的系统可能慢上几微秒就是废物,而那时往往会发现基本的设计就有问题,根本无力回天。这种超高难度的研发压力,其实才是高回报的来源。 高频交易的策略? 有两种策略,做市(market making)和套利(arbitrage),从性价比来说,做市是更好的选择。 做市是指,在市场上充当流动性提供者,通俗的说就是有任何人想买一个东西(比如股票,期货等),你要保证能卖给他,有任何人想卖一个东西,你要保证从他那买。保证的意思就是如果市场上没有别人出头,做市商就必须出来。隐含的意思就是,做市商是所有人的对手盘。 在过去,做市商可能是这样的: <img src="http://pic4.zhimg.com/616a43bb6acac8976760e266a90458e1_b.jpg" data-rawwidth="468" data-rawheight="362" class="origin_image zh-lightbox-thumb" width="468" data-original="http://pic3.zhimg.com/616a43bb6acac8976760e266a90458e1_r.jpg">

也可能是这样的: <img src="http://pic2.zhimg.com/71c40d09bc6a329e8de7c83bfbba6bf4_b.jpg" data-rawwidth="274" data-rawheight="184" class="content_image" width="274">

而在高频交易时代,他们变成了这样: <img src="http://pic3.zhimg.com/9b8ec152d9ecb9216f166c0dd705cd8c_b.jpg" data-rawwidth="500" data-rawheight="198" class="origin_image zh-lightbox-thumb" width="500" data-original="http://pic4.zhimg.com/9b8ec152d9ecb9216f166c0dd705cd8c_r.jpg">

这里需要仔细想一下,一般情况下,如果你想买一支股票,往往是因为你看好它会升值,而你的对手盘跟你交易,是因为他认为会贬值,你们有一个价值判断上的分歧。那么做市商为什么能豪气干云的出头做所有人的对手盘,是因为他喜欢跟别人唱反调吗? 当然不是。做市商的策略本质上,是认为市场价格在短期内具有波动性,涨上去的价格会落下来,反之亦然。所以他可以选择承担一定的风险,暂时从你手里把东西买过来,过一段时间价格变得有利时再卖掉。注意这里的风险是真实存在的,没有什么保证价格一定会向着做市商有利的方向变化。时间跨度越大,这种风险也越大。做市商承担了这种风险,并且买过来的东西需要持有一定时间作为库存,来赚取因为波动性而产生的一点点价差(通常是一分两分)。也有更稳妥一些的做法,是通过其他高相关性的产品做对冲,比如买进一只股票的同时卖出它的期货,这个模型更复杂一些,对算法和性能的要求也更高。这种生意的本质决定了必须要能大量买卖,才能积少成多形成效益。 有风险就意味着有可能赔钱。所以这就产生了两种不同的做市商。第一种是胆大的土豪,说老子有钱,买人,买设备,全都上最好的,我不信赚不到钱。这种人我们叫它noncontractual market maker,他来做市全凭自己兴趣。 <img src="http://pic3.zhimg.com/309f91d28514fbfd37e1c3eb9c641afc_b.jpg" data-rawwidth="615" data-rawheight="345" class="origin_image zh-lightbox-thumb" width="615" data-original="http://pic2.zhimg.com/309f91d28514fbfd37e1c3eb9c641afc_r.jpg">

第二种是胆小的,觉得自己没把握一直赚钱,他可能就不敢做了。这时有一个人就不高兴了,他的名字叫交易所。交易所的存在,就是提供交易平台,然后通过对每笔交易收手续费来赚钱。如果没有人交易,显然他赚不到钱。为什么没人交易呢?因为有需求的人可能找不到对手盘,大家对价格的趋势判断是一致的,都在观望。这个情况对交易所很不利,所以他希望引入做市商。做市商一来,就能把门面撑起来(对,在中国,我们有时管这叫托。不同的是做市商的确承担了风险也参与了真金白银的交易,给交易者们营造了一个更友好的交易环境,所以是受到大家认可的)。大家一看场子里有很多人在交易,就愿意也掺一脚了。交易的人多了,交易所就很开心。所以他会付钱给做市商,可能还减免手续费什么的给点小福利。这样一来,这种做市商即使生意做的不好赔点钱,算上交易所的报酬,还是能盈利。这样的人,我们叫做contractual market maker,就是说他会和交易所签订一个合同,承诺提供多少流动性,交易所也相应的给一些报酬和福利。 <img src="http://pic2.zhimg.com/ecde78f59d4fb1a8e9a77048fafd9d99_b.jpg" data-rawwidth="400" data-rawheight="266" class="content_image" width="400">

注意这种业务里做市商不是很需要预测市场走势的能力,只要能做到不赔钱就可以赚进交易所的酬劳。这个时候关键点来了,就是如何做到不赔钱?一个是按照上面说过的,做好对冲,另一个就是发现形势不利的时候要能及时撤单,这个是最考验低延迟的地方,速度慢就会发生来不及撤单而遭受损失的情况。 所以,根据做市这种行为的特点,和市场上的需求,决定了HFT是最适合做这件事的。这也是为什么我们经常说HFT给市场提供流动性。 套利是指,找到两种强相关性的证券。一个极端的例子是,ETF和组成ETF的那些股票。如果你知道ETF的计算方式,就可以用同样的方式通过那些股票的价格来计算一个ETF的期望价格。有的时候,因为种种原因,你发现这个价格和你在市场上看到的ETF价格不一样,你就知道显然是市场发生了一些混乱,早晚这个价格会变回来。这时你就可以买入(卖出)ETF,卖出(买入)那些股票,坐等价格回归,可以稳赚不赔。 这个策略听起来很美,实际上竞争非常激烈。因为任何人都可以做这件事,参与的人多了,市场就会少犯错误,同时每个人的利润空间也变小了。当你的套利收入不足以支撑HFT的研发维护成本的时候,离关门也就不远了。 所以总结起来,做市是比较主流的HFT业务。而正是因为做市商这种和所有人做对收盘的业务模式,使得大部分交易都是通过做市商的参与来完成的,也就不难理解为什么70%的交易都是由HFT(做市商)来完成的了。 高频交易是通过作弊抢其他人的钱吗? 首先以上两种业务可以很清楚的看出,没有任何作弊空间。简单的说,HFT的竞争对手一定是另一个HFT。 那么HFT有那么多速度优势,跟交易所搅基(co-location),系统延迟搞到微秒级,他一定比其他人更先看到市场数据,为什么不能利用这个作弊? <img src="http://pic4.zhimg.com/47378d0a8f04381d32b21bffa32d99df_b.jpg" data-rawwidth="636" data-rawheight="436" class="origin_image zh-lightbox-thumb" width="636" data-original="http://pic4.zhimg.com/47378d0a8f04381d32b21bffa32d99df_r.jpg">难道不能这样吗?

难道不能这样吗? 回答这个问题,一定要明确的是:所有交易都是在交易所内部完成的。没有人能在别人的交易指令传入交易所之前就探测到(你说网络抓包?好吧你赢了,祝你好运。)。从理论上就根本没有任何作弊的可能(别拿交易所当傻瓜)。HFT的速度优势是指,当交易所完成一笔交易,在通知所有交易者的时候,HFT因为在通信线路的上游,所以会比别人先看到这条交易确认信息。这个时候他可能会根据自己对这条信息的理解以及业务需求,增加或者撤掉自己的一些单子,但这些都是完全正常的交易操作,不存在任何恶意,并且由于这条信息是发送给所有人的,任何人都会对此做出解读和反应,但只有那些在同一个时间粒度上工作的交易者之间才可能存在竞争,下面再解释这个问题。而对于最初这条交易的发起者来说,因为交易已经完成,所以不存在任何被攻击的可能。 <img src="http://pic3.zhimg.com/3a0da29a08a037dc994dd7b1f83e610c_b.jpg" data-rawwidth="454" data-rawheight="303" class="origin_image zh-lightbox-thumb" width="454" data-original="http://pic4.zhimg.com/3a0da29a08a037dc994dd7b1f83e610c_r.jpg">

上面说到,HFT的优势,在于他可以第一时间对交易所放出的交易确认信息做出反应。但是这个信息如果没有对手盘就毫无价值。而一个接受信息慢,且反应时间在毫秒级以上的机构用户,怎么可能参与进来做HFT的对手盘呢?这句话可能还是不太容易理解,我举一个夸张的例子:如果你的操作频率以十年为最小单位,买进一支股票以后十年不做任何操作,很显然没有任何人在这10年内可以找你做对手盘,这种情况下所有其他交易者对你来说都是HFT,你却不会担心他们对你有什么影响。例子虽然夸张,但HFT和机构用户之间的差距其实就是这么大,他们生活在不同的世界里。他们的业务本来就不冲突,且根本就不是一个层面上的东西。比较HFT和机构用户,就好像比较百米速跑和马拉松运动员的速度一样,毫无意义。 <img src="http://pic1.zhimg.com/07bb8178ddf9e73393feae8430155e49_b.jpg" data-rawwidth="468" data-rawheight="440" class="origin_image zh-lightbox-thumb" width="468" data-original="http://pic1.zhimg.com/07bb8178ddf9e73393feae8430155e49_r.jpg">

对于机构用户来说,需要理解电子交易市场的规则。有人用那种,看到屏幕上有一个价格,点了鼠标,结果发现成交价不一样,来说明是背后有人捣鬼,这属于脑袋进水的逻辑。特别需要注意的是市价单(market order)本来就是不保证成交价的,指令发给交易所,交易所根据当时的情况,算出是什么价就给你什么价,这没什么好委屈的。如果想要确保价格,请使用限价单(limit order),保证成交价格,但是不保证时间。这两种单是所有人都可以使用的,没有任何不公平可言。 人类,应该做电脑的主人,而不要这样: <img src="http://pic4.zhimg.com/3d5e5ef0c0083ee4f59243928f1e0713_b.jpg" data-rawwidth="620" data-rawheight="381" class="origin_image zh-lightbox-thumb" width="620" data-original="http://pic3.zhimg.com/3d5e5ef0c0083ee4f59243928f1e0713_r.jpg">

========== 最后说说HFT可能存在的问题。Flash crash是真实发生过的,也是最大的隐患。当一个市场上70%的交易都是HFT完成的时候,我们必须要能对HFT的系统有信心。这就需要HFT的开发流程标准化,接受开发过程的评审,有严格的测试体系。几个技术宅关在小黑屋里鼓捣出来的东西没人敢拍胸脯保证不会死机。而这一点目前看的确是比较差的,需要尽快规范起来。这才是公众需要关注的重点。

原文发布于微信公众号 - 大数据文摘(BigDataDigest)

原文发表时间:2014-08-12

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏凌帅的阅读思考与实践

对IBO的定义和对BANCOR缺陷的讨论(上)

最近因为做项目的原因,一直在学习BANCOR协议。看到好多文章写完了之后都要在文章最后加上一些缺陷不足的讨论。凌帅也明白,只谈优点避谈不足,观点就不够中立,极端...

793
来自专栏养码场

一周播报|新华社三问区块链,互联网成了区块链的镜像

当产品考虑多一点,方便于扩展时,开发跳脚,觉得没必要,是过度设计;可不多考虑一点,下一版本迭代时要重构了,开发又跳脚了,吐槽道:你怎么不多考虑一点?

581
来自专栏知晓程序

微信与育碧合作第一款小游戏曝光!竟和「跳一跳」一样魔性

在昨天举办的微信公开课上,微信刚刚宣布,将与育碧娱乐软件公司(UBISOFT)就小游戏领域展开全面战略合作。

792
来自专栏区块链领域

让网络广告不再被中间商攫取巨额利润

区块链广告的应用将从本质上改变产品生产、购买、评价和估值的方式。为什么?原因如下:

893
来自专栏互联网数据官iCDO

iCDO一周数据要闻:互联网巨头联合推出替代传统API数据转移项目;国资、上市系P2P激烈洗牌将继续;拼多多市值将超240亿美元

7月20日消息,近日Goolge大幅度提高了API 收费标准,比之前要高14倍,同时免费使用的限制也缩小到原来的三十分之一,这些举措都是为了扩大Google地图...

1263
来自专栏VRPinea

2020年女性头像有望登上美元纸币?谷歌已率先用AR实现了

众所周知,谷歌长期致力于在全球范围内创造更具包容性的工作环境。其中,很关键的一点便是给与女性更多机会去实现梦想。谷歌认为,通过提供适宜的环境和政策,女性可以在科...

1043
来自专栏企鹅号快讯

这5项高科技 正在颠覆未来医疗

作者:ken 正如神经学家V.S.Ramachandran所说,所有颠覆性的新科技都源于一个可能真实的、想象出来的概念,而颠覆性的计算机技术,也必然会带来医疗卫...

1909
来自专栏币圈

发行山寨币全程解刨,看到此文就此远离山寨币!

2018年区块链大火,从传统投资人到跳广场舞的大妈,无不构建着区块链的财富传说。这场大狂欢中,人们是怎么一步步被区块链山寨币套牢的呢?总结起来,山寨币的完整发行...

1191
来自专栏养码场

百度莱茨狗刚出就有人卖到了1W+!百度狗领养指南及运营解析!

由于群友吐槽:“场主,能不能别老是把我们命名为养码人ABCDEFG啊,感觉我们像是一个个机器人。”

781
来自专栏企鹅号快讯

你中了微信小游戏的毒了吗?

自从微信更新到6.6.1版本之后,页面下拉就会出现很多小程序 其中排在第一个的小程序就是微信团队推出的小游戏——跳一跳 ? 打开之后的画面是酱婶儿的,有一个萌萌...

2237

扫码关注云+社区