“下一步人民银行营业管理部将探索监管科技应用,建立事中运行监测指标体系,推进试点应用运行监测平台建设,加强试点应用的运行监测及预警,守住不发生金融风险的底线;协助总行研究制定‘出箱’标准,完成试点应用的全流程测试,真正实现‘进得去、出得来’,努力打造具有中国特色,与国际接轨的‘中国版’监管沙箱。”9月8日,人民银行营业管理部主任杨伟中在“2020年中国国际服务贸易交易会北京金融科技成果专场发布会”上称。 与此同时,还将借助标准化手段做好试点应用成果转化和推广,形成一批可复制可推广的成果,为我国金融科技创新发展提供“北京范本”,为打造具有国际影响力的科技创新中心贡献北京力量。 2019年12月,人民银行总行批复支持北京在全国率先开展金融科技创新监管试点,探索构建符合我国国情、与国际接轨的金融科技创新监管工具。这标志着我国在构建金融科技监管基本规则体系方面迈出了重要的一步。 “在总行科技司的指导下,今年3月、8月,北京先后有两批次共计17个应用进入试点,并正式向用户提供服务,在全国9个试点省市中处于领跑地位。”杨伟中称。 如何坚持循序渐进、解决“试得稳”的问题?杨伟中称,扩宽试点深度,应用规模由第一批的6个增加为第二批的11个,由单一的银行领域拓展到保险领域,涉及的业务场景也更加广泛;延伸试点广度,申报主体由仅限持牌金融机构扩展至科技公司,但涉及的金融服务创新和金融应用场景则须由持牌金融机构提供,此举目的是尊重科技公司的创新地位,充分发挥其创新活力,打磨出满足金融行业共性需要、符合金融监管要求的科技产品。 我国金融机构数量众多、服务创新方兴未艾,传统的“政府监管”+“机构自治”模式面临较大挑战,为解决这一难题,引入更多外部力量参与监督是优化创新监管模式的有效手段。 杨伟中表示,首先,纳入监管协调机制,提升跨部门协调监管合力;其次是引入专业“外脑”,提升专业把关审核力;另外,发挥多领域专业优势,提升跨专业复合监管力,最后依托公示平台提升社会公众监督力。
叶湧青/文 在线交易是非常普遍的交易方式,由于在线交易属于一种非面对面的网上交易型态,银行无法确认操作在线交易的个人,是否就是拥有该账户的本人,这种不确定性及交易的隐密性,导致银行为该账户执行身份识别(KYC)等各类反洗钱措施效果大打折扣,再加上在线网络交易具备全天候、速度快、可跨地域转汇资金的特性,使得银行在此过程中须面对一定程度的洗钱风险。 当银行发现在线交易存在以下几种特征时,就必须对其中可能潜在洗钱风险提高警觉。 1、账户在历经一定沉睡期后,突然发生小金额测试往来 有些准备要出售的个人账户,会在账户开立后先静默一段期间,当不法分子买下这些账户后,为确认账户可以使用,先以小金额从账户汇进汇出进行测试,这便是账户被倒卖的明显信号。 2、账户资金分散转入、集中转出 账户资金如果出现分散转入、集中转出情形,再加上有转入账户对象不固定,或转入账户数量多且转账金额小的特性;或是转出资金为固定同一账户而转账金额又大,加上汇款均为一次性交易等征兆,极可能就是电信网络诈骗、非法集资、传销等洗钱上游犯罪。 3、账户资金集中转入、分散转出 和前一点相反,如账户资金出现集中转入、分散转出,而资金转入的账户又较为固定,且转账金额大,或转出账户不固定,但转出的账户数量多且金额小,就可能是不法分子通过账户清洗上游犯罪所得而进行的洗钱行为。 4、账户资金往来多为跨行、跨平台交易 不法分子常利用跨银行、跨平台交易达到切断资金信息链条的目的,让银行和支付机构在可疑交易识别上存在信息断层,造成识别难度加大且不易追踪的结果。 5、公转私交易频繁 账户公转私交易频繁也是在线交易可能的洗钱征兆,如果公司本身还具备空壳公司特征,那很可能是利用在线交易虚开增值税发票,或想通过公转私交易隐匿不法所得。 6、交易对手异常 如果账户出现交易对手的行业零散,与公司主营业务关联度低,交易跨区域且交易异常频繁,那银行就需进一步分析该账户,采取针对交易对手进行KYC的措施。 7、交易时间异常 正常账户的资金往来多发生在白天上班和非假日时间,如果全天24小时连深夜都有交易,或是节假日、周末等也有交易,或交易频繁发生在凌晨等不合常理的情形,银行就该重点关注。 8、交易IP地址异常 如果银行发现该账户IP地址与本行其他账户有共享IP地址情况,就要小心是否存在一个人控制多个账户的情形,此外,若是发现客户使用代理服务器进行交易,要小心该客户是否要故意隐瞒交易IP地址,不愿被知道IP地址,甚至可能交易IP地址就在境外,这对银行来说都存在洗钱风险,银行应联系开户人了解账户是否出借给他人使用。 9、交易金额异常 银行应重点关注账户在短期内交易金额迅速扩大,或是资金快进快出,账户资金不留余额或余额占交易额比重极低的现象,甚至转入转出金额均为相等的整数等情形。 10、异常交易特征须结合其他特征进行分析 对出现异常交易特征的账户,银行可先分析异常特征交易金额占总交易额的比重,如果异常交易金额占比低,基本可以排除是可疑交易,如果异常交易金额高,甚至占了该账户过去交易的很大比例,那就要针对公司和个人账户采取不同措施。 如果是公司账户出现异常交易特征,银行可先了解公司受益所有人、股东、高管等是否持有其他类似公司,然后进行实地查访,了解该公司是否具备空壳公司特征,或是以电话联系该公司账户的代理开户人、法定代表人,了解公司目前营运情况,也要了解资金转账所备注的信息,与公司主营业务是否有关联,并重视该账户资金交易金额与公司注册资本或营收规模是否匹配,最后要确认该账户的交易对手是否有空壳公司特征。 但如果是个人账户的在线交易出现异常,那银行就该关注账户资金往来与该账户所有人的职业、年龄是否相符,并直接联系开户人,了解交易真实情况以确认该个人账户是否存在可疑交易。 (本文作者系上海富拉凯会计师事务所反洗钱项目总监)
1 隔夜,美股又崩了。其中,道指跌超600点,跌幅高达2.25%,标普500跌近3%,纳指更是重挫超4%,最近3个交易日累跌超过10%。 (来源:Wind) 纳指接连重挫,跌幅更大,源于科技巨头的集体大范围扑街。其中,苹果4日累跌16%,蒸发3652亿美元,折合人民币2.5万亿元。另外,微软、亚马逊、谷歌、奈飞3日累跌分别为12.5%、10.8%、11.3%、8.3%。 尤其值得注意的是,此前被炒作上天的特斯拉隔夜暴跌21%,最近5个交易日股价从最高502美元跌落至当前的330美元,暴跌33.7%,惊诧众人。而在此前,短短5个多月,特斯拉股价飙升了将近600%,打爆了无数空头。 (来源:Wind) 此外,NYMEX原油隔夜同样暴跌7.37%,最近6个交易日从43美元一桶直下当前的36.49美元一桶,跌幅高达14.5%,来了一个乌云盖头的走势。 (来源:Wind) 消息面上,9月6日,据彭博社消息,沙特阿美下调了十月份向亚洲和美国的石油销售价格,这也是6月以来首次将亚洲买家的等级下调至折扣价。另外,沙特阿美还将下调向欧洲西北部和地中海地区出口的轻质原油的价格。 当然,原油价格走弱背后实质上是需求不振,背后对应着全球经济的冰冷。全球主要经济体——G20二季度唯有中国实现3.2%的正增长。美国下滑9%,日本下滑10%,欧盟下滑11.9%,印度更是大幅下滑23.9%。并且,全球疫情除了中国以外,美国、印度、欧洲疫情反反复复,并没有很好的办法控制疫情的肆掠,接下来的三季度、四季度的经济依然不乐观。 要知道3月份那一波全球金融资产崩盘,一个很重要的导火索是3月9日的石油暴跌。难道新一轮危机又来了吗? 2 近来,美股为何重新开始暴跌模式呢?我们从流动性和宏观经济基本面去进行分析。 第一,美股流动性边际扩张的不确定性非常高。 从3月底以来,纳指一度涨超75%。这可是大盘指数,背后原因是美联储无底线的流动性泛滥。短短3个多月,美联储印钞3万亿美元,资产负债表从4万亿扩张至7.17万亿美元。 不过, 6月份高峰之后,最近2个多月资产负债表却维持在7万亿美元左右。这样看来,美联储并没有继续大规模扩张流动性,而是有所收敛。 为什么呢?因为美元崩不住啊!美元指数从3月份最高点的103点一度瀑布式下跌至91.7,跌幅超过10%。 (来源:Wind) 8月27日,在杰克逊霍尔全球央行年会开幕,鲍威尔官宣了“平均通胀目标制”。这意味着通胀目标可以突破原有2%的上线,美联储继续实施宽松鸽派的货币政策空间更大了。但是市场对于美联储接下来的操作路径仍然存疑。 并且,市场一直期待的收益率曲线控制(YCC),一直被美联储否定,这其实都不是什么好消息。 3月底以来,美股无休止的大幅暴涨,要继续大涨需要的水量也越来越大。但是接下来美联储边际扩张流动性不确定很高,让本身处于高位的市场坠落。 第二、宏观经济一点也不乐观。 9月1日,美国供应管理协会(ISM)公布,美国8月ISM制造业指数为56,高于7月的54.2。这是自2019年1月以来的最高水平,其标志着连续三个月的增长。该指数高于50表明占美国经济11%的制造业处于扩张状态。 9月8日,美国劳工部公布的最新数据显示,8月份美国非农部门新增就业人数为137万人,低于市场预期的140万人和7月份修订后的173.4万人。不过,美国失业率从7月份的10.2%降至8.4%,低于市场预期的9.8%。 从数据看,美国经济似乎也处在修复之中。但修复强度有多大,经济在三季度能否像中国实现V型反转?恐怕一点也不现实。 根据全美商业经济协会近期的一项调查显示,超6成受访者预测,2022年之前,美国经济将持续低于2019年的水平;近半数受访者认为,美国经济至少要到2022年下半年才能恢复到2019年第四季度水平。 (来源:NABE survey) 并且,美国疫情仍在疯狂肆掠,没有被控制的迹象。看数据,每日新增确诊数还在下滑,有所收敛,但为大选服务似乎又是情理之中。 3 美股接连下挫,导致全球资本市场风险偏好急剧收敛。A股近来同样跌跌不休。今日,上证指数一度跌超2%,深圳成指跌近4%,创业板指跌超5%,恐慌情绪也在蔓延。 (来源:Wind,截止11:10分) A股近来继续调整,亦是对此前市场不顾中国央行收紧流动性的纠偏。截止目前,中国10年期国债收益率已经攀升至3.14%的高位,已经完全回到疫情之前。可见疫情期间特别宽松的流动性已经退出。这自然会给整个市场带来压力。 (来源:英为财情) 另外,近来A股大市成交量萎靡,大多维持在8000-9000亿的水平,与7月上旬的1.6-1.7万亿的水平相距甚远。并且,随着创业板注册制的正式挂牌,A股市场IPO挂牌明显加大,今年融资额已经创下10年新高,抽血不小。新增量资金没进来,除了IPO还有场内减持套现数额巨大,都会施压市场。 (来源:Wind) 总之,鉴于全球市场风险偏好有所收敛,当下的风险投资不宜激进,需谨慎而为之。
9月9日,汇丰集团全资附属公司汇丰保险集团(亚太)有限公司(下称汇丰保险)宣布,已在上海自贸区临港新片区成立汇丰金融科技服务(上海)有限责任公司(下称汇丰金融科技服务公司)。 汇丰金融科技服务公司预计于2020年底前开业,初期将为汇丰集团全新的移动式财富规划服务“汇丰聆峰创投计划”在中国的先行先试提供科技创新和数字赋能,并逐步为集团内外更多持牌金融机构提供相关支持。 首期重点包括持续研发定制私人财富规划方面的各种工具,研发供企业使用的员工福利和健康管理平台,在用户授权情况下协助用户完成数据整合,在数据安全和隐私保护的大方向下研发数据服务新产品等。 汇丰保险主席张博思(Bryce Johns)表示:“此次于临港新片区成立金融科技公司,体现了汇丰对中国市场及金融科技的持续投入。依托临港新片区的高新产业布局,我们希望能够将内地领先的科技创新能力与汇丰多年的国际金融服务经验相结合,为推动中国经济开放及创新发展做出贡献。” 汇丰聆峰创投首席执行官及汇丰金融科技服务公司执行董事孙丹莹表示:“随着社会经济的发展以及科技与金融的不断融合,金融科技近年来在中国发展迅速并得到了有力的政策支持 ,人工智能、大数据、云计算、物联网等信息技术与金融业务深度融合,为金融发展提供源源不断的创新活力。很高兴汇丰可以参与并支持内地金融科技的快速发展,并通过开发创新的数字解决方案为客户以及行业创造价值。”
据阿富汗黎明电视台报道,阿富汗第一副总统阿姆鲁拉·萨利赫办公室确认称,当地时间9日一早,萨利赫的车队在喀布尔市泰马尼地区遭遇炸弹袭击。安全部门官员称,袭击导致至少10人死亡,另有超10人受伤。 萨利赫办公室称,这次袭击的目标是萨利赫的车队,萨利赫本人幸存,但是一些工作人员和保镖受伤。 萨利赫的儿子艾巴德·萨利赫(Ebad Sale)发布推文,称事发时自己和父亲在一起,“我向你们保证,他(父亲)很好,大家都很好,我们当中无人身亡”。 萨利赫在一个视频中确认车队遭遇炸弹袭击,并表示自己的安保人员受伤,自己的手和脸受了轻伤。此外,他就爆炸袭击对旁观者造成的伤害表示歉意。
9月9日,此前涨势迅猛的创业板指数盘中大跌近5%,引起市场广泛关注。 数据来源:Choice 数据来源:Choice 而究及原因,主要是基于:近期创业板低价股的炒作风潮正盛,天山生物为首的少数流通市值小、价格低、基本面差的创业板股票受市场情绪炒作过热,遭到深交所重点核查,使得板块出现一定的盘整所致。 在资本市场未出新热点之时,受赚钱效应的驱动,注册制改革的到来激起了市场做多的乐观情绪,相对于估值较高的龙头白马股,天山生物等低价股便成为了资金博弈的不二选择,进而带动了创业板的涨幅。 “截至9月8日收盘,创业板全日成交3375亿元,历史上首次超过上证A股成交额3202亿元。”——公开数据 然而,这类妖股的基本面与炒作热情背道而驰,在短线资金接力炒作以及投资者盲目跟风之下,脆弱性尽显。 基于此,近来风头正劲的创业板“第一妖股”天山生物受到了深交所的重点关注。 9月8日晚间,天山生物公告称,公司股票自9月9日开市起停牌,自披露核查公告后复牌。 资料来源:官方公告 继8月28日第一次停牌之后,这是天山生物第二次停牌。 复盘近期该公司股价表现,天山生物从8月中旬以来该股累计涨幅超过500%,其中,在过去12个交易日内收获11个涨停板,8月16日至今累计换手率超过166%,最新总市值为108亿元。 数据来源:富途牛牛 针对这一情形,市场上还是有人比较清醒的。 图片来源:股吧 毕竟这一暴涨的估值与其基本面表现严重背离。 回顾其基本面,2014年至2019年,该公司扣非净利润分别为-141万、-3251万、-1.40亿、-60万、-18.47亿和-1亿,已经历连续6年亏损;2020年上半年,公司营收1.10亿,同比增长77.75%,净利润-764万,扣非净利润-1116万;公司总资产9.24亿,负债7.86亿,净资产1.37亿,资产负债率高达85.06% 而由于2018年和2019年公司已连续两年亏损,一旦2020年净利润继续亏损的话,天山生物将面临退市风险。 数据来源:Choice 而即便是这样,天山生物此前的暴涨充分说明了此时的投资者已经无视基本面表现,凭着一腔炒作激发的热血,盲目跟风追高心态尽显。 资源来源:股吧 除此之外,同日,另外两只受到热炒的第三代半导体概念股也遭遇停牌。 豫金刚石、长方集团均公告,因股票交易严重异常波动,公司股票自2020年9月9日开市起停牌核查。 资料来源:官方公告 截止到9月8日,豫金刚石报收6.64元,自9月以来股价累计涨幅已超110%。 数据来源:富途牛牛 长方集团报收8.30元,自9月以来股价累计涨幅已超160%,连续5个交易日20%涨停。 数据来源:富途牛牛 同样,上述两家公司的业绩也无法支撑其股价的暴涨。 豫金刚石2020年上半年归属上市公司股东的净利润亏损3.57亿元,同比减少853.67%;截至2020年9月4日,公司共涉及55项诉讼与仲裁案件,案件金额合计约45.9亿元; 长方集团2020年上半年净利润亏损3375.3万元,较上年同期下降182.44%; 对此,深交所正全面排查天山生物等公司的交易情况,发现有些交易可能涉嫌新型股价操纵行为。 豫金刚石在8月24日至9月8日涨幅严重异常期间,获自然人买入占比97.14%,机构投资者买入占比2.86%。 长方集团在9月1日至9月8日异常波动期间,自然人买入占比97.48%,机构买入占比2.52%。 而本次深交所的重拳出击,可以说是对近年来“炒小炒差”现象的直面打击,毕竟炒作带来的泡沫总会破灭,热情也总会降温,这一类型的“垃圾股”、“问题股”并不属于价值投资的范畴,不过是投机者的中转站。 爱建证券认为,创业板博弈在继续,吸引了更多的资金关注。创业板涨幅大的优势,利于资金博弈,但这种博弈也体现出市场心态的谨慎,在龙头白马大幅上涨之后,估值已相对较高,从投资角度来说已脱离安全区。而低价个股由于涨幅小绝对价位低成为资金博弈的选择,尤其创业板涨幅的扩大提供了空间。 长城证券指出,20%涨停板吸引了更多的短线资金参与博弈,市场交易量出现明显的倾斜。短线资金博弈创业板低价垃圾股的投机心理有所增强,吸引不少散户投资者的跟风。由于创业板低价股的基本面整体较差,投资者参与这类个股的博弈需要提高警惕。 华融证券指出,近期创业板成交量创新高,其中不乏低价股的热炒,调整是公司成色的试金石,短期内资金流入可以逆势拉升,但难以改变基本面长期趋势。建议投资者保持信心,精选优质公司耐心布局。
2020年8月7日-9日,第五届CCF-GAIR全球人工智能与机器人峰会,于深圳隆重举办。此次峰会由中国计算机学会主办,雷锋网、香港中文大学(深圳)联合承办,鹏城实验室、深圳市人工智能与机器人研究院协办。在大会第三日的「AI金融专场」中,著名统计学家、普林斯顿大学金融讲座教授范剑青,从大数据与人工智能、稳健因子学习及其应用、债券风险溢价预测、高频交易预测、文本分析与金融投资,这五大板块,向与会者报告近些年他的研究团队的部分工作成果。范剑青是国际数理统计学会创办70年以来第一位华人主席,也是统计旗舰杂志《统计年鉴》的第一位华人主编,论文引用数多年位列世界数学家前十名,是素有统计学诺贝尔奖之称的CPOSS总统奖得主,也是《概率及其相关领域》、《计量经济》、《商务统计》等五个国际顶尖学术期刊的主编。在范剑青看来,人工智能是机器学习的平方,让机器自动学习机器算法、是机器学习的理想境界。而大数据赋能AI,从大数据相关的科学挑战衍生的新兴科学即为数据科学,他认为数据科学以应用为背景,其目的是想把大数据解决成智慧数据。他指出,大数据=系统+分析+应用,机器学习=统计+优化+实现环境。如今深度学习之所以能如此成功,范剑青认为它是权衡偏差和方差的有效方法,深度网络使高维函数更加灵活,大数据降低了统计方差,而现在计算技术使大数据深度学习得到有效的实现。范剑青认为,在经济金融、生物医学、管理决策和人文社会中,机器学习有很多挑战和机遇。由于个体差异大,数据集未知,现在发生的事情与几年后的变量完全不一样,难以提取特征,需要各学科交叉。尤其是在金融行业,数据不平稳,随着时间而变,多人参与竞争的市场也是对金融的挑战。而机器学习本身就是为降低维数和预测而设计的,他认为机器能学习金融,尽管金融非常复杂,但它的形式是可预测的。以股票收益预测为例,可以通过高维线性模型、机器学习模型或是深度学习模型来处理。他强调,成功预测的属性一是大数据,二是鲁棒,三是模型具备市场的重要特征。他还详尽地用几个例子来说明溢价预测相关的问题,例如通过市场因子来预测债券风险;并介绍了现阶段可以使用的两种因子学习方法,一是传统主成分方法,二是利用投影主成分来操作。此外,范剑青也与现场观众介绍了文本数据如何协助股票投资决策,他表示现在可以通过对新闻内容的分析,解析文章对股票的褒贬程度。最后,范剑青总结称,资产定价本质上是预测问题,机器可以学习金融。他认为机器学习可以帮助处理大数据并从中选择重要因素和特征,能很好地应对过度拟合的问题,允许非线性学习极大地改善预测效果,将稳健性和对抗性网络提炼为定价,智能预测也会带来很大的经济收益。以下是范剑青的大会报告内容,雷锋网做了不改变原意的编辑与整理:非常荣幸能够参加第五届CCF-GAIR全球人工智能与机器人峰会。我今天的报告主题是《机器是怎么学习金融的》。这次报告的内容,是我们金融工程实验室多人的工作成果,大纲如下:大数据与人工智能稳健因子学习及其应用债券风险溢价预测高频交易预测文本数据与资产定价重新理解大数据与人工智能众所周知,人工智能是由John McCarthy于1955年首次提出,一年后,他也与多名科学家组织了著名的Dartmouth会议。何谓人工智能?Wikipedia中是这样介绍的:“人工智能”指机器模仿人类的“认知”功能所展示的智能,例如“学习”和“解决问题”。现实中的人工智能是技术能够训练机器,将人从重复性、简单性、危险性的繁琐事务中解除出来。Thomas J.Sargent:人工智能其实是统计学,只不过用了一个华丽辞藻。我认为人工智能是机器学习的平方,让机器自动学习机器算法、是机器学习的理想境界。目前内容包括图像识别、语音识别、机器学习、机器人、专家系统、计算机视觉、自然语言处理等。为什么现在大家谈人工智能?What powers AI?是大数据。现在大数据无处不在,商业大数据、医学大数据、网络大数据、政府大数据等。针对大数据的共性,解决其对大数据系统和分析的科学挑战所产生的新兴科学叫数据科学。我个人认为数据科学以应用为背景,包括数据的获取、存储、数据分析、科学计算。数据科学的目的是想把大数据解决成智慧数据。我把它总结为:大数据=系统+分析+应用。何谓机器学习?Arthur L Samuel在1959年的“跳棋游戏”论文中创造了“机器学习”这个术语:让机器从数据中学习并做决策,它是可扩展的统计算法,充分融合统计建模思想和计算优化方法。使这些数据分析的思想能在大数据环境下得到有效的实现。我个人认为机器学习是:统计+优化+实现环境。机器学习最后的产品一定是可操作的代码(Actionable codes)。为了有可操作的代码,我们需有优化的目标(Optimization objects),为了有优化的目标,我们需有统计模型(Statistical Modeling)和经济效用(Economic Utility)。现在最常见的是深度学习。深度学习的概念是很常见的,是数学的函数逼近,它用的是两种方法,信号源的线性组合,再做非线性的选择,重复的过程构成很复杂的函数逼近方法。为何今天深度学习这么成功?我认为它是很好的权衡偏差和方差的有效方法。深度网络使得高维函数逼近更加灵活,即偏差很小。另外90年代,我们就参与建设了这方面的工作,为什么学术界和工业界现在才大谈深度学习?主要是因为大数据的到来,大数据的到来大大减少统计的方差,样本量变大,方差自然变小。现在计算技术使得大规模优化成为现实,使得我们可以在大数据上实现深度神经网络逼近函数。简而言之是非参数统计思想在高维海量数据环境下的实现。具体成功案例是图像识别、机器翻译、语音处理等等。这些问题的共同特点是个体差异小,我们说话尽管各有口音,但个体间的差异小,而且信号集已知,你看到的图像就是你那张图像。换句话说X是已知的,信噪比大,∈小,学习得比较好。我们今天要谈的主要是机器学习的挑战。对于经济金融、生物医学、管理决策和人文社会,机器学习有很多挑战和机遇,第一是个体差异大,第二是数据集未知。例如上图是闪电崩盘,这次发生的事情和几年后发生的事情,可能变量完全不一样,是什么引起的我们也不知道,所以难以提取特征,需要各学科交叉,使得这方面的发展挑战更大。对金融来说,金融数据的特点是什么?第一信号低,跟物理不一样,物理信噪比很强。第二数据不平稳,一直是随着时间的变化而变化的,整个市场也是随着时间的变化而变化,很多人参与,这是一个竞争的市场。这是对金融的挑战。机器能学习金融吗?回答是肯定的:第一,资产定价问题,本质上是预测问题,机器学习本身就是为预测设计的。第二,影响市场的因子变量很多,这些变量往往是相关的。机器学习本身就是为降低维度和变量选择设计的。第三,定价的公式,不像物理是推导出来的、有很多假设的。资产定价非常复杂、形式未知。机器学习正是为高维复杂的非线性组合而设计。基于这三个原因,我认为机器从某种程度上讲是能够学习金融。如果我有一个黑盒子可以预测金融下一刻的回报,我们应该如何投资?假设有1000只股票,有这1000只股票的额外收益数据,还有风险因子和公司本身变量数据,我们要预测每一只股票的额外收益或者投在每一只股票上的权重。如果你预测第i只股票,你肯定要建一个形式,一个是宏观变量(macro-factors),一个是公司的变量(firm characteristics)。我们对每一只股票进行预测,常用回归来做,,可以是高维线性模型、机器学习模型或者深度学习模型。举例来说,我要预测下一个时刻的股票回报,我要用现在时刻市场因子,加上每个预测的参数肯定跟第i只股票和时刻t有关系。这既依赖第i只股票,也依赖第t天。我们把做成线性回归的形式,把写在一起,我们很容易得到1000个变量甚至更多。有了预测后,我们一般怎么投?1000只股票里,在我预测里的top 10%做多,bottom 10%做空。首先这应该是Risk-neutral的投资。市场涨时,top 10%涨,bottom 10%降;市场降时,top 10%降,bottom 10%涨。第二是这样的投资组合足够多样性(diversified)。第三充分体现你的预测信息,哪些股票是top 10%,哪些股票是bottom 10%。还有一种方法比较好,是6月份刚写完放在网上的一篇文章。关键词是“Principal Portfolios”,用你估计到的信号和做一个主成分投资组合。第三种很传统,用资产定价理论,在时刻t构造一个Portfolio,使得最小化。神经对抗网络可以解决这种条件预测问题。以上是资产定价常见的三种方法。大家自然会问预测成功的因素是什么?一是大数据;二是鲁棒性;三是你的模型捕获能力。什么是大数据的典型特征?相依性和厚尾性:我们很多变量都是衡量市场的经济状况,必然相关异样性、内生性、假相关等数据缺失,测量误差幸存者偏差,采样偏差这些特征对金融和宏观经济学尤其明显。今天我们主要讲如何处理相依性和厚尾性一些方法。接下来我用一个学术上常用的例子预测债券风险溢价来说明。我要预测的变量是美国债券,债券有2、3、4等年期,可以对每一个债券进行预测。是131个宏观经济系列的月度数据。除此之外我们还有8个国内生产总值,居民消费价格指数等汇总宏观经济系列。这131个变量都是衡量经济的健康状况,所以他们是相关的。我们对每一个时间序列算峰度(kurtosis),分布如图所示。有大概三分之一左右峰度大于,它们应该是厚尾分布。我们自然而然会问:如何处理厚尾?我们从131个变量学习决定市场的因子之外,我们还有8个宏观经济时间序列,我们如何使用这8个信息更好地提取市场因子?稳健因子学习及其应用如果大家要看论文,可以看看这一篇综述:Fan, J., Wang, K., Zhong, Y., and Zhu, Z. (2020).Robust high dimensional factor models with applications to statistical machine learning. Statistical Science, to appear.如果更详尽大家可以看看我们新著的《Statistical Foundations of Data Science》这本书,有三章会讲这方面内容。什么是因子模型?假设我有1000只股票,有5个影响这1000只股票涨幅的市场因子,不同的股票对不同因子的依赖程度不一样,因此有一个载荷矩阵 B。再加上每一只股票自己的特质因素(idiosyncratic components) ,很多时候我们把这两个部分称为。这种衡量1000只股票的相关性,在股票市场上有很多应用,同样对其它方面也有很多应用。比如根据1000个基因的表达共同性,找出潜在的因子。我们主要的信息是什么?我们学习了因子后,我们把因子共性的部分完全学习好,把它减掉,则整个信噪比增加。举一个简单的例子。设想我用131个宏观经济序列来预测债券风险溢价。这131个变量具有高相关性,机器学习里常用的变量选择方法,正则性会不满足。如果把131个变量分成不同因子:共性+个性,然后把代到里,我们变成两部分:共性和个性。假设影响这些宏观变量的共同因子是5个,共性的参数是5个,个性的参数是131个,最后得到136维空间的变量。这136维空间中变量的相关性很弱,因为相关的部分已经取出来。如果把现在的作为你新的变量,我们平时采用的高维方法就能工作。这就是我们提出的因子调整的模型(FARMselect)方法。简而言之是先学习共同的因子,然后用和作为预测变量。如果你把学好了,求出来之后解一解就可以了。整个思想是把原来131个变量变成136个变量,空间变得大了,变量变得弱相关。用共性+个性,和原来的是等价的,这个过程其实是用因子增进预测能力。举一个模拟的例子。这是线性模型,前10个变量对Y有影响,后面的变量没有影响。X如果是有共同的相关性,假设有250个变量,做100次模拟,每一个时间序列长度是100。如果我们用原始Lasso来做变量选择,只有在完全不相关时,Lasso工作得还好。只要相关系数增加一点点,Lasso就不能完全选出这10个变量。另一方面,如果我把这250个个性,加上每一个共同的因子拿出来作为第251个变量,就可以达到100%的正确模型选择。如果说不知道是不是251个,而用255个可以吗?可以,也可以得到这样的效果。如果Σ设成像标普500只成分股那样的协方差,最后的结果是一样的,我们可以百分百把重要的变量选出来,其他的方法做不到。同样的话,我们可以把这个方法拿来做统计推断。比如我们自然而然会问到底有多少共同基金有技能(positive alpha)?设想我有1000个共同基金,我们把分成共性+个性。以前最简单的做法是把每一个共同基金的额外收益平均作为统计量,这样的统计量肯定是相关的,有共同因子,且噪音比较大。我们所说的因子调整是学习共同的因子并减去,这样得到的统计量是弱相关,且减少噪音。我们有相关的模拟试验来证明,我只是做一个简单的介绍。想象我们有500只股票,为了图像方便理解,25%的基金有技能,为0.6, 75%没有。假设观测100天,只是做500只基金平均回报的直方图,基本分不出哪部分有技能,哪些没有。如果我们把共同因子先学习一下然后减掉,就比较容易区分了。因为是t3-分布,尾巴比较重(heavy-tailed),如果我们做鲁棒均值估计, 就可以把这两者分得很开。同样地,因子学习后,我们也可以做预测。从131个宏观变量里,我可以学到5个潜在因子,有8个汇总宏观变量,加起来有13个变量。最简单的是用这13个变量做线性回归来预测债券风险溢价。另外一种是构建预测指标,整个模型看起来像神经网络。我们认为有一些共同的因子影响这些宏观变量,所以从131个宏观变量中学习共同因子后,构造预测指标,最后预测债券风险溢价。提起因子,除了我们平时做的主成分分析之外,我们如何把8个额外的变量加入因子学习的过程中?很简单,是常见的因子模型,假设这几个未知因子跟是有关系的,对这个模型我们如何操作?我们对每一个宏观经济序列和8个汇总宏观变量做回归,这个拟合所得是X用W回归的拟合值,再对该拟合值做主成分分析,这样就把8个变量糅合到131个变量里。为什么这个方法可行?因为做回归从数学上来说是基于条件期望。我们做投影的目的是什么?先把这部分的噪声平滑掉,这样就可以把因子学得更好。这是我们主要的想法。因子模型还有其他的应用。比如金融风险建模,对高频金融里流动性强和差的股票之间的协方差矩阵的估计,用矩阵填补的方法可以获得。你也可以用相关性来学习社区增强自回归模型之类,其关键是降维。因子模型的目的是处理相关性,接下来我讲几分钟我们如何处理稳健性。假设你给我们的数据不一定是正态分布的,也可能是t分布的,有均值及方差。我们平时对数据最简单的处理是剪裁或截断,如把数据在-3到3个标准差之间就保留,其余就截掉,这样做好处是肯定产生偏差。如果τ选择的足够大的话,这种偏差是可以忽略的:裁剪的数据的样本平均跟原来的母体平均的差别就像数据是来自高斯分布一样。换句话说,如果τ足够大,那么裁剪样本平均与母体平均之间的区别跟正态的样本平均与母体平均之间区别是一样的,最后的分布是具有高斯的尾部性质。说宽泛一点的话,裁剪样本平均表现像高斯分布,而没有裁剪样本平均表现像柯西分布。为什么我们以前不太强调裁剪?因为我们在低维传统统计中做样本平均不多,在高维统计中会做很多样本平均。所以高斯浓缩(Gaussian concentration) 是高维统计的核心。举一个例子。如果你给我1000只股票,我要做投资,我要估计这1000乘1000个协方差矩阵,应该有50万个参数左右。所以要算样本均值50万个。如果数据是厚尾的,最后的协方差矩阵就不鲁棒。如果用了裁剪,当数据仅具有4阶距,就能实现与高斯数据的样本协方差矩阵相同的估计精度。做回归时,如果我们用裁剪数据不是很方便,这时候我们会用Huber 损失函数。为什么说是自适应Huber 损失,是因为是跟你的样本量有关系。基本在里面是一个二次型,外面是一个线性的。我们这里画了这么多图,是因为我们用了很多不同的。这显然对回归更方便,就像前面说的高斯浓缩性质任然成立,这是两个鲁棒方法的主要思想。简单做个小结:我们用因子模型来解决观测到股票相关的问题。我们是用裁剪数据来解决鲁棒问题,对回归问题我们用裁剪损失函数,即Huber损失函数,来得到鲁棒性质的。我们说过预测的好特征必须是鲁棒。债券风险溢价预测关于溢价预测,我们现在有两种因子学习方法:一是传统因子学习方法。从131个未汇总的宏观变量中提取因子,加上8个汇总的宏观变量,一共是13个变量,来预测债券风险溢价。二是投影主成分(PPCA)。直接糅入里面一起学习。不是简单地从131个变量变成139个变量来学习,而是用投影主成分分析来学习,因为这两种变量不一样,是未汇总的,而是汇总的。然后用新的和作为预测变量。我们来看一下预测的效果。如果我预测两年期的债券风险溢价,用传统方法学习到5个因子,再加上8个汇总宏观变量,一共13个做线性回归,得到的Out-of-sample R²,有24%的债券风险溢价能够被这131+8个变量所预测。如果因子学习得好一点,把揉入学习因子,就是投影主成分分析,这一下预测率就可涨到32.6%。如果说把统计的稳健思想都加进去的话,就可以预测到38.1%。对三年期也是一样,从21-28-32%。这些预测都是用线性模型做的。如果我们用非线性模型来预测,效果比刚才的预测都要好,最后Out-of-sample R²可以达到45%左右。这就可以看出来稳健方法和PPCA因子学习一起学习比较好,这是其改进的程度。高频交易预测接下来简单介绍高频交易的预测。高频交易在过去10年里是高速增长的,带来了金融大数据。到2015年,高频交易在美国股票市场占比超过50%,约55%左右,在欧洲大概占40%左右,日本大概是30%左右。其他的亚洲国家是5%左右,高频交易是在其他亚洲国家出现得比较少。从2012年10月到2014年十月,在外汇交易中,80%的交易量是算法交易,其中多半是高频交易。所以高频交易显然是把大数据带到金融世界里。我们自然而然会问机器学习的方法是不是能够帮助我们做预测或者做高频交易?这个环境显然是大数据环境。我们总的目的是要用过去预测未来。那么,自然而然需要问,什么是可以预测,Momentums可以预测还是Durations可以预测?那么,什么是有用的预测因素呢?我们要往后看多久?现在机器学习的方法有没有任何优势?关于TAQ数据这个我们就不多讲了。我们说的Momentum是这样定义的。如图红点(出价)和绿点(要价),它们未来或往上走或往下走。第一次,这两个点同时往上或往下走1-tick,对这个例子来说正好是负的,我们就定义。如果我们继续等待这两个点同时往上或往下走2-tick时,这两个点同时往上走,是正的,也就是。简单来说,我们的Momentum是站在现在的时刻(也即是t),+1表示往上, -1表示往下。在中间的交易量,t到t'之间称为duration。1-tick的Duration表示的是当前时刻t到下一个同时往上或者往下走1-tick的时刻t'之间的交易量,用表示,Duration同理。我们问的是站在现在这个时间,我们能不能预测?我们能预测的变量显然来自于交易数据,包括交易价格、交易量多少、还有交易方向(是买入还是卖出)。对于报价数据,有最佳买入价和最佳卖出价,和它们相应的买入量和卖出量,一共7个变量。如果往后看L步,那就是7乘L。为了简单起见,我用表示(最佳买入价格)和(最佳卖出价格),表示 (最佳买入量)和(最佳卖出量),上述这些都是原始数据。另一方面,是专家构造的预测因子,由于定义比较复杂,公式我没有写出来,例如Order Book Imbalance和Order Flow Imbalance。上述全部就是我们构造的变量。首先尝试微软的Momentum能否预测?我们最后的结论是可预测的。我们对微软的数据用过去50个最佳报价,每一个包含bid和ask,所以一共100个变量。我们用过去10天的数据训练,5天的数据做测试。如果你只是做最佳随机预测(BRG),基本正确率是50%左右。如果你做逻辑回归(LR),大概是在55%左右。如果做EN,大概也是55%左右。如果用随机森林(RF),你可以达到59%左右。GBT和FNN都差不多是59%左右。换句话说,机器学习的确有优势。怎样的变量是重要的?用绿线表示所有7个变量的结果,红线表示选择的一个子集(quote size和trade direction)的结果,红线比随机预测多预测8%。用该子集预测的效果跟用所有的变量预测几乎差不多。如果往后看,这是,大概有900个变量。这时候过度拟合就可以看出来。但是如果用GBT或者FNN,过度拟合就不存在。如果用专家设计的变量,例如OBL,不管你用哪个机器学习的方法来做,没有超过8%左右。如果你用OFI来做,效果更差。第一幅柱状图是我们用原始数据来做的,第二幅是原始数据+专家构造的变量来预测,最后的效果几乎差不多,说明机器完全学习了专家的变量。第三幅是用瞬时的原始数据做的,第四幅是瞬时的原始数据+专家构造的变量。加专家构造的变量几乎没多少改进,说明专家建立的变量已经被机器学习的变量所涵盖。如果是0.5个tick,预测结果就会高很多。如果是2个tick,效果几乎是差不多的。对duration,我们也可做类似的研究。这时duration是有多少交易量,它是一个连续的变量,所以我们做的是线性回归,用Out-of-sample R²来衡量。由于时间关系,我不再赘述。这个图是说加专家构造的变量可能对预测duration有一点点帮助,但帮助可能不那么大。对我们刚才高频数据一个简单的总结如下图:文本数据与资产定价由于时间不多,我简单介绍文本数据以及资产定价。这是我以前的学生,他用我们的筛选方法来做,我把他们的结果快速介绍一下。目的是学习文件和新闻的褒贬度,用它预测选择股票。传统一般用基于Dictionary的方法。这是一个IBM的短文为例。词典中总共有38,862个单词,其中只有160个出现在短文中。我们有一个n × m个文档-词汇矩阵d。假设100万条新闻有4万个词汇。我们把这4万个词汇变成S(带情感词汇) 和 N(情感中性词汇)。我们主要关心带情感词汇。假设选出来的200个词,在第i个短文里出现5次第j个单词,这样,得到一个100万x200的矩阵。如果这个文章的褒贬程度是百分百正,这个单词出现的概率是多少?如果是百分百负的话,这个单词出现概率多少?如果这第i个文章的褒贬程度是的话,这个单词出现概率则是它们两个概率的加权平均。这样第i个文章中S词汇出现的次数服从多项分布,其中表示S词汇在百分之百正的文章中出现的概率,表示S词汇在百分之百负的文章中出现的概率。最后给定一个短文或者新闻,假设这个股票涨或者降与这篇文章对股票的褒贬程度的关系呈单调性。这是我们的模型。我们如何学习?第一步学习哪些单词带有情绪,我们对每一个单词可以计算:包含该单词的新闻出现的那天回报是正的,除以该单词出现的次数。即在回报是正时,它出现的频率有多少?越靠近百分百,说明它是正面的词;越靠近0,它应该是负面的词,因为回报要么是正的,要么是负的。如果我们用最简单的相关筛选方法来做,看每个单词跟正回报之间的相关性是多少,做一个简单的扫描我们的文件集,我们大概扫描出100-200个词左右。这100-200个词里频率出现最高的有比如rally、undervalue等都是正面词汇。相似的,blame、shortfall、fall等都是负面的词汇。我们用很简单的方法,比如你选top 100个词汇,然后再选bottom 100个词汇,就是褒义和贬抑的单词200个词左右。下面就是让计算机学习词义,比如我们有100万条新闻和200个单词,就是100w × 200大小的矩阵,这是单词出现的次数或者出现的频率。按我们刚才的模型,出现的概率等于出现在百分百是正的文章概率是多少,以及出现在百分百是负的文章概率是多少的加权平均,这是常用的主题建模(topic modeling)。写成矩阵P大小为100万乘2,以及θ为2乘200。如果你给我每篇文章的情绪或者褒贬程度P,我就能够把θ求出来,即把词义学习出来。这个P如何学习?这个学习直接跟股票回报连在一块。因为我们有100万篇文章,每一篇文章都有那天的回报,所以你很容易看第i个文章回报的排名是多少。这篇文章回报的排名就变成这篇文章情绪的排名。有了,我们就可以学习情绪θ,学习了情绪后,对未来新的文章就很容易给出一个分数。已经知道未来文章的200个词的词义,唯一不知道的是这篇文章能打几分。因为我们有Multinomial Model,所以就很容易把用极大似然法求出来。把它求出来,这篇文章就有新的分数。总结一下,先用相关性筛选法把与情感相关的词汇选出来;然后对过去100万个文章,按他们回报的高低来给他们情绪打分;有了情绪打分P之后,就可以把词义学习出来;对未来新的文章就可以用Multinomial统计学习得到它相应的分数。以下是具体的应用,数据来自Dow Jones Newswires 1989-2017年,有650万条新闻。我们用前15年的数据作为学习,其中10年数据作为训练集,5年数据作为验证集,选择最优参数。2004-2017年数据做为测试,使用第t天的情绪来预测第t + 1天的收益。交易策略是什么?对每天每个新闻打分。我们买最高、最好的新闻的股票50只,做空分数最低的50只股票。我们投资策略是Equal-Weighted或是Value-Weighted。最后是Zero net investment construction。投资的效果是什么?黑线是我们刚刚画的long-short equal-weighted表现。黄线是SP500,要低很多。仔细看L-S的return,Sharpe ratios (SR)是4.29,average return大概是33%,用Fama-French 5个因子加上momentum factor(FF5+MOM)的风险调整后的alphas大概是32,而且汇报与这些风险因子几乎无关。比较Dictionary方法与RavenPack,我们的方法更有效。下图是Speed of News Assimilation,如果你投得太晚,新闻的价值很快就没有了。总结如下:现场提问环节IEEE Fellow王强:在深度学习里使用监督或者半监督的模型,我也可以看到lowest数据或是非lowest数据,您觉得PCA方式跟深度学习的方式,哪个更好用?范剑青:这个提问很好。PCA本身是线性的因子学习。做PCA的目的是想将相关的变量的共性跟特性分开。对于很相关的变量,例如刚才把131个变量直接放在机器学习里,可能会包含太大的相关。我们主要想讲的是PCA将共性和个性分开,可以把136个变量放到深度学习里。深度学习可以作为很好的预测方式,但是如果变量很大相关的话,可能预测效果并不好。PCA要学习的东西跟深度学习要学习的不完全一样,可以互补。