淄博文正机电技术有限公司 【东方金工·说深度】第10期：DFQ强化学习因子组合挖掘系统
核心观点淄博文正机电技术有限公司
传统的Alpha模型往往单独挖掘每个因子，在挖掘过程中只关注每个因子自身的选股效力，忽略了单因子在应用中的组合需求。实际上我们更关注的是可以协同工作并产生综合效果的因子组合。
本文展示了一种新的因子组合挖掘框架，直接使用因子组合的表现来优化一个强化学习因子生成器，最终生成的是一组公式因子集合，这些因子协同使用具有较高的选股效力。这样做既能保留遗传规划算法公式化的优势，也能提升模型泛化能力，适应多种股票池，还能大幅提升运算效率。
基于强化学习的因子组合生成模型，由两部分组成：1) Alpha因子生成器：使用Maskable PPO模型生成动作，并以token序列的形式生成公式化的Alpha因子。2) Alpha因子组合模型：组合Alpha因子，并给出奖励信号。这两部分互相依赖：因子生成器通过生成新因子提高因子组合的性能。因子组合模型的性能作为奖励信号来优化因子生成器。通过不断重复此交互过程，提升因子组合的选股效力。
风险提示
量化模型基于历史数据分析，未来存在失效风险，建议投资者紧密跟踪模型表现。
极端市场环境可能对模型效果造成剧烈冲击，导致收益亏损。
说明：
本订阅号资料基于东方证券股份有限公司已发布证券研究报告制作。
证券研究报告：《DFQ强化学习因子组合挖掘系统——因子选股系列研究之九十五》
发布日期：2023年8月17 日
分析师：杨怡玲 执业证书编号：S0860523040002
分析师：刘静涵 执业证书编号：S0860520080003
重要提示（向上滑动浏览）：
本订阅号为东方证券股份有限公司（以下称“东方证券”）研究所金融工程研究团队运营的唯一订阅号，并非东方证券研究报告的发布平台, 本订阅号仅转发东方证券已发布研究报告的部分内容或对报告进行的跟踪与解读。通过本订阅号发布的资料仅供东方证券研究所指定客户参考。因本订阅号无法设置访问限制，若您并非东方证券研究所指定客户，为控制投资风险，请您请取消关注，请勿订阅、接收或使用本订阅号中的任何信息。东方证券不因任何单纯订阅本公众号的行为而将订阅人视为客户。
免责声明（向上滑动浏览）：本订阅号不是东方证券研究报告的发布平台，本订阅号仅转发东方证券已发布研究报告的部分内容或对报告进行的跟踪与解读, 订阅者若使用本订阅号所载资料,有可能会因缺乏对完整报告的了解或缺乏相关的解读而对资料中的内容产生理解上的歧义。提请订阅者参阅东方证券已发布的完整证券研究报告,仔细阅读其所附风险提示、各项声明及信息披露,关注相关的分析、预测能够成立的关键假设条件,关注投资评级和证券目标价格的预测时间周期,并准确理解投资评级的含义。订阅者如使用本资料,请与您的投资代表联系。
在任何情况下，本订阅号中的信息或所表述的意见并不构成对任何人的投资建议，也无法考虑到客户个体特殊的投资目标、财务状况或需求，客户应考虑本订阅号中的任何意见或建议是否符合其特定状况，谨慎合理使用。本订阅号所载的资料、工具、意见及推测只提供给客户作参考之用，并非作为或被视为出售或购买证券或其他投资标的的邀请或向人作出邀请。
在任何情况下，东方证券对本订阅号所载资料的准确性、可靠性、时效性及完整性不作任何明示或暗示的保证。东方证券及关联人员不对任何人因使用本订阅号中的任何内容所引致的任何损失负任何责任，投资者应自主作出投资决策并自行承担投资风险。
东方证券不保证本订阅号中的观点或陈述不会发生任何变更，在不同时期，东方证券可发出与本报告所载资料、意见及推测不一致的证券研究报告。
本订阅号发布的内容仅为东方证券所有。未经东方证券事先书面协议授权,任何机构或个人不得以任何形式复制、转发或引用本订阅号的全部或部分内容,亦不得从未经东方证券书面授权的任何机构、个人或其运营的媒体平台接收、复制、转发或引用本订阅号的全部或部分内容。东方证券股份有限公司有权就任何不当行为要求行为人赔偿全部损失。提示客户及公众投资者慎重使用公众媒体刊载的证券研究报告。除非法律另有规定，任何情况下，对于行为人擅自使用该内容所包含的信息所引起的损失、损害等后果，东方证券概不承担任何责任。
请勿订阅、接收或使用本订阅号中的任何信息。东方证券不因任何单纯订阅本公众号的行为而将订阅人视为客户。
东证数量金融创新实验室
量化策略联席首席：刘静涵 15618058517/021-63325888*3211
邱蕊 *5091
薛耕 *6123
陶文启 *
更多相关信息请关注微信公众号：
]article_adlist-->期待与您的交流！]article_adlist-->
海量资讯、精准解读，尽在新浪财经APP
-
热点资讯
-
相关资讯
