文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

钱大妈基于 Flink 的实时风控实践

摘要：本文作者彭明德，介绍了钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...图一：钱大妈实时风控流程示意图 二、业务架构 钱大妈风控业务架构如图二所示总共分为四个部分：事件接入、风险感知、风险应对、风险回溯。...图四：实时风控规则配置业务逻辑简图 四、难点攻坚 针对规则模型的流式序列型数据，我们选择 Flink CEP 处理事件序列匹配，由于我们整个风控作业使用 Flink 实现，并且 Flink CEP 作为...图六：社区Flink动态CEP规则表 五、回顾展望 基于 Flink 的实时风控解决方案已接应用于钱大妈集团内部生产环境，在此解决方案里未引入新的技术组件和编程语言，最大化复用 Flink 资源实现实时风控场景需求

4K20

携程是如何把大数据用于实时风控的？

本文由携程技术中心投递，ID：ctriptech。作者：郁伟，携程技术中心风险控制部高级开发经理。2010加入携程，参与了携程结算平台、风控系统的开发，对系统架构、流式数据处理等有比较深入的研究。...主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...由于每个风控Event请求，都需要执行数百个规则，以及模型，这时，风控引擎引入了规则执行路径优化方法。...，对于技术将继续拥抱开源技术，下一步会引入Spark等提高风控系统的数据处理能力。

3.7K80
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    干货 | 携程基于大数据分析的实时风控体系

    性能和复杂度可以兼得 携程的风控系统，和大部分第三方支付平台一样，也是以实时风控系统为主： 支付环节一般留给风控校验的时间不会超过1s，业务风控点上更是希望风控能在100ms内就能通过；对性能的追求，也是对极致用户体验的追求...在实时风控场景里大量部署复杂模型，使模型也能和规则一样能直接拒绝交易；平均来看、执行一个模型以及相关的变量计算所需的资源可能与200条普通规则相当，对系统的架构和性能都是很高的挑战。...携程风控架构变迁简史 ? 携程自建风控系统开始于2011年左右，直到2015年正好赶上公司技术栈从.Net往Java平台转变，风控系统也迎来了一次完全的重写。...新系统的架构、设计复杂度、预计的处理能力也充分考虑了公司的业务发展预期，第一次让技术走在了业务到来之前。经过每年一个大版本的迭代，到目前为止，携程风控的技术水平已经处于行业第一梯队。...设备指纹是风控识别欺诈交易的关键技术，此类核心技术要掌握在自己手里，携程风控研发的设备指纹服务，已经在携程全站部署以及携程集团旗下的多个站点部署，应用后规则抓取准确性提升非常明显。

    4.3K50

    基于 Apache Flink 和规则引擎的实时风控解决方案 ​

    这要求风控系统一定要有实时性。本文就介绍一种实时风控解决方案。 1.总体架构 风控是业务场景的产物，风控系统直接服务于业务系统，与之相关的还有惩罚系统和分析系统，各系统关系与角色如下： ?...登陆，盗号登陆； 交易，盗刷客户余额； 活动，优惠活动薅羊毛； 风控实现方案：事中风控，目标为拦截异常事件； 2.风控系统 风控系统有规则和模型两种技术路线，规则的优点是简单直观、可解释性强、灵活...该系统有三条数据流向： 实时风控数据流，由红线标识，同步调用，为风控调用的核心链路； 准实时指标数据流，由蓝线标识，异步写入，为实时风控部分准备指标数据； 准实时/离线分析数据流，由绿线标识，异步写入，...2.1 实时风控 实时风控是整个系统的核心，被业务系统同步调用，完成对应的风控判断。 前面提到规则往往由人编写并且需要动态调整，所以我们会把风控判断部分与规则管理部分拆开。...Flink 把汇总的指标结果写入 Redis 或 Hbase，供实时风控系统查询。两者问题都不大，根据场景选择即可。

    7.5K20

    Go语言接入API支付行为指数：构建高性能实时风控引擎

    在信贷风控环节，系统往往需要在300ms内完成对用户多维度数据的聚合与决策。...二、对接难点与技术选型本次对接的接口标准具有典型的金融数据交互特征，主要技术挑战如下：加密标准差异：接口采用AES-128-CBC模式，且要求IV随机生成。...五、总结通过Go语言对接风控数据接口，我们不仅利用了其并发优势解决了吞吐量问题，还通过强类型约束降低了业务逻辑中的空指针风险。...六、数据合规与隐私安全声明无论是使用Python、Java、PHP还是Go语言接入API，技术实现仅仅是数据赋能业务的起点。...在利用信贷行为数据洞察等涉及个人信用的高敏感度接口进行风控决策时，数据合规与隐私保护始终是企业不可逾越的红线。

    26710

    直播APP的技术难点

    直播APP的技术难点在于其对实时性、并发性、稳定性、音视频处理能力和数据安全性的极致要求。这使得直播APP的开发和运维比许多其他类型的APP更为复杂。以下是直播APP开发中主要的技术难点。...北京木奇移动技术有限公司，专业的软件外包开发公司，欢迎交流合作。1....难点： 信令传输的低延迟和可靠性、多人互动状态同步、避免消息乱序。连麦PK： 涉及多路音视频流的混合、混流、调度和同步，通常需要RTC（实时通信）技术。...总结：直播APP的技术难点是多方面的，涵盖了音视频编解码、网络传输优化、实时通信、高并发架构、大数据处理、AI智能审核以及复杂的业务逻辑。...成功开发一个直播APP需要一个经验丰富的团队，对上述技术领域有深入的理解和实践能力，同时要能够选择和整合市场上成熟的第三方云服务和SDK，以快速构建并保障系统的稳定性和用户体验。

    79110

    QGIS开发的技术难点

    QGIS 是一个功能强大的开源地理信息系统（GIS）软件，但其开发过程也存在一些难点。以下是一些主要的技术挑战。1....需要采用高效的数据存储和处理技术，优化算法和代码，提高软件的运行速度和稳定性。需要考虑内存管理和资源利用率，避免出现内存泄漏和崩溃等问题。4....插件开发与扩展QGIS 支持插件扩展，但插件开发需要一定的技术门槛。需要提供完善的插件开发文档和 API，方便开发者快速上手。...总结QGIS 的开发面临着诸多技术挑战，需要开发人员具备扎实的技术功底和丰富的开发经验。同时，也需要一个活跃的社区来共同维护和发展 QGIS。...相信随着技术的不断发展和社区的壮大，QGIS 将会越来越完善，为用户提供更好的 GIS 服务。

    33500

    微分享回放 | 携程是如何把大数据用于实时风控的

    作者简介 郁伟，携程技术中心风险控制部高级开发经理。2010加入携程，参与了携程结算平台、风控系统的开发，对系统架构、流式数据处理等有比较深入的研究。...图1 主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...由于每个风控Event请求，都需要执行数百个规则，以及模型，这时，风控引擎引入了规则执行路径优化方法。...在4.0中，将在机器学习、人工智能、行为特征等方向继续发力，进一步提高风控系统识别能力，对于技术将继续拥抱开源技术，下一步会引入Spark等提高风控系统的数据处理能力。

    2.1K80

    音乐NFT系统的技术难点

    音乐 NFT 系统，即将音乐作品或相关权益以 NFT（非同质化代币）的形式在区块链上进行发行、交易和管理的系统，其开发涉及多个技术和非技术层面的难点。以下我将详细阐述这些难点。...一、技术难点：1.版权管理与确权：元数据标准化： 如何在 NFT 元数据中准确、完整地记录音乐作品的版权信息（如词曲作者、表演者、录音版权所有者等），并确保不同平台之间的互操作性是一个挑战。...如何实现不同平台之间的互操作性，使用户可以在不同的平台上交易音乐 NFT，是一个技术挑战。...二、非技术难点：1.法律法规：版权法律的适用性： 现有的版权法律框架可能无法完全适用于 NFT 这种新的形式。如何确保音乐 NFT 的发行和交易符合相关的法律法规，是一个需要仔细研究的问题。...总结：开发音乐 NFT 系统涉及技术、法律、市场和商业等多个方面的挑战。只有有效地解决这些难点，才能真正发挥音乐 NFT 的潜力，为音乐产业带来新的发展机遇。

    44710

    线控技术

    0.概述 车辆线控系统包括线控油门，线控转向，线控制动等。...re=view&pn=51 1.线控制动系统安全策略研究： ---- 1、不同类型线控系统优缺点，硬件冗余布置方案。...2、用于线控系统的通信网络FlexRay 3、电源供应系统，可能的故障及预案 4、电制动力的控制方式 5、制动力分配方案，ABS在线控系统中如何实现 6、用于线控控制车辆的紧急制动装置。...目的： 冗余线控电源系统，电源管理器，保证能源供应安全。 各节点的实时控制和通信技术，减小响应时间。 整合ABS防抱死，ASR驱动防滑等芯片，提高制动安全性。 制动器失效模式，应急处理方案。...1.3 线控系统安全性能要求 自检功能： 将监测到的故障以编码的方式存入存储器，并及时调用应急处理方案。 容错功能：即使节点故障，整个系统不丧失制动能力，保证车辆能以低速行驶到修理店。

    75910

    金融实时风控工具怎么选？这5款利器让你精准狙击风险！

    金融市场的波动往往在毫秒间决定盈亏，而传统风控系统因数据延迟、分析维度单一，常让企业陷入“事后补救”的被动局面。据行业统计，过去五年内，风险事件导致的平均利润损失高达17%。...一、金融实时风控的核心需求 金融风控需覆盖多维度数据整合、秒级响应、智能预警三大核心能力。...低至万元级 三、腾讯云流计算：为何成实时风控利器？...技术架构优势 流批一体：同一套代码兼容历史数据回溯与实时流处理，避免开发冗余； 弹性扩缩：根据流量自动调整计算资源，应对突发业务高峰（如秒杀活动风控）。...结语 实时风控已从“可选项”变为“生存刚需”。工具选型需摒弃“大而全”的堆砌思维，聚焦数据整合效率、计算延迟与团队适配性。腾讯云流计算以其全托管、低延迟的特性，尤其适合追求敏捷迭代的金融团队。

    48710

    AI招聘APP的技术难点

    开发AI招聘APP时，会面临一系列技术难点，这些难点主要集中在AI技术的实现、数据处理、用户体验和安全性等方面。以下是一些主要的技术难点及解决方案。...1.AI技术的实现自然语言处理（NLP）的准确性：难点：解析和理解简历、职位描述和候选人沟通内容的准确性至关重要。NLP模型需要能够处理复杂的语言结构和上下文信息。...使用数据验证工具和技术来检测和纠正数据中的错误。数据隐私和安全：难点：处理大量敏感的个人数据，确保数据的隐私和安全是一个重大挑战。...采用缓存技术和异步加载来减少加载时间。5.安全性和合规性数据加密和访问控制：难点：确保所有数据传输和存储过程中的加密，以及严格的访问控制。...通过解决这些技术难点，AI招聘APP可以提供高效、准确、安全和用户友好的招聘体验，帮助企业和候选人更有效地完成招聘过程。

    34610

    社交APP开发的技术难点

    社交APP的开发涉及到的技术栈非常广泛，从前端到后端，从数据库到人工智能，每个环节都可能面临独特的挑战。以下是社交APP开发中常见的技术难点。1....难点： 图算法、用户画像构建、多模态数据融合。6....难点： 微服务架构、服务容灾、负载均衡、自动伸缩。监控与报警： 实时监控系统各项指标，及时发现并解决问题。 难点： 全链路监控、异常日志分析、智能报警。...难点： 如何设计吸引新用户的机制、如何鼓励用户进行首次互动、如何通过产品设计和运营策略打破“先有鸡还是先有蛋”的僵局。总结：社交APP的技术难点在于其对高并发、实时性、大数据处理和高安全性的极致要求。...这需要一个技术实力雄厚、经验丰富的开发团队，并对后端架构、数据库优化、IM技术、安全防护和AI/大数据应用有深入的理解。同时，考虑到用户体验的不可妥协性，前端的性能和流畅度也至关重要。

    59210
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券