文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

钱大妈基于 Flink 的实时风控实践

摘要：本文作者彭明德，介绍了钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...图一：钱大妈实时风控流程示意图 二、业务架构 钱大妈风控业务架构如图二所示总共分为四个部分：事件接入、风险感知、风险应对、风险回溯。...图二：钱大妈实时风控业务架构图 三、规则模型 风控业务专员通过产品界面简单配置即可实时动态发布风控规则，同时对在线 Flink 作业的规则进行新增、更新以及删除，其中风控规则模型主要分为统计型规则和序列型规则...图六：社区Flink动态CEP规则表 五、回顾展望 基于 Flink 的实时风控解决方案已接应用于钱大妈集团内部生产环境，在此解决方案里未引入新的技术组件和编程语言，最大化复用 Flink 资源实现实时风控场景需求

3.9K20

资源利用率提高67%，腾讯实时风控平台云原生容器化之路

导语 随着部门在业务安全领域的不断拓展，围绕着验证码、金融广告等服务场景，腾讯水滴作为支撑业务安全对抗的实时风控系统，上线的任务实时性要求越来越高，需要支撑的业务请求量也随之增加。...对于业务快速上线和资源快速扩缩容的需求，且公司自研上云项目往全面容器化上云方向推进，水滴风控平台开始进行自研上云的改造。...水滴后台架构 水滴平台主要是用于业务安全对抗的高可用、高性能、低延时的实时风控策略平台，提供一系列的基础组件给策略人员进行构建策略模型，能够帮忙策略人员快速地完成策略模型的构建和测试验证。...水滴系统架构如下图所示： 水滴实时风控平台系统主要由配置处理模块和数据处理模块两部分组成。 配置处理模块主要由前端 web 页面、cgi 、mc_srv 和 Zookeeper 等组成。...自研上云效果 水滴平台在进行迁移上云过程中，自研平台迁移到 TKE 云上后带来了不少的效率提升。

1.6K20
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    金融行业数据湖平台选型：实时风控与监管合规的双重奏

    摘要 在金融行业数字化转型中，数据湖平台成为平衡实时风控与监管合规的核心基础设施。...本文将从金融行业需求出发，结合腾讯云数据湖计算（DLC）的实践，探索数据湖平台的选型之道。...##正文 一、实时风控：从“T+1”到“毫秒级”的技术挑战 金融实时风控需覆盖交易监控、反欺诈、信用评估等场景，对数据湖平台的核心诉求包括： 低延迟处理：需在数百毫秒内完成PB级数据查询与模型推理...集成腾讯云智能分析Agent，实时调用风控模型，输出动态决策建议。...##结语 金融行业数据湖选型需兼顾“实时风控”与“监管合规”双重目标。

    37810

    资源利用率提高67%，腾讯实时风控平台云原生容器化之路

    陈建平，后台开发工程师，现就职于TEG安全平台部-业务安全中心，主要负责中心实时策略风控平台开发。...导语 随着部门在业务安全领域的不断拓展，围绕着验证码、金融广告等服务场景，腾讯水滴作为支撑业务安全对抗的实时风控系统，上线的任务实时性要求越来越高，需要支撑的业务请求量也随之增加。...对于业务快速上线和资源快速扩缩容的需求，且公司自研上云项目往全面容器化上云方向推进，水滴风控平台开始进行自研上云的改造。...水滴后台架构 腾讯水滴平台主要是用于业务安全对抗的高可用、高性能、低延时的实时风控策略平台，提供一系列的基础组件给策略人员进行构建策略模型，能够帮忙策略人员快速地完成策略模型的构建和测试验证。...水滴系统架构如下图所示： 水滴实时风控平台系统主要由配置处理模块和数据处理模块两部分组成。 配置处理模块：主要由前端 web 页面、cgi 、mc_srv 和 Zookeeper 等组成。

    2K61

    携程是如何把大数据用于实时风控的？

    2010加入携程，参与了携程结算平台、风控系统的开发，对系统架构、流式数据处理等有比较深入的研究。...主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...数据运算所需的数据来源主要是：风控Event数据（订单数据、支付数据），各个系统采集来的 UBT、设备指纹、日志数据等等。 除了这些，风控平台还有非常完善的监控预警系统，人工审核平台以及报表系统。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...使用RiskSession就可以做到跨平台，更加有利于分析用户特征。 ?

    3.5K80

    中老年社交平台架构设计：从用户可信度模型到实时风控策略

    这类平台的核心挑战在于如何将传统风控的后端逻辑，转化为用户可感知的前端安全体验，并构建贯穿始终的可信环境。本文以行业实践为参考，探讨此类平台在架构设计中需重点关注的几个工程问题。...从架构角度看，用户触发的此类请求应作为最高优先级事件处理，通过独立于普通业务消息的通道（如专属的WebSocket命令通道或高优先级消息队列）直通风控中心，确保亚秒级响应，并立即在双方会话中生效。...基于边缘计算的实时风险提示为实现低延迟的安全交互，可采用边缘节点进行轻量级实时判断。在加密通信前提下，可部署轻量模型在边缘节点，对聊天中的文本模式进行实时风险分析（如高频敏感词组合、疑似欺诈话术）。...算法可解释性与公平性：推荐与风控算法应避免不可解释的“黑箱”决策，特别是在涉及用户权限限制时，应保留可追溯的决策依据。算法设计需主动避免对任何群体的无意歧视，确保公平性。...四、总结构建服务于特定群体的可信社交平台，其技术架构的核心命题是如何在保障极致安全与隐私的前提下，提供流畅、稳定、易用的服务。这要求从产品逻辑到系统设计，都将“可信”与“适老”作为第一性原则。

    21210

    TiDB 帮助万达网络科技集团实现高性能高质量的实时风控平台

    万达网络科技集团的技术团队，建设和维护着一套实时风控平台。这套实时风控平台，承担着各种关键交易的在线风控数据的写入和查询服务。...实时风控平台后端的数据库系统在高性能，可靠性，可扩展性上有很高的要求，并且需要满足如下核心功能和业务要求： 风控相关业务数据实时入库 实时风控规则计算 通过 BI 工具分析风控历史数据 ETL 入库到...但这些方案，无论是高可用安全性，强一致性，还是对业务应用所需要的复杂事务／JOIN 操作以及横向扩展能力上，都无法满足实时风控平台的业务要求。...这些问题集中反映在以下几个方面：最终万达的技术团队，通过评估验证，选择了 TiDB 帮助他们实现一个高性能，高可靠性和高扩展能力的实时风控平台后台数据库系统。...在实时风控平台的高并发高性能的对外服务过程中，在线灵活扩容的相关工作在 MySQL Proxy 中间件架构中无法高效和可靠的实施。

    2.1K10

    干货 | 携程基于大数据分析的实时风控体系

    性能和复杂度可以兼得 携程的风控系统，和大部分第三方支付平台一样，也是以实时风控系统为主： 支付环节一般留给风控校验的时间不会超过1s，业务风控点上更是希望风控能在100ms内就能通过；对性能的追求，也是对极致用户体验的追求...在实时风控场景里大量部署复杂模型，使模型也能和规则一样能直接拒绝交易；平均来看、执行一个模型以及相关的变量计算所需的资源可能与200条普通规则相当，对系统的架构和性能都是很高的挑战。...携程风控架构变迁简史 ? 携程自建风控系统开始于2011年左右，直到2015年正好赶上公司技术栈从.Net往Java平台转变，风控系统也迎来了一次完全的重写。...每天风控收集上来的数据超过50亿条，其中超过1亿左右的请求需要风控实时校验风险并返回给业务系统当前操作是否可以继续。...支撑风控系统的高可用、高性能，离不开强大的基础设施，下面我向大家展示一下携程风控的几个核心服务和组件： ? 风控引擎： ? 我们给他起了一个名字叫 Matrix，意思是像魔方一样灵活多变。

    4.1K50

    基于 Apache Flink 和规则引擎的实时风控解决方案 ​

    这要求风控系统一定要有实时性。本文就介绍一种实时风控解决方案。 1.总体架构 风控是业务场景的产物，风控系统直接服务于业务系统，与之相关的还有惩罚系统和分析系统，各系统关系与角色如下： ?...该系统有三条数据流向： 实时风控数据流，由红线标识，同步调用，为风控调用的核心链路； 准实时指标数据流，由蓝线标识，异步写入，为实时风控部分准备指标数据； 准实时/离线分析数据流，由绿线标识，异步写入，...2.1 实时风控 实时风控是整个系统的核心，被业务系统同步调用，完成对应的风控判断。 前面提到规则往往由人编写并且需要动态调整，所以我们会把风控判断部分与规则管理部分拆开。...Flink 把汇总的指标结果写入 Redis 或 Hbase，供实时风控系统查询。两者问题都不大，根据场景选择即可。...09/29/基于规则的风控系统/ 4.网易严选风控实践 https://sq.163yun.com/blog/article/183314611296591872 5.网易考拉规则引擎平台架构设计与实践

    7.4K20

    微分享回放 | 携程是如何把大数据用于实时风控的

    2010加入携程，参与了携程结算平台、风控系统的开发，对系统架构、流式数据处理等有比较深入的研究。...图1 主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...数据运算所需的数据来源主要是：风控Event数据（订单数据、支付数据），各个系统采集来的UBT、设备指纹、日志数据等等。 除了这些，风控平台还有非常完善的监控预警系统，人工审核平台以及 报表系统。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...使用RiskSession就可以做到跨平台，更加有利于分析用户特征。 ?

    2K80

    金融实时风控工具怎么选？这5款利器让你精准狙击风险！

    一、金融实时风控的核心需求 金融风控需覆盖多维度数据整合、秒级响应、智能预警三大核心能力。...反欺诈 包年包月、按量计费 FineBI 自助分析、可视化强 秒级更新 企业级多维风险报表 中等授权费 SAS风控平台 模型库成熟...低至万元级 三、腾讯云流计算：为何成实时风控利器？...四、选型建议：匹配业务阶段 大型金融机构：优先选择腾讯云流计算平台，满足合规与复杂模型需求； undefined 中小型金融科技公司：腾讯云流计算+FineBI组合，平衡实时性与可视化成本； 快速试水业务...结语 实时风控已从“可选项”变为“生存刚需”。工具选型需摒弃“大而全”的堆砌思维，聚焦数据整合效率、计算延迟与团队适配性。腾讯云流计算以其全托管、低延迟的特性，尤其适合追求敏捷迭代的金融团队。

    36810

    Go语言接入天远API信贷行为数据洞察：构建高性能实时风控引擎

    一、关于"信贷行为数据洞察API在秒级放款的现金贷业务、高频交易反欺诈、以及大型互金平台的微服务网关等场景中，系统的响应速度与吞吐量直接决定了用户体验与风控效率。...[信贷全周期行为特征]——包括多维度的查验频次与还款履约记录，是进行[实时风险决策]——如毫秒级自动审批与动态额度计算的核心数据支撑。...ppcm_m1_loanorg_newM1NewLoanOrgint新增借贷平台数。关注多头借贷趋势。...调用API补充信贷行为数据，清洗后写入HBase或ClickHouse，用于构建实时风控大屏。...在利用信贷行为数据洞察等涉及个人信用的高敏感度接口进行风控决策时，数据合规与隐私保护始终是企业不可逾越的红线。

    24410

    金融实时风控利器：主流流计算解决方案全景解析与腾讯云推荐

    在金融行业数字化浪潮中，实时风控已成为保障交易安全的核心环节。传统风控系统因延迟高、规则更新慢，难以应对现代金融交易的实时性要求。...流计算技术以其低延迟、高吞吐的特性，成为构建实时风控系统的技术基石，帮助金融机构在毫秒级内识别并拦截欺诈行为。 本文将深入解析市面上主流的流计算解决方案，助您选择最适合金融实时风控的技术路线。...一、主流流计算解决方案对比 目前，业界有多种流计算解决方案可全面支持金融实时风控需求，它们各有特色，适用于不同场景。 1....Apache Flink：高性能实时计算的标杆 Apache Flink因其高吞吐、低延迟和精确一次处理语义，成为金融实时风控的首选。...结语 在数字化金融时代，选择适合的流计算解决方案，是构建高效实时风控体系的关键。

    24010

    微信域名拦截 域名拦截类型 微信域名风控 域名拦截原因 微信域名申诉 微信安全域名 域名封控指南

    微信作为国内主流社交平台，对域名访问有着严格的风控机制，微信域名拦截主要分为红色拦截、白色拦截、蓝色拦截三种类型，不同拦截类型对应不同的违规场景与风控逻辑。...（如下图）核心触发原因如下：•平台竞争限制：这是腾讯系竞品（如淘宝、抖音、拼多多等）域名的常规拦截策略，微信为保护自身生态闭环，限制竞品链接在平台内直接传播，减少流量流失。...三、蓝色拦截（警告，可继续访问）蓝色拦截属于轻微限制，页面显示蓝色感叹号，提示“该网页可能非微信官方网页”，同时提供“继续访问”按钮，用户可自主选择是否继续浏览，风险等级较低，通常为临时风控或轻微违规导致...•传播异常：短时间内域名流量暴增、被批量转发，触发微信临时风控排查，属于阶段性拦截，通常排查结束后，若未发现严重违规，会自动解除拦截。...更多微信安全域名的合规使用技巧、完整的域名风控指南及实操方案，可进在我的主页一步了解学习。

    36100
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券