规则圈选中所使用的画像标签数据是离线计算出来的，大部分在计算过程中剔除了很多明细信息，仅保留了最关键的画像内容，即某日某用户的标签值。...虽然画像数据是浓缩精简后的核心数据，但在很多人群圈选场景中依赖行为明细数据，比如运营人员希望找出2022-08-15 10:00:00到2022-08-15 12:00:00之间通过手机客户端点赞了某篇文章的用户...第一种使用Hive表导入，首先需要找到离线行为明细数据，然后将数据整理后写入到ClickHouse中；第二种直接消费实时行为数据并写入ClickHouse中，其圈选结果也更具时效性。...行为明细数据包含时间属性，可以计算出每一个用户按时间排序后的行为序列，基于该序列可以实现行为序列圈选。比如圈选出点赞文章后又分享文章的用户，找到收藏商品后最终购买了商品的用户。...在行为明细圈选时可以结合画像标签数据一起使用，比如找到在某时间段通过手机客户端点赞了某篇文章的北京市男性用户，可以直接关联画像宽表进行计算。
灵活的用户标签和强大的分群能力：这是 CDP 平台的核心建设目标，旨在提供全面、深度的用户洞察，精准满足用户需求。多维度实时分析：支持对用户画像、用户旅程和营销效果的实时跟踪与回收。...基于上述建设目标，众安保险目前已形成了完整的 CDP 解决方案，该方案包括以下几个关键步骤：全域数据采集：CDP 平台通过实时和离线数据采集方式，实现对全域数据的整合。...随后，利用 Spark 作业将 DWS 层数据抽取到 Impala 中，进行离线的标签计算和客群的圈选。...我们的升级目标是希望通过引入 Doris 来统一技术栈，实现实时和离线数据存储和计算的整合，从而打破数据孤岛，大幅度降低数据存储和资源维护的成本。...客群圈选在架构 1.0 中，客群服务先生成动态 SQL，然后将其传输到 Impala 中进行客群圈选。完成圈选后，结果集需被重新读取回客群服务，并由其上传到对象存储中。
明确了人群需求后，数据的流程主要包括： 数据源准备： 圈选目标人群所需要的标签数据从哪里来?...火车票订单、酒店订单、红包卡券数据 标签生产： 按照场景人群逻辑，清洗加工标签 人群圈选： 以标签为限定条件，从全量用户中过滤圈选出目标人群 用户触达： 将用户数据传输到营销通道，对用户进行触达 效果评估...： 回收效果数据，持续优化人群圈选条件 3.2 CDP产品架构 CDP(CustomerDataPlatform)是基于用户实时数据标签，精准圈选目标用户并快速输出数据服务的数据产品，充分融合了低代码...相比较传统的单人群圈选模式，流程化的场景构建基于人群、判断节点、过滤节点、营销策略等不同组件构建一个流程图，覆盖访问用户的各种精细化分群目标，可以更好地支撑多元化的运营需求。...人群拓展，基于目标的种子用户，利用算法模型进行人群扩展，提升运营效率。 算法标签生产流程提效，与机器学习平台联动，提升算法挖掘类标签的生产效率，在人群圈选上更多的发挥AI的价值。
分群功能 分群功能就是找出满足条件的目标用户并构建成人群并提供相关服务。...规则人群圈选是一种最常见、简单且易理解的人群圈选方式，图2-6展示了规则人群圈选的功能示意图，可以基于已有属性和用户行为数据进行人群创建。...给定一个种子人群，可以根据相似规则找到与该种子人群相似的用户并产出目标人群。...比如电商场景下提供了用户量级为100万的高消费种子人群，利用用户之间消费行为相似这一特点可以找出种子人群中每个用户最相似的10个用户，最终被放大为1000万的目标人群。...提示：TGI = [目标群体中具有某一特征的群体所占比例/总体中具有相同特征的群体所占比例] * 标准数100。 2.
最近CDP平台新增了很多算法挖掘的标签，扩展了基于算法模型直接输出目标人群的场景，通过AB对比，算法圈选的目标人群的转化效果要好于运营基于经验、规则人工圈选的效果。...从上述案例可以看出，规则运营，需要具有具备良好的业务经验和一定的数据思维才能将目标用户识别条件标签化，主要特点如下： 优点 1.行动敏捷，明确运营场景以及人群圈选条件后，可以快速进行人群输出，是CDP平台运营可以自助圈选...最终输出目标付费用户人群。 基于算法的智能化运营的特点如下 优点： 1.模型上线后，可基于自训练的能力，针对每个用户进行实时的行为预测，相比于规则的圈选，适用性更强。...2.基于模算法模型的人群圈选可以覆盖更多特征维度，用户分层能力更多样化、精细化。...转化效果可能高于业务经验版本(也有效果不好的算法) 3.模型可以直接输出目标人群或人货场匹配的API接口，运营需要参与的工作大幅减少。
平台为业务人员提供海量标签，支持快速圈选目标人群，同时提供精细化人群画像洞察能力，联动多渠道进行推送，并支持人群效果的数据查看，助力业务人员进行全链路用户运营。...04 用户画像平台能力 在平台建设层面，自如用户画像平台能力包含人群圈选，人群洞察、人群营销、营销效果分析，支持全链路定向用户营销。...人群圈选：通过人群圈选可进行精细化用户分层，而用户分层是个性化营销的基础。画像平台支持标签组合、分群组合以及 ID 数据上传 3 种方式，适应营销人员在不同场景下的圈选需求。...人群营销：支持 push/短信/优惠券等方式进行定向用户营销，例如圈选北京 7 日活跃用户，推送中秋礼包活动，进行节日关怀；圈选解约业主，通过短信活动触达，进行业主召回；自如的人群包对接至家服 CRM...04 小结 本次分享到此结束，希望你通过本文的学习能了解，对于产品、运营、分析师、客服等各个角色掌握用户画像的重要性；并且掌握画像平台能力建设：标签体系、人群圈选、人群洞察、人群营销、营销效果、标准接口
但是昨晚逛朋友圈看到该课程的一个学生在他的公众号：《 医学僧的科研日记》，写了一个笔记：突变特征(Mutational signatures)，让我很感动，就翻了翻 他的朋友圈，发现一个超级有意思的图及配文《朋友圈选美大赛
本节主要介绍人群创建所依赖的画像宽表的生成方式。为什么要创建画像宽表？基于原始的标签数据表进行人群圈选有什么问题？如何生成画像宽表？针对这些问题本节会给出详细解答。...当用户圈选需求涉及任意N天的用户行为时，只能通过存储历史标签数据来解决。 支持跨时间的人群分析。...如果画像平台用户对于人群圈选的速度没有要求，直接基于Hive表进行计算是可行的。...但是有些业务对人群圈选速度有比较高的要求，比如热点运营团队，当热点事件出现之后，需要能够以最快的速度找到目标用户并推送Push消息，此时直接从Hive表中圈选用户便不再满足业务需求。...ClickHouse也比较擅长做宽表分析，基于这一特点可以把其作为Hive表的“缓存”使用，从而满足人群圈选和人群分析的提速。
规则圈选是按照指定条件从画像数据中找到满足要求的用户并沉淀为人群的一种常见的人群创建方式。所谓的规则就是条件的组合，比如北京市男性用户，最近一周平均在线时长介于2到10分钟之间的中老年用户。...人群创建引擎读取到规则人群配置信息后，首先判断是否适合通过BitMap实现人群圈选，如果适合，可以获取标签的BitMap在内存中进行交、并、差操作；不适合BitMap实现的可以兜底通过ClickHouse...画像宽表进行人群筛选，其实现逻辑是将人群圈选条件转变为SQL语句，借助ClickHouse引擎查询出所有满足条件的UserId并构建人群；当ClickHouse执行异常时会再次兜底从Hive表中筛选用户...，同理，人群圈选条件最终转换为Hive SQL语句并最终将执行结果构建为人群。...基于BitMap进行人群圈选主要分为两步，第一步是从ClickHouse中读取标签BitMap，第二步是在内存中进行BitMap的交并差运算，其实现语句如下所示。
通过计算种子人群中每一个用户与其他非种子人群用户间的向量距离，找出距离每一个用户最近的TOP用户便可构建出目标人群。...借助画像数据对种子人群进行特征分析并找出其主要标签特征，比如种子人群标签特征趋向于：性别男、年龄30至40岁、兴趣爱好－军事，那么可以把非种子人群中的所有30-40岁之间爱好军事的男性用户圈选出来作为目标人群...目前也有利用社交网络进行人群LookALike的实践方案，通过好友关系找到种子人群中所有用户的几度好友并构建目标人群。挖掘人群是指定优化目标，借助算法能力找到满足要求的用户并构建人群。...规则人群是通过“条条框框”的筛选条件找出满足要求的用户，而挖掘人群通过算法更好地拟合用户特点，以业务的优化目标为导向更精确地找到目标用户。...以上示例都有具体的挖掘人群的优化目标：游戏下载量、充值金额、关注用户数，算法工程师根据该目标选择合适的模型进行人群挖掘。
Push等，通过红包激励手段，召回流失用户 精准分流：产品功能迭代AB或营销活动投放，基于用户地域、性别等标签属性，进行流量的精准分层运营’ 客户关怀：生日关怀、会员福利、服务受损用户关怀，通过用户标签圈选目标用户后...标签口径不一致：用户画像、精准营销平台人群圈选、算法特征都会涉及到用户或商品标签，各个系统存在标签同义不同值、同值不同义的问题，导致标签复用度低、重复建设带来的成名和资源浪费，这也是中台要重点解决的问题...业务运营靠经验：一般精准营销平台强调基于标签圈人的能力，什么样的用户适合推什么样的产品，提供什么样的服务，靠运营同学人工操作，基于经验或数据分析，确定特定场景下的人群标签条件，圈选后进行后续营销动作。...1.4 产品目标 （1）提供数据源接入及管理功能，将数据开发线下对接开发流程线上化、自动化 （2）建立完善的用户、商品标签体系，提供人群圈选、场景配置能力，标签生产流程配置化，业务自助配置取代数据开发、...提供基于标签圈人的能力，精准圈定目标人群进行分析或数据输出 功能要点：人群列表，新增人群流程（圈选、excel等自定义上传、SQL语句）、人群画像、人群输出(接口或场景配置) （4）场景管理 目标：对接营销
Task Revenue for Bike Sharing Systems Semantics-aware BERT for Language Understanding NWPU-CHAND：大规模人群计数基准...Junyu /Lin Wei /Li Xuelong 发表时间：2020/1/10 论文链接：https://paper.yanxishe.com/review/8731 推荐原因：这篇论文考虑的是人群计数的问题...目前公开的人群基数数据集规模都太小，不适合基于卷积神经网络的训练。这篇论文的贡献是一个一个大规模拥挤人群计数数据集NWPU-Crowd，包含了5109张图像，共标注了2133238个人。...为此这篇论文提出了一个平台增强的协同过滤框架，首先通过联合元学习方法在一组边缘节点上训练模型，然后仅通过几个样本就可以使得模型快速适应目标边缘节点上的新任务。...同时这篇论文还研究了其所提出的联合元学习算法在节点相似性和目标边缘的自适应性能上的收敛性。为了防御元学习算法可能遭受的对抗性攻击，这篇论文进一步提出了基于分布鲁棒性优化的联合元学习算法。
分群是手段，是工具，简单来说，分群分析就是通过聚类的方式，把相似的人群合并，考察同一事件或同一指标在不同人群上的表现，以推断并定位对该事件/指标有明显影响的因子。...那么，我们可以初步判断，可以优化的有以下两个方向： 1、 用户引流渠道可能有问题，需要调整渠道引流策略，包括渠道选择、人群针对性优化等，引入与消费行为匹配的新用户群，提高销售量； 2、 商品定位的调整...我们优先实践第一种优化方式，以调整渠道引入流量为主，优化引入人群的匹配程度，实现提高ROI的目标。后续还需要斟酌是否需要优化产品定位，比如打造针对男性的亮点频道，进行产品改善迭代。...但从成交上看，我们认为渠道A其实有很大的潜力，虽然现在的引入量较小，但与成交人群重合度较高，考虑到A渠道的获客成本低于渠道D，加大投放之后很可能会有一个不错的收益，能够实现我们提高ROI的目标。...3、渠道人群特征验证 我们对渠道人群A进行特征分析，女性比例高达62.36%，其用户群对购物类App的兴趣也高于大盘用户，与我们高价值人群特征匹配度较高。
导入人群是将外部数据导入画像平台构建人群，主要有3种实现方式：文件导入、Hive表导入和SQL导入。...Hive导入和SQL导入方式创建的人群数据直接存储到Hive表中，后续需要通过HiveToBitmap将人群数据写入BitMap并存储在OSS中。...与Hive导入人群方式不同，文件导入优先生成人群BitMap，之后再通过BitMapToHive过程写入到人群结果Hive表中。...导入人群是画像平台最常用的人群创建方式之一，其实现了将各类数据源沉淀为人群的功能，支持更灵活的人群创建方式，拓展了画像平台数据范围。...比如运营人员将某次活动中表现良好的用户导入画像平台并构建成人群，后续可以进行广告投放或者人群分析；数据分析师离线统计出了一批高价值用户，导入平台构建人群后可以直接提供给业务使用。
圈选对军事感兴趣的人群并用于Push应用背景：运营人员每天会整理当前俄乌冲突热门事件并通过Push推送给对军事感兴趣的用户，刚开始主要通过手动的方式在画像平台创建人群，然后导入到Push平台进行推送。...应用方式：调研人员通过画像平台LBS人群圈选功能找到了几所高校附近出现过的用户，并结合用户年龄段等标签提高了用户圈选的精确度。生成人群之后，私信平台可以通过接口拉取人群数据并进行私信推送。...以此类推，针对特定场合如医院、公园、电影院、旅游景点都可以进行精细化的人群圈选。3....基于组合人群赠送优惠券应用背景：三八妇女节当天电商平台会给女性用户赠送商品优惠券，主要通过画像平台的规则圈选找出所有女性用户并构建人群，当用户位于人群中时则赠送优惠券。...应用方式：在画像平台上通过规则圈选创建女性用户人群A，通过文件导入的方式创建黑产用户人群B，通过组合人群的方式创建人群A与B的差集人群C。
什么是RTARTA即Realtime API的简称，用于满足广告主实时个性化的投放需求，这里的实时是指API接口实时调用，比如定向人群包圈选可能都是T+1，甚至T+2。...2.广告主RTA人群圈选，营销目标，比如拉新、促活，用户分析。3.广告主离线算法模型，通过算法模型进行人群圈选输出。4.接口性能，因为API实时接口调用，接口调用要求较高，50ms-100ms。
画像数据存储引擎是为了提高人群圈选速度，直接基于底层大数据原始表做人群圈选性能较差，需要借助画像数据存储引擎提高人群生产效率。...本节提到的技术选型主要偏重存储层涉及的画像引擎及画像分析相关技术方案，对应到功能层面上的人群圈选和画像分析功能。 阿里达摩盘是阿里妈妈广告投放平台，该平台可以进行人群圈选并应用于后续广告投放环节。...美团和滴滴的实现方案比较相似，在人群圈选中主要使用的是Elasticsearch和Spark引擎，Elasticsearch可以快速找到筛选逻辑比较简单的人群，当涉及复杂的圈选逻辑时可以降级为Spark...百度内部用户画像相关圈选和分析基本都是基于Doris实现的。知乎的画像圈选也借助了Doris，并把Spark作为一些特殊业务场景下人群圈选的计算引擎。...最近几年ClickHouse比较流行，今日头条DMP以及CDP均通过ClickHouse实现了人群圈选，借助ClickHouse的BitMap实现了人群圈选的提速；快手DMP在人群圈选场景下也借助ClickHouse
而地理围栏则是，基于目标点的范围扩展，进入多边形区域内的用户(设备)，进行产品或服务上的差异化。...二、POI和地理围栏的应用场景 1.用户特征识别信息盲点补充 人群的差异化运营几乎是现在每个精细化运营的企业都在做的事情。...例如，小区周边新开了一家生鲜买菜的线下体验店，需要对曾经在周边1Km内取菜点取过菜的用户进行短信推送，吸引用户前来光顾，此时主要会用到【XX小区】+【周边1Km】+【订单数>0】等标签条件，来圈选出目标人群...LBS广告投放：Banner广告位或商家资源位，可以针对目标产品周边的用户进行展示，提升流量利用效率。...：通过多种条件筛选出目标POI或周边区域，如POI类型、属性、省份、城市、具体地址信息等，离线场景直接圈选目标人群，实时场景输出区域规则 服务输出：圈选的目标区域，作为LBS位置标签，对接精准营销平台，
用户量级是评估一款产品商业价值高低的核心指标，用户增长业务的主要目标就是提高产品有效用户量。...业务目标：可以实时查看不同广告投放渠道下新增用户量变化趋势。根据新用户归因结果构建“用户来源”标签，使用该标签可以进行人群圈选和画像分析。...业务目标：画像平台新增用户活跃相关标签，可以根据用户活跃情况创建人群并支持自动更新。画像平台人群可自动同步至Push平台，完成素材匹配后可以实现自动投放。...为了满足灵活的人群圈选需求，在画像平台需要新增“距今最近一次活跃天数”标签，该标签属于离线统计类标签，其标签数值表达了用户最近一次活跃距离当前的天数。...画像平台数据研发工程师可以根据用户每日活跃明细数据统计生产出该标签，标签生产完成后注册到画像平台并配置其支持人群圈选功能。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
