首页
学习
活动
专区
圈层
工具
发布
首页标签大数据

#大数据

腾讯云大数据解决方案,助力客户快速构建企业级数据架构,获取数据时代核心竞争优势

消息队列理论基础与Kafka架构价值解析

IvanCodes

假设我们正在开发一个核心的电商交易平台。在最原始的单体架构或早期的微服务架构中,订单微服务创建完一条新订单后,需要通过网络接口直接调用库存系统扣减商品、调用积分...

500

java工具:《Java Stream 实现 List 交集过滤:根据 ID 数组筛选对象集合》

刘大猫

本文通过示例代码演示如何使用 Java Stream 结合 Arrays.stream() 和 anyMatch() 方法,从一个对象列表中筛选出与指定 ID ...

1300

别再怪模型不聪明了:冷启动,本质是你“没喂饱”数据

Echo_Wish

很多人一上来就说:“模型效果不行,是不是算法不够高级?”我想说一句扎心的话:大多数冷启动失败,不是算法问题,是数据问题。

2300

大模型不是你家熊孩子:聊聊生成式模型“去偏 / 去毒”流水线怎么落地

Echo_Wish

这两年生成式模型确实猛,写代码、写方案、写情书都行。但问题也来了——模型会“学坏”。

7310

标签脏了,模型再牛也白搭:聊聊训练样本标签质量的评估与修正(把信噪比狠狠干上去)

Echo_Wish

你可以用再大的模型、再炫的分布式框架、再花哨的调参技巧,但如果训练数据的标签是“半瞎”的,那你训练出来的模型,也只会“半瞎”。

5700

java工具:Java 8 Stream实现List集合排序

刘大猫

该代码使用 Java 8 Stream 的 sorted() 方法和 Comparator.comparing() 对 Repeater 对象列表按照 site...

8910

玩转 PySpark 自定义函数:UDF、UDAF、UDTF 全解析与实战

ETL 小当家

UDF 的核心逻辑是一行进、一个值出,本质上是对表中每一行的某个字段做一次独立的转换或计算,结果作为新的一列返回。你可以把它理解为对每一行数据套用同一个"加工模...

10010

Apache DolphinScheduler任务失败重试机制:像快递重投一样智能

Apache DolphinScheduler

想象一下,你寄送的重要快递被退回了,快递员不会直接丢弃,而是根据你的要求间隔几小时后重新投递,直到成功或达到最大投递次数。Apache DolphinSched...

11810

(一)新兴数据湖仓架构搭建与开发规范全攻略:数据仓库与数据湖概述

Apache SeaTunnel

在数字化浪潮下,数据成为企业核心资产,如何高效管理与运用数据至关重要。为此,白鲸开源特推出系列文章,围绕数据湖仓设计与实践展开,深度剖析数据架构、开发规范等关键...

9710

Apache SeaTunnel实战:MongoDB到Doris数据同步的5个常见问题及解决方案

Apache SeaTunnel

最近在几个数据中台项目里,频繁用SeaTunnel做MongoDB到Doris的数据同步。说实话,这活儿看着简单,真上手了才发现坑不少。尤其是生产环境,数据量大...

14810

数据湖上跑模型训练?别再“豪横烧钱”了,这样优化性能和成本才靠谱

Echo_Wish

底层对象存储随便扩,算力随便开,训练集直接从湖里拉,Spark、Flink、PyTorch一通怼——爽是爽,但月底账单出来的时候,心脏也是真疼。

10410

Go实战:基于劳动仲裁信息查询API打造企业风控阻断网关

天远数科

在当前复杂的商业与用工环境下,“职业索赔人”与频繁产生劳资纠纷的求职者给企业带来了极大的隐性成本。无论是企业招聘核心高管、开展大规模基础岗位招募,还是金融机构进...

7710

PHP进阶:利用劳动仲裁信息查询API实现企业级合规准入核验

天远云服

在数字化商业进程中,企业在开展招聘流转、金融信贷发放或第三方供应商准入时,面临着极高的信息不对称风险。传统的背景核查往往依赖于人工电话调查或被核查人主动提交的纸...

7810

从零开始学Flink:Flink SQL 元数据持久化实战

代码匠心

在上一篇 《从零开始学Flink:实时数仓与维表时态Join实战》 中,我们通过「订单事实流 + 用户维表」构建了一条基础的实时数仓链路。

10810

金融反欺诈新利器:基于Java对接劳动仲裁信息查询API拦截失信人员

用户11892842

在商业环境日益复杂的今天,无论是企业招聘高管及核心岗位,还是金融机构进行个人信贷审核,甚至供应链体系引入新的合作伙伴,对自然人的资质与背景评估都至关重要。仅凭简...

7410

架构实战:基于劳动仲裁信息查询API的自动化背景调查系统

用户11800419

在现代企业人力资源管理与金融信贷业务中,个人背景的真实性与合法性审查是构筑企业风控体系的第一道防线。传统的背景调查往往依赖人工核实与候选人主动披露,这种模式不仅...

9710
领券