腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
腾讯云流计算 Oceanus
大数据产品生态体系的实时化分析利器。
专栏成员
举报
86
文章
255958
阅读量
173
订阅数
订阅专栏
申请加入专栏
全部文章(86)
流计算 Oceanus(79)
flink(73)
大数据解决方案(11)
大数据(10)
实时监控(3)
数据库解决方案(2)
运维(2)
sql(1)
人工智能(1)
hive(1)
kafka(1)
实时etl(1)
实时数仓(1)
实时数据集成(1)
实时bi(1)
Elasticsearch Service(1)
数据湖(1)
云数据仓库 ClickHouse(1)
restful(1)
异步编程(1)
搜索文章
搜索
搜索
关闭
腾讯云 AI 视觉产品基于流计算 Oceanus(Flink) 计费数据去重尝试
流计算 Oceanus
flink
人工智能
AI 视觉产品在我们腾讯云-人工智能的产品目录下,包括人脸识别、人脸特效、人脸核身、图像识别、文字识别等。 流计算 Oceanus 在腾讯云-大数据的产品目录下,是基于 Apache Flink 构建的企业级实时大数据分析平台。 AI 视觉产品是按调用量计费,毕竟涉及到钱,用户对计量数据准确是非常敏感的; 另外调用量本身也比较大,如何保证数据的准确一致也是一个比较大的挑战。 数据不准: 主要包括数据丢失和数据重复(当然可能有其他问题比如上报的数据本身错误等,暂不属于本次讨论范围)。 数据丢失: 相当于调用量少算,会影响我们的收入。一方面我们通常重试、持久化等方式尽量减少数据的丢失,目标当然是完全不丢,但很难做到100%不丢。另一方面很少量的数据丢失对于实际收入影响很小,对用户基本没有影响。 数据重复: 相当于调用量多算就会多收用户钱,用户一旦发现肯定会投诉过来。所以是必须要去解决的,但是数据量很大,要做到精确去重比较难。
吴云涛
2022-01-28
1K
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档