首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

腾讯大数据平台自治能力探索

第二,在这些基础设施上,平台大脑整合整个生态中大数据组件开发者、运维专家的经验能力,结合规则引擎、时序数据异常检测的机器学习算法、业务异常归因算法等,发展出用于异常发现、问题诊断、成本调优的平台能力,...并在这个过程中反哺到原本的观测基础设施中,不断完善观测到的指标集和分析能力。 第三,这是平台大脑目前正在探索的阶段,即利用上述的决策信息,来做辅助人工或联动大数据平台的各个组件实现自恢复自优化的能力。...一、基础服务层 最先搭建的基础架构层,提供的是自治体系的基石--数据的统一数据采集能力, 下图为腾讯大数据平台本身的组件体系,基于它的复杂性和现网业务的敏感性,对于平台大脑基础架构层的采集agent,基础服务层需要满足...二、平台服务层 平台服务层包括:数据可视化平台、实时分析平台、离线巡检平台、算法决策平台及公共服务平台,这些能力很显然是依赖生长在腾讯大数据自身基础组件上的,其中: 1.数据可视化平台 提供时序类指标、...这里讲到的平台大脑的搭建,并没在提数据质量管理、或者是常规的devops领域的配置管理能力,这是因为这部分能力已经有一定建设基础了,所以就没有进行赘述。

1.4K60

小程序运营的六基础能力

很多自媒体运营,对小程序的使用,以及结合公众号的引导成交做的还不够好,小程序上线已经快一年了,各种能力的开放,也极大方便了自媒体运营,尤其是自媒体电商的转化。...今天给大家谈谈小程序的六基础运营能力。 小程序的运营主要借助线上,线下的运营能力进行推广的。 1、码的能力 小程序的二维码,小程序码是小程序的主要推广方式之一。...,自定义菜单也成为公众号推广小程序的主要能力之一。...3、 绑定公众号的能力 小程序可以绑定公众号,不同主体之间也可相互绑定,绑定之后的推送,直接触达到消息页面,每次的绑定推送,也会带来巨大的访问量。...4、插入微信图文的能力 小程序可以直接插入微信图文。这是小程序运营的最重要的能力

1.5K60

腾讯数据平台部总监刘煜宏:这5产品平台,展示了腾讯大数据的核心能力

腾讯技术工程事业群数据平台部刘煜宏受邀参加“腾讯慧聚”品牌的发布仪式,并向在场嘉宾介绍了“腾讯慧聚”的5产品平台。 ? 十年磨一剑,砺得梅花香。...“我们希望通过腾讯慧聚,开放腾讯海量实践的大数据能力,更好的赋能外部客户。”...据刘煜宏介绍,腾讯慧聚当前共包括五平台:Dmaster(大数据一站式平台)、Tbase(海量事务处理平台)、TDbank(实时接入平台)、Hermes(实时多维分析平台)、TDinsight(机器学习基础平台...这五平台除了Dmaster是一个一站式、覆盖全流程的平台外,其他四个平台各有侧重。这也是腾讯根据多年服务不同类型客户的经验,所挖掘出的不同需求。...TDinsight作为机器学习基础平台,可以提供一站式的机器学习平台,释放数据潜力,帮助用户快速接入人工智能的快车道。

4.2K90

数据分析7能力:梳理数据需求

今天分享数据分析师必备的工作能力——需求梳理。需求梳理很不起眼,甚至很多小伙伴感受不到他的存在。但它结结实实影响到大家的下班时间和绩效。 一、什么是数据需求?...Who:数据使用者 When:数据使用时间 Where:数据使用场合 Why:使用数据原因 What:具体数据格式 三、who:谁使用数据 包括: 申请人:部门,姓名 审批人:领导签名、邮件回复 加上审批人...,可以在一堆需求塞车的时候,按领导等级高低排序给数。...不主动问数据用在哪里,结果业务拿着数据乱捅一波,捅完了就说:“诶呀,我们又不懂,都是数据提供的你去问他”……数据自然百口莫辩,死无全尸……所以不要吝啬语言,问清楚! 六、why:为什么需要数据。...八、小结 满足了5w的,就是一个完整的数据分析需求了。梳理数据分析需求,不但能减少重复工作,更可以为数据分析师发现项目机会,提高BI使用率,体现工作业绩打下坚实的基础。至于具体如何做,下篇再分享。

79520

快DKH大数据基础数据平台的监控参数说明

2018年国内大数据公司50强榜单排名已经公布了出来,快以黑马之姿闯入50强,并摘得多项桂冠。Hanlp自然语言处理技术也荣膺了“2018中国数据星技术”奖。对这份榜单感兴趣的可以找一下看看。...本篇承接上一篇《DKM平台监控参数说明》,继续就快的大数据一体化处理架构中的平台监控参数进行介绍和说明。 DKhadoop大数据处理平台架构的安装相关文章已经分享过,详细的内容可以找一下看看。...今天就把剩下的一些监控参数一起介绍完,关于快大数据处理平台监控参数的介绍就完整了。...kill的应用程序 图片6.png 监控 yarn资源管理中被杀死的应用程序数量 纵轴表示应用程序数量,单位个 横轴表示时间,单位分钟 2、Spark监控界面 注意:(spark 运行任务后才有监控数据

1.2K20

YonTalk 咖论道:YonBuilder 低代码开发平台能力解析

3 月 16 日,由用友开发者中心发起的 YonTalk 咖论道通过直播方式与大家见面。...如今,低代码已成为许多企业构建应用的重要手段,更是企业数智化转型的一种基础能力。...YonBuilder 以云原生、多租户、模型驱动为基础技术,面向原厂开发、ISV 开发、本地化开发、企业自建、个人开发者在内的全生态,提供无代码和低代码的可视化开发能力,并与开放平台、连接集成平台、DevOps...更全面地说,用友将 YonBuilder 低代码开发平台能力划分成低代码应用构建、低代码移动开发、低代码连接集成、低代码数据分析、低代码区块链构建、低代码 AI 开发六个方面,进而可以为用户提供三种能力...为了实现移动 PC 一体化,充分发挥移动设备的能力和优势,YonBuilder 在构建传统 PC 应用的基础上,还提供了移动开发能力,一次构建可在多个终端使用。

21220

弈聪软件BDS大数据公共服务平台决策分析能力特点

基于海量大数据分析决策成为企业发展数字化的基础和原动力,如何正确开展数字化转型已经成为各大企业的首要问题。...西安弈聪信息技术有限公司(简称:弈聪软件)专注于数据可视化领域,为企业提供高效易用的大数据分析决策平台,自主研发了BDS大数据公共服务平台,可以快速、准确收集融合各种异构数据,跨数据源快速建立关联关系,...分析挖掘潜在未知价值,实时交互展示信息结果,为政府及企业提供管理、分析、研判、推演等功能,应用数据服务提高各行业决策分析能力。...弈聪BDS大数据公共服务平台特点一、多数据源接入,异构数据融合弈聪BDS大数据公共服务平台能够接入Oracle、DB2、Microsoft SQL Server、Microsoft Access、...弈聪BDS大数据公共服务平台针对数据屏应用,内置多种主题风格,支持包括指挥中心、业务看板、汇报演示等业务场景,可根据不同的业务需求选择合适的模板,同时也支持用户自由定制风格和样式。

1.2K100

低代码开发平台的四门户和七能力

阿汤:当前国际形势深刻演变,大国关系深度调整,传统和非传统安全问题进一步显现,国产操作系统、中间件、数据库等基础软件,作为国家信息产业发展和信息化建设的重要基础和支撑,正面临着被“卡脖子”的风险。...02 四门户七能力解决挑战,低代码平台助力信创应用快速迁移 我们是国内较早采用低代码开发技术理念的公司,早期的产品可以追溯到2003年公司的首款应用开发平台产品。...为了更好地助力客户解决技术、人才、工作量这些信创挑战,我们从渠道层、应用层、核心能力层到生态适配层梳理出了低代码开发平台的四门户七能力,帮助企业清晰梳理场景视角,屏蔽底层技术的复杂操作,让用户的体验完整而一致...七能力 核心能力层主要提供流程引擎、表单数据引擎、报表引擎、脚本规则引擎、资源仓库、组织机构、身份认证七核心能力,能够帮助企业在高技术人才有限的情况下良好应对各种复杂场景,支撑内外部复杂技术团队的能力共赢...基于四门户七能力,我们的低代码开发平台以不输于跨国企业的软件性能和稳定性,赢得了很多行业头部客户的认可,最终成为了自带多端工作台,拥有完备的软件工程体系,扩展方便、安全可控、易于集成,高度适配信创生态的优秀产品

72510

数据服务基础能力之元数据管理

这里是简述相对单一的应用服务,如果把这里的流程分段放大,在整个数据服务体系下,就是围绕元数据管理的复杂的基础系统:围绕数据结构映射,进行元数据标准化管理,在此基础上二次组织数据,快速响应业务需求。...二、元数据概念 1、基础描述 从定义上说,元数据(Metadata)即描述数据数据,但是在实际使用的时候,还是存在很多细分的概念,看下面的案例:用户性别; 从细分角度看,可以对上面数据进行两块划分,...配置可视化:在数据服务平台中,最忌讳的一点就是靠手动去维护各种作业,不管在什么场景下,都要考虑可配置化管理,保证动作可追溯。...3、元数据管理 核心能力的打造,通常在系统初期都是围绕基本能力和业务需求的方向,以求快速落地实现,提供业务支撑能力基础能力:标准化元数据结构,进行结构存储和可搜索能力实现,这个节点进行统一维护,数据类型识别和转换是至关重要的...;补充说一句,在数据平台中,都会存在类型服务系统,以提供相应的识别能力和规范不同场景下的转换; 实体与关系:数据业务中两个核心概念,实体必然由属性构成这是常说的,实体之间维护的关系:关联、、绑定、输出、

68420

WeTest性能产品矩阵:PC平台性能崩溃分析能力全新上线

经过技术攻坚和能力打磨,腾讯WeTest性能产品矩阵PerfDog、PerfSight、CrashSight,全新发布PC平台性能和崩溃分析能力,为PC研发提供稳定可行的品质保障方案。...一、性能测试分析能力 PerDog客户端完美支持对PC平台性能数据采集和分析,0成本接入,下载客户端后即可使用,无需任何集成、无需改动程序。...PerfSight通过大数据采集和分析的方式,帮助端游平台进行性能优化,提升用户体验。...CrashSight官网:crashsight.qq.com PC平台性能崩溃解决方案:为端游提供全生命周期的质量守护 当前,腾讯WeTest性能产品矩阵PerfDog、PerfSight、CrashSight...为端游提供全生命周期的质量守护方案,通过三产品的能力打通,能够完美覆盖应用研发期、运营期、线上线下问题联调等场景下的痛点。

70220

智慧屏基础能力

端侧AI能力可大大提升智能服务响应效率,带来更高效和全天候的智能服务体验。此外,端侧AI可支持数据本地化分析处理,更有效地保护用户隐私安全。...6、网络互联 智慧屏需提供有线/无线方式接入网络能力。智慧屏通过端云协同,借助云计算与大数据等,实现在线游戏、电商购物、视频通话、家庭看护、远程教育、远程会议、互动健身等服务。...,实现跨设备的业务流转、数据访问、内容共享等功能。...8、安全与隐私保护 智慧屏给用户提供的部分服务涉及个人/家庭信息处理,这对智慧屏提出了更高的端侧安全能力诉求。智慧屏涉及的安全能力,主要包括系统安全和数据安全。...智慧屏需具备保护用户的隐私的能力∶自有应用和服务采集数据的用途和范围需经过用户同意,用户有权撤回应用的数据应用许可,存储地点和存储期限需明确告知用户。第三方调用智慧屏设备权限需用户授权。

63610

小程序新增 8 基础能力,玩法更多了

昨晚,小程序开放了一个重要功能,8 基础能力。 但其实还有更多,我们知晓程序仔细看了更新日志,这一次小程序的更新,还让视频播放不再出现卡顿之类的不爽现象。...不管怎样,随着小程序开放的基础能力越来越多,它支持的功能也越多,玩法将变得丰富多样。 转发按钮降低分享成本,更方便配合运营活动 ? 这一次,微信为小程序所准备的有力武器,是昨天所提到的「转发按钮」。...运动类小程序 「获取微信运动步数」和「离开小程序后依然可收听音乐」,这 2 项新开放的基础能力看上去简单,但实际上十分重要。 ?...运动类 app,尤其是具备跑步训练、骑行训练计划的 app,十分依赖手机本身所提供的数据,好让它们形成数据统计,制作数据报告,告诉用户当天的训练效果。...而如果无法获取数据,那么运动类 app 就缺乏基础。 现在小程序可以获取「微信运动步数」,也就是运动类小程序可以获得对它来说最重要的数据

46520

数据为中心的数据安全基础能力建设探索

企业数据安全治理,除了熟悉法律法规条文,信息采集最小化,服务入口明确隐私协议外,更多的是需要建设内部基础能力,如数据识别、分类分级、数据加密、权限管控等数据安全的基础能力。...在数据识别基础上,建立数据资产大盘,实现数据资产风险识别、监测、运营的资产全生命周期管理; 在数据分类分级的基础上,对不同数据资产进行分类、分级,将优势资源投入到关键资产的安全防护上; 在数据安全基础防护方面...数据识别、分类 在大数据时代的今天,如何做好数据识别、分类,在这个基础上建立数据资产全生命周期管理是很多企业面临的挑战。...它关 注如何充分合理地利用数据库的计算和存储能力,而并非实现一个全新的数据库。ShardingSphere 站在 数据库的上层视角,关注他们之间的协作多于数据库自身。...问题和思考 本文从数据识别、分类分级、配置管理、存储字段加密这个流程梳理下来,其实需要横向和纵向扩展的还非常多,统一密钥管理、账号权限、资产大盘、风险监测和运营管理,这些组成了数据安全的基础能力

76930

基础能力框架演进

社区活跃度非常高的框架,比如Spring生态系列(SpringBoot),高版本无论从性能和功能的健壮性、兼容性以及新特性还有fix-bug数,都比低版本要好,这个是社区公认的原则 从公司基础技术能力框架输出角度来看...比如社区已经有的功能轮子,依托于高版本就可以快速的使用,特别是针对于偏业务性的公司,重复造轮子很高,SpringBoot高版本,新增了很多原生的boot-starter,这些轮子是我们不需要重新造的,社区资源输出能力肯定要比一般规模纯技术研发团队的输出能力强...从长远技术效益角度看,高版本的SpringBoot框架,更加会具备兼容SpringBoot生态之外的其他基础框架,比如Dubbo,Rocketmq等,因为别人的版本也在演进。...简单来说,版本演进升级会有如下效益点: 避免重复造轮子、功能健壮性、安全升级、框架兼容性、社区新特性、技术长期投入效益、间接提升业务开发效率(技术能力会下层)风险:版本升级会存在升级的未知风险(比如组件版本和业务项目版本兼容性

32020
领券