腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯大数据的专栏

专栏作者

323

文章

450446

阅读量

124

订阅数

腾讯Kona国密套件：从基础算法到安全协议

编程算法 jdk https SSL 证书

腾讯Kona国密套件（Tencent Kona SM Suite）基于JDK的标准Service Provider Interface（SPI）实现了从基础算法簇，到公钥基础设施（PKI），再到安全通信协议的全链路国密特性。该套件已在GitHub上开源：https://github.com/Tencent/TencentKonaSMSuite（点击阅读原文）腾讯Kona国密套件包含四个Java Security Provider： KonaCrypto，它是一个Java Cryptography Exte

腾讯大数据

2022-11-30

3.8K0

Apache ratis-shell : Alluxio & Ozone HA 管控利器

https 网络安全 github git 开源

背景 Alluxio 的 Master 以及 Job Master 服务和 Ozone 的 Ozone Manager 以及 Storage Container Manager 服务等，都是基于 Apache Ratis 实现的 HA 高可用服务。对于这些高可用服务，在某些场景，都需要获取 Leader 信息、commit 信息等 Ratis group 内部的信息，也会用在更换机器、滚动升级等场景，需要切换 leader 等必要的功能。目前 Alluxio 和 Ozone 正在分别实现这些功能，而这些功能

腾讯大数据

2022-07-04

8110

回顾 | 第二届DataFunSummit：大数据存储架构峰会合集

大数据 https 网络安全数据结构 hadoop

[ 导语 ] 2022年3月26日，DataFun联合腾讯大数据及其他平台举办的第二届线上大数据存储架构峰会已经完美收官落幕。当日，腾讯大数据作为主办平台之一，分享了诸多自主研发的产品，给大家剖析了其中的技术原理以及运用场景。俗话说，温故而知新，那么今天，应诸位小伙伴的呼声和要求，我们就一起来复习一下当日腾讯大数据平台各位老师们的精彩分享吧！ ▍腾讯Alluxio—加速新一代大数据与AI变革陈寿纬 | Alluxio OS核心工程师罗格斯大学计算机博士毛宝龙 | 腾讯 Alluxio Oteam

腾讯大数据

2022-04-01

7180

Tencent Kona：OpenJDK贡献全国四连冠，赋能数据科学计算加速

jdk api https 网络安全高性能计算

[ 导语 ] 2022年3月22日，JDK18正式对外发布。据Oracle官方公告[1]，腾讯Kona 蝉联JDK18中国企业贡献排名第一，连续四次对OpenJDK贡献全国排名第一（JDK15~18）[1][2][3][4]。本文将介绍Kona在高性能计算引擎方面对OpenJDK社区的贡献。 ▍Kona：连续四次全国冠军，综合贡献全国第一 Kona是腾讯基于OpenJDK研发的JDK产品，Kona JDK完全免费，并提供长期支持，所发版本均通过腾讯内部和云上超大规模应用验证，欢迎下载使用。 2019年：首次

腾讯大数据

2022-03-31

6920

新手教学 | Apache InLong 使用 Apache Pulsar 创建数据入库

apache hive https 网络安全编程算法

导语：Apache InLong 增加了通过 Apache Pulsar 接入数据的能力，充分利用了 Pulsar 不同于其它 MQ 的技术优势，为金融、计费等数据质量要求更高的数据接入场景，提供完整的解决方案。在下面的内容中，我们将通过一个完整的示例介绍如何通过 Apache InLong 使用 Apache Pulsar 接入数据。 Apache InLong(incubating) 简介 Apache InLong（应龙 https://inlong.apache.org）是腾讯捐献给 Apa

腾讯大数据

2021-12-31

1.1K0

腾讯云战略赞助加盟 Elastic 中国开发者大会 2021

Elasticsearch Service https 运维网络安全

Elastic 中国开发者大会将于2022年1月8号在深圳举行，腾讯云作为战略赞助商加盟大会。举办开发者大会的目的是为中国广大的 Elasticsearch 开发者提供一个技术交流和学习切磋的地方，汇集业界众多的成功案例，集思广益，发散思维，促进社区和行业的进步。关于腾讯云 Elasticsearch Service 腾讯云 Elasticsearch Service（ES）是基于开源引擎打造的云端全托管 ELK 服务，集成 X-Pack 特性、独有高性能自研内核、QQ 分词、集群巡检、一键升级等优

腾讯大数据

2021-12-31

9290

Apache InLong(incubating) 发布0.11.0版本

https github git 开源 apache

InLong(应龙) : 中国神话故事里的神兽，引流入海，借喻 InLong 系统提供数据接入能力。 Apache InLong(incubating) 由原 Apache TubeMQ（incubating）改名而来，伴随着名称的改变，InLong 也由单一的消息队列升级为一站式的数据集成解决方案，支持了大数据领域的采集、汇聚、缓存和分拣功能，用户只需要简单的配置就可以把数据从数据源导入到实时计算引擎或者落地到离线存储。刚刚发布的 0.11.0-incubating 版本是改名之后的第三个版本，这个版

腾讯大数据

2021-11-19

4990

腾讯蝉联JDK17贡献国内第一，自研Kona JDK两大新版本正式开源

jdk api oracle 开源 https

导读 / Introduction 2021年9月14日，Oracle 正式对外发布新的长期支持版本JDK17。据Oracle官方公告，腾讯Kona JDK再次蝉联JDK17中国企业贡献度排名第一，全球企业贡献度排名第四。在积极参与社区贡献的同时，腾讯继Tencent Kona JDK8、Tencent Kona JDK11开源之后，再次开源Tencent Kona JDK17 以及Tencent Kona JDK11 向量计算版。积极社区贡献 KonaJDK 9月14日，JDK17正式对外发布。据

腾讯大数据

2021-11-05

1.9K1

万字长文！深度剖析《数据安全法》下多方数据协同应用和隐私计算发展趋势

数据分析编程算法大数据 https 隐私计算

导读 / Introduction 《数据安全法》的表决通过标志着国家鼓励数据依法合规利用、保障数据依法有序流通，明确国家实施大数据战略，推动以数据为关键生产要素的数字经济发展。《数据安全法》强调数据安全与开发利用平衡，保障数据安全与促进数据开发利用并重，在规范数据安全监管与治理的同时，也给多方数据协同应用带来了新的发展机遇。在此形势下，亟需有效的技术和业务模式创新来实现合规的多方数据协同应用，达到数据安全和数据开发利用的平衡。隐私计算将成为平衡数据安全与应用发展的关键技术支点。本文主要探讨在《数据

腾讯大数据

2021-07-12

6480

开源项目介绍｜ Angel-高性能分布式机器学习平台

angel https pytorch 网络安全编程算法

2021腾讯犀牛鸟开源人才培养计划开源项目介绍滑至文末报名参与开源人才培养计划报名提交项目Proposal Angel项目介绍 Angel-高性能分布式机器学习平台，是腾讯研发并开源的面向企业级应用的高性能分布式机器学习平台。 Angel支持特征工程、模型构建、参数训练、AutoML、模型服务Serving等全栈机器学习服务，提供机器学习、深度学习、图神经网络等多种算法，支持级万亿级超大规模参数模型的训练，已在生产业务系统中大规模部署。 Angel项目导师介绍欧阳文、李晓

腾讯大数据

2021-06-02

1.1K0

腾讯Kona JDK数据科学实践

jdk api https 网络安全 jvm

导语：开源操作系统年度技术会议（Open Source Operating System Annual Technical Conference，简称 OS2ATC）已经连续成功举办了八届。该会议旨在促进我国操作系统及其相关领域的教学、研究与产业发展，加强学术交流，展示产业界成果，是中国地区颇具规模的技术盛会。第八届OS2ATC大会于2020年12月27日，在北京中科院计算技术研究所举行。在”编程技术”分会上，腾讯高级工程师傅杰博士发表了《Kona JDK数据科学实践》的演讲。以下为演讲实录：大家

腾讯大数据

2021-01-12

1K0

Caelus—全场景在离线混部解决方案

kubernetes 容器 https 网络安全

引言:集群管理的一个重要目标是提高资源利用率，随着集群规模的扩大，基础设施成本上涨，资源利用率问题逐步突显，为降低成本，混部技术应运而生。本篇文章结合腾讯技术团队在混部方面的落地和实战经验，来介绍各类场景下在线离线混部的相关概念、面临的问题及混部技术方案，抛砖引玉，供大家交流。混部背景各大厂商都有自己的集群管理平台，典型的是以k8s（kubernetes）为代表的容器云平台，集群管理的一个重要目标便是提高资源利用率，随着集群规模的扩大，机器成本增加，资源利用率问题开始变得越来越重要。造成集群利用率低的

腾讯大数据

2020-12-14

7.9K3

《你问我答》第一期 | 你想要的答案在这里

angel jdk https 网络安全开源

各位小伙伴们大家好，咱们又见面啦~ 《你问我答》栏目上线以后，受到了大伙的热烈欢迎小编每天在后台收到的提问数不胜数对于各位小伙伴的踊跃参与，小编深表感谢就冲大家的热情小编一定会兢兢业业地把栏目做好帮助大伙解决各种疑难问题但是…… 你们的方向是不是有点跑偏啊喂！！！再次隆重介绍一下站在你们面前的是汇聚腾讯Apache及Linux开源社区国内一流大数据技术专家超40位社区committer的专家天团每一位都在各自领域拥有顶尖的技术水平以及丰富的实践经验问小哥哥们的年龄也

腾讯大数据

2020-06-01

8460

TBase Quick Start

数据库 sql node.js https 网络安全

什么是TBase TBase是一个提供写可靠性，多主节点数据同步的关系数据库集群平台。你可以将TBase配置一台或者多台主机上，TBase数据存储在多台物理主机上面。数据表的存储有两种方式，分别是distributed或者replicated ，当向TBase发送查询 SQL时，TBase会自动向数据节点发出查询语句并获取最终结果。 TBase采用分布式集群架构（如下图），该架构分布式为无共享(share nothing)模式，节点之间相应独立，各自处理自己的数据，处理后的结果可能向上层汇总或在节点间

腾讯大数据

2019-11-18

1.7K0

腾讯数平团队荣获第15届国际文档分析与识别竞赛七项冠军

https 网络安全编程算法文字识别模式识别

9.20 - 9.25，作为全球OCR领域标杆性盛会，第15届国际文档分析与识别大会（ICDAR 2019）在澳大利亚悉尼召开，同时也揭晓了本年度ICDAR竞赛的结果并为冠军团队颁发获奖证书。腾讯数平图像团队（Tencent-DPPR Team）依靠领先的文字检测与识别技术能力，在本次竞赛的三个大项比赛中（MLT19，LSVT，ReCTS, 共10个子任务）获得了7项第一，2项第二的优异成绩，并受邀在会议上做技术报告分享。这也是团队自2017年获得4项OCR冠军之后，

腾讯大数据

2019-10-08

1K0

超50万行代码、GitHub 4200星：腾讯重磅发布全栈机器学习平台Angel 3.0

spark 编程算法推荐系统 pytorch https

【导读】腾讯首个AI开源项目Angel，正式发布一个里程碑式的版本：Angel 3.0。这是一个全栈机器学习平台，功能特性涵盖了机器学习的各个阶段，超过50万行代码，在 GitHub 上 Star 数已超过 4200，Fork 数超过 1000。一个全栈机器学习平台，近日悄悄上线了。 8月22日，腾讯首个AI开源项目Angel正式发布一个里程碑式的版本：Angel 3.0。 Angel 3.0尝试打造一个全栈机器学习平台，功能特性涵盖了机器学习的各个阶段：特征工程，模型训练，超参数调节和模型服务。

腾讯大数据

2019-08-26

1.1K1

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态