腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯开源的专栏

专栏作者

423

文章

574216

阅读量

114

订阅数

官宣 | 腾讯捐赠的 InLong 正式毕业成为 Apache 顶级项目！

apache 开源大数据数据集成数据处理

全球最大的开源软件基金会Apache软件基金会正式宣布，Apache InLong 正式毕业成为社区顶级项目，这也是 Apache 社区首个一站式大数据集成顶级项目！ Apache 基金会官博（点击“阅读原文”查看） InLong 中文名“应龙”是中国神话中引流入海的神兽，意寓 InLong 在大数据社区生态中的价值：大数据接入集成。这个最初由腾讯捐献给 Apache 社区的一站式海量数据集成框架，可以为大数据开发者提供百万亿级数据流高性能处理能力，以及千亿级数据流高可靠服务。而这是继腾讯开源项目 A

2022-06-24

2840

超过C++，这门编程语言成为鹅厂程序员的最爱

开源大数据编程算法

腾讯人最爱的编程语言是什么？这么多的程序员每天提交多少行代码，改bug要耗费多长时间等等？这些大家关心的问题，在今天刚刚发布的《2021年腾讯研发大数据报告》中给出了答案。（点击「阅读原文」查看详细报告）这份由腾讯技术委员会出品的报告，全面披露了2021年腾讯在研发投入、研发效能、开源协同和技术公益等方面的重要数据。研发人员数量同比增长41%，持续投入基础技术研发 2021年我国全社会研发投入达到2.79万亿元，其中76%由企业投入。腾讯也在研发领域持续加码，坚定投入基础技术研发。据报告数据显示

2022-03-25

4260

坚持贡献10年，他在开源领域做到了国际顶尖

开源大数据 apache spark

从技术小白成长为有着Apache member、Apache spark PMC、Apache Livy PPMC等头衔的国际顶级开源大牛，邵赛赛用了十年。在回答是什么让这位鹅厂技术大牛十年如一日贡献开源时候，他的回答是“爱和坚持”。刚接触Apache开源社区时，邵赛赛时常看着邮件列表陷入了迷茫，这种上世纪90年代流行的互联网沟通方式，在20年后已经让新生代的程序员们有些看不懂了。如何订阅、回复还有邮件要发给谁，都是他感到疑惑的问题。更加令他疑惑的还有各种英文缩写，虽然认识每个英文字母，但组合在一起却

2022-02-24

3160

助力成本优化，腾讯全场景在离线混部系统Caelus正式开源

大数据容器 kubernetes

11月4日，在2021腾讯数字生态大会上，腾讯正式宣布开源其全场景在离线混部系统Caelus。 Caelus由腾讯大数据团队联合腾讯多个业务部门共同研发，旨在解决大数据资源缺口问题，通过Caelus在离线混部，扩充大数据任务可用资源，发挥空闲资源更大价值。在腾讯内部，Caelus混部方案已经被大规模应用到广告、存储、大数据、机器学习等多个业务，平均提升30% 资源利用率，节省了上亿成本。近年来，随着互联网业务的发展，大数据类任务的资源需求呈指数级增长，资源成本问题突出。但各大权威机构的调研数据显

2021-11-18

4470

开源公告｜通用的分布式shuffle服务-Firestorm开源

开源存储 https 网络安全大数据

Firestorm介绍 Firestorm是一个通用的分布式shuffle服务，满足大数据框架在云原生、离线混合等场景的需求，同时解决MR style shuffle在大规模场景下遇到的稳定新和性能问题。项目采用了Coordinator和Shuffle Server结合的多主多从的分布式架构，对于Shuffle数据能预聚合，降低shuffle过程对于磁盘IO的开销，以此提升Shuffle任务的稳定性。目前支持的存储模式有Local，HDFS，Ozone，以及 Local + HDFS/Ozone混

2021-11-15

3640

腾讯开源之道：基于Apache之道的开源实践与探索

开源 apache 大数据 api hadoop

8月6日，腾讯开源联盟主席、腾讯云开源生态总经理单致豪在2021 ApacheCon Asia上分享了腾讯对Apache之道的思考、探索与实践的历程。作为开源界备受关注的会议之一，今年的ApacheCon Asia将持续3天，开设14+分论坛，内容覆盖从大数据到搜索再到消息队列等数十个不同类别。 Apache 软件基金会成立于 1999 年，迄今为止其管理着 2.27 亿多行代码，有着206个项目管理委员会，通过精英制领导了350多个 Apache 项目和计划，有超过8,100+提交者。从最初的“Apac

2021-08-09

7280

开源项目介绍｜Apache Ozone-分布式大数据通用存储

开源 apache 大数据 hadoop https

2021腾讯犀牛鸟开源人才培养计划开源项目介绍滑至文末报名参与开源人才培养计划提交项目Proposal Apache Ozone项目介绍标签：大数据存储技术栈：Java 标签：大数据存储技术栈：Java Apache Ozone-分布式大数据通用存储，Ozone是一个大数据场景分布式存储，支持百亿到千亿级对象和文件。Ozone提供兼容S3 的对象功能，和兼容Hadoop File System(HCFS)的文件功能，同时通过CSI驱动接入Kubernets生态。Ozone定位于

2021-06-21

1.4K0

JDK16贡献榜公布，腾讯蝉联国内第一

jdk api 开源大数据 oracle

3月16日，JDK16正式对外发布了。虽然只是一个短期支持版本，但是JDK16性能方面做了很多重要的升级，比如为了解决数据科学场景对极限性能的需求越来越强烈等老大难问题，Oracle官方这次终于在JDK16中集成了Vector API。差点忘了（允许我傲娇下），据Oracle官方公告，腾讯Kona JDK团队蝉联JDK16中国企业贡献度排名第一，并再次作为全球Notable贡献者被Oracle点名致谢。为什么要说再次，因为，去年腾讯的贡献度也是第一！摊手表情言归正传，重点说下这次的新特性，Ve

2021-03-22

3400

Tencent Kona JDK11正式开源，腾讯大数据将持续贡献Java生态发展

jdk java 大数据开源 jvm

3月8日，腾讯宣布将Tencent KonaJDK11正式开源，向社区分享经过内部超大规模生产环境验证的定制JDK，该版本在启动性能、峰值性能以及事物处理能力方面，相对于前一版本Kona JDK8都有了综合性提升，沉淀了腾讯大数据团队在大数据/机器学习、云原生场景下的深度优化，并且通过了JCK验证，确保充分的Java SE标准兼容。除了在开源社区开放使用外，TencentKona JDK11也会在腾讯云上免费提供，为云上用户的Java应用注入高效动能。另一方面，通过自身产品采用Kona JDK，腾讯云

2021-03-09

1.5K0

腾讯王巨宏：拥抱开源是这个时代开发者应该具备的思维和能力

开源 apache rpc 物联网大数据

近日，腾讯 Techo Park 开发者大会开源专场在京举办，腾讯开源办公室执行总监许勇、Apache TubeMQ 项目负责人薛赵明、优品科技CTO兼TARS开源框架核心维护者阮曙东、意法半导体亚太区MCU策略部总监陈德勇四位嘉宾分享了腾讯开源治理实践和开源协同的战略，以及腾讯开源生态合作的最佳实践。腾讯副总裁王巨宏表示，云和开源是腾讯乃至整个互联网行业未来发展的趋势。拥抱开源是这个时代的开发者应该具备的思维和能力，而拥抱云原生能够让每一位开发者站在成熟的基础设施这个巨人的肩膀上实现业务的快速交付

2020-12-23

7000

Apache基金会正式宣布新一代分布式对象存储Ozone成为顶级项目

开源 apache 大数据 hadoop 分布式

刚刚获悉，Apache基金董事会通过一致表决，正式批准分布式文件对象存储Ozone从Hadoop社区孵化成功，成为独立的Apache顶级开源项目。这意味着，作为腾讯大数据团队首个参与和主导的开源项目，Ozone已得到全球Apache技术专家的一致认可，成为世界顶级的存储开源项目之一。 Ozone 是Apache Hadoop社区推出的面向大数据领域的新一代分布式存储系统，它的推出解决了Hadoop分布式文件系统在可扩展性上限方面的缺陷问题，能够支持百亿甚至千亿级文件规模的存储。自1999年成立以来，Ap

2020-12-10

6130

腾讯云大数据团队：认真做开源的人，眼里有光

开源大数据 jdk hadoop angel

前段时间，Oracle 正式发布了 JDK 15，同时作为惯例公布了 OpenJDK 全球贡献者榜单，表达了对这些企业与个人开发者的感谢。其中，Oracle 依旧是 JDK 开发的主力军，完成了 79.68% 的工作量。但令很多人意想不到是，腾讯成为了全球企业贡献第五名，是国内为 OpenJDK 贡献最多的公司，并且是历史首个进入“Notable”贡献者范围的国内厂商，得到了 Oracle 的点名感谢。谈到国内大厂的开源，社区中仍然存在不少的偏见。大厂的开源工作究竟是不是为了 KPI？除了商业价值

2020-11-27

1.2K0

2020中国技术力量年度榜单揭晓腾讯云斩获六项大奖

开源微服务大数据 rpc

近日，由InfoQ 发起并组织的“2020 中国技术力量年度榜单”评选结果正式揭晓，腾讯云强势入围四大榜单，最终斩获六项殊荣：腾讯开源联盟主席、TARS基金会董事主席单致豪荣获“十大开源杰出贡献人物”，腾讯开源项目TencentOS Tiny、ncnn荣登“十大开源新锐项目”，腾讯小程序云开发、腾讯大数据云原生与在离线混合部署项目双双入选“2020年度十大云原生创新技术方案”，由腾讯微服务平台TSF提供支撑的人保财险核心中台业务项目获评“2020 年度十大云原生行业落地典范”。此次腾讯云的入选，代表了业界

2020-11-25

5580

微服务云原生等场景，腾讯 Kona JDK 正式开源

java jdk 微服务大数据

Tencent Kona 是基于 OpenJDK8，由腾讯专业技术团队提供技术维护、优化及安全保障的 JDK 产品。腾讯的 Java 应用场景丰富，结合微服务、云原生应用、大数据等实际应用场景进行开发，并于11月5日正式发布了优化后的JDK——Tencent Kona。Kona可为上述场景提供最优的 Java 生产环境及解决方案，并为开发者开发的 Java 应用提供平滑的迁移。目前，Kona为腾讯微服务平台 TSF、腾讯 TBDS 大数据套件、腾讯 TI 智能钛机器学习平台等提供了稳定保障。 Ko

2019-11-08

1.7K0

Elasticsearch 创始人给腾讯云的感谢信

Elasticsearch Service 开源 kvm github 大数据

近日，Elasticsearch 的创始人兼首席执行官Shay Banon 向腾讯云发出了一封“特别”的邮件，专程对腾讯团队为Elasticsearch开源社区做出的贡献表示了感谢。据了解，腾讯工程师通过提交代码，成功优化了Elasticsearch高并发写入性能，实现将1000万数据量的写入时长从原来的18分钟缩减至15分钟，速率提升20%，并在Elasticsearch开源社区分享了项目方案。 Shay Banon 在发给腾讯副总裁、腾讯云总裁邱跃鹏的感谢信中表示： “我们最近对Elastics

2019-09-10

9750

首届Apache Hadoop技术社区中国Meetup在京举办(内附完整PPT)

hadoop 开源 yarn node.js 大数据

近日，在Apache Hadoop社区主导及邀请下，腾讯开源、腾讯大数据、腾讯云联合承办了Hadoop技术社区在中国的首次Meetup。围绕Hadoop技术实践，来自腾讯、Cloudera、京东、小米、阿里、滴滴、华为、字节跳动的多位嘉宾参与了分享讨论。腾讯开源运营负责人王春雨表示：“中国企业的参与是开源生态建设不可或缺的一部分。腾讯作为国内开源的先行者，将持续投入社区协同合作，以开放的心态，推动更多开源社区之间的交流对话，助力技术生态发展。” Hadoop是由Apache基金会所开发的分布式系统基

2019-08-16

9191

Hadoop Meetup 现场直播

hadoop yarn node.js 大数据 apache

自2006年诞生以来，Hadoop技术与社区已走过了13个年头，在经历了大数据技术高速发展之后，迎来了3.x时代。Hadoop如何在腾讯、阿里、滴滴、小米、美团、头条以及京东巧妙落地？有哪些新方向值得关注？Hadoop技术社区又将走向何方？今天，Hadoop将首次在中国组织Meetup，为你揭晓大数据Hadoop技术与社区发展的Roadmap。时间地点时间：2019年8月10日 10:00 地点：北京希格玛大厦小剧场活动议程 09:40-10:00 签到&自由交流 10:00-10:

2019-08-12

8680

【开源公告】3D医疗影像预训练模型MedicalNet开源

图像处理迁移学习医疗 https 大数据

许多研究表明，深度学习的发展非常依赖数据量，在医疗图像领域，目前缺乏基于大数据基础的专用预训练模型。本项目MedicalNet将多个3D医疗数据集集合成大数据集，基于此数据集提供了完整的3D-ResNet系列预训练模型与相应的迁移学习训练代码。 MedicalNet适用的场景 MedicalNet提供的预训练网络可迁移到任何3D医疗影像的AI应用中，包括但不限于分割、检测、分类等任务。尤其适用小数据医疗影像AI场景，能加快网络收敛，提升网络性能。 MedicalNet功能介绍支持单卡、多卡训练支持

2019-07-19

2.3K0

Apache 软件基金会欢庆20周年：由社区驱动发展的“Apache 之道”

apache 开源大数据 http 网站

腾讯开源恭祝 Apache 软件基金会持续健康发展，愿 Apache 之道驱动中国开源企业形成以社区为基础的开放开发模式。本文来源于：开源社文章翻译：Ted Liu & 徐红伟 | 编辑：舒敏前言世界上最大的开源基金会为公众利益免费提供了价值超过200亿美元的软件; 地球上每一个互联网连接的国家都在使用 Apache 软件。 “孵化了350多个开源与创新项目的、全志愿开发者与管理者组成的 Apache 软件基金会 ( ASF ), 今天宣布庆祝成立20周年, 并强调基金会成功的关键是

2019-05-20

8260

云计算大会，腾讯云黑石TStack一体机柜惊艳首发

云计算黑石物理服务器开源大数据

2018年12月12日，由工信部和国标委指导，中国电子技术标准化研究院、中国开源云联盟、全国信标委云计算标准工作组主办的“第八届中国云计算标准和应用大会”在北京召开。本次大会，腾讯云硕果累累，“云南公安云计算平台项目”获中国优秀云计算开源案例特等奖，腾讯云通过3项目测评认证，腾讯云黑石TStack一体机柜惊艳首发，加入中国开源云联盟专家委员会。 12日上午主会场内，腾讯云TStack产品线总监邬沛君发表了“腾讯云TStack——开源与自主创新之路”专题演讲。演讲中，邬沛君对腾讯企业内部上云和上云价值进

2018-12-13

13.1K0

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态