目的 最初的做次测试报告生成器的目的就是能够规范测试报告,即每个版本的测试报告结构固定;其次就算是能够自动根据测试数据渲染图表,不需要每次都去插入图标,调整格式;最后就是对于部分地方的数据能够进行个性化处理...关于 TPG 最终,我对这个测试报告生成工具命名为TestReportGenerate,简称TPG,是一个Pywebio APP,仅几百行代码。...TPG 代码 鉴于源码太长,影响阅读体验,所以请大家后台回复TPG获取。...截图-输入 TPG 截图-输出 结束语 这个工具非常简单,但是目前使用还是很方便的。...同时它也有很多优化的空间,比如输入可以做成那种 form 表单,支持上一步数据保留,报告中的数据从测试系统自动拉取等等。期待 TPG 能够越来越好。
此项专利被命名为TPG(Tiny Portable Graphics),在数据上TPG图片格式产生的文件大小明显小于JPG/JPEG、PNG、GIF、WEBP等业界主流的图片格式,处于世界领先水平。...TPG图片格式压缩率世界领先 腾讯申请新专利的TPG图片格式到底有何不同? 通过目前已经公开的测试数据对比就可以一较高低。...在同等质量的前提下,TPG与JPG/JPEG、PNG、GIF、WEBP等不同图片格式进行对比,TPG的文件大小最小,位居第一:TPG对PNG小50%以上,比GIF小90%以上,对JPG/JPEG格式图片...通过TPG与JPEG质量对比可以看出,JPEG的图片的效果差,而TPG的图片会更清晰。 ? 除了在文件大小方面的优势,在渐进式、透明通道、动态格式、高清、无损等核心指标上,TPG实现全面性能优化。...据易观国际当年的数据统计,在当时约2000万的商务用户当中,MSN用户约1075万,占比53%,在这块市场上,此时的QQ相比MSN处于劣势。但最终的结果是QQ战胜了MSN,打赢了自己的保卫战。
此项专利被命名为TPG(Tiny Portable Graphics),在数据上TPG图片格式产生的文件大小明显小于JPG/JPEG、PNG、GIF、WEBP等业界主流的图片格式,处于世界领先水平。...TPG图片格式压缩率世界领先 腾讯申请新专利的TPG图片格式到底有何不同? 通过目前已经公开的测试数据对比就可以一较高低。...在同等质量的前提下,TPG与JPG/JPEG、PNG、GIF、WEBP等不同图片格式进行对比,TPG的文件大小最小,位居第一:TPG对PNG小50%以上,比GIF小90%以上,对JPG/JPEG格式图片...通过TPG与JPEG质量对比可以看出,JPEG的图片的效果差,而TPG的图片会更清晰。 除了在文件大小方面的优势,在渐进式、透明通道、动态格式、高清、无损等核心指标上,TPG实现全面性能优化。...据易观国际当年的数据统计,在当时约2000万的商务用户当中,MSN用户约1075万,占比53%,在这块市场上,此时的QQ相比MSN处于劣势。但最终的结果是QQ战胜了MSN,打赢了自己的保卫战。
腾讯公司正式向国家知识产权局提交了一份关于图片编码技术的专利申请,此项专利被命名为TPG(Tiny Portable Graphics),在数据上TPG图片格式产生的文件大小明显小于JPG/JPEG、PNG...TPG图片格式压缩率世界领先 腾讯申请新专利的TPG图片格式到底有何不同? 通过目前已经公开的测试数据对比就可以一较高低。...在同等质量的前提下,TPG与JPG/JPEG、PNG、GIF、WEBP等不同图片格式进行对比,TPG的文件大小最小,位居第一:TPG对PNG小50%以上,比GIF小90%以上,对JPG/JPEG格式图片...通过TPG与JPEG质量对比可以看出,JPEG的图片的效果差,而TPG的图片会更清晰。 ? 除了在文件大小方面的优势,在渐进式、透明通道、动态格式、高清、无损等核心指标上,TPG实现全面性能优化。...据易观国际当年的数据统计,在当时约2000万的商务用户当中,MSN用户约1075万,占比53%,在这块市场上,此时的QQ相比MSN处于劣势。但最终的结果是QQ战胜了MSN,打赢了自己的保卫战。
公司内各类应用比如QQ空间相册、腾讯新闻图片等,图片流量成本压力非常大。除了流量成本,存储成本的压力也是巨大的。...我们对外公布TPG图片格式的时候,也完成了整套TPG图片转码系统的开发。...目前,腾讯云已经完成了TPG后台转码系统的搭建,腾讯云CDN也已经完成了TPG的部署。同时,我们也对外开放了各平台的TPG解码器,第三方App应用可以免费集成我们的TPG解码器,通过腾讯云接入TPG。...另外,腾讯浏览器X5内核也完成了TPG的支持,只要是使用X5内核的第三方应用,客户端无需任何开发就可以原生支持TPG格式。 在加快TPG业务落地的同时,我们也在同步推进TPG的标准化工作。...其中,很重要的一点就是将TPG标准化,只有TPG成为一种标准格式,第三方应用,比如各类浏览器才更有意愿支持TPG。基于此,我们在去年启动了TPG的标准化工作。
此次AVS工作组将2017年度AVS产业技术创新奖仅有的两个团队奖之一颁给了TPG主创团队,工作组认为:“TPG与其他图片格式相比具有多项优势,且易用性高、接入简单。安全性高。...TPG的推广大大提高了AVS2标准在互联网行业的影响力。” 腾讯音视频实验室于去年5月对外发布了TPG图片格式。...相比传统图片压缩格式,TPG在压缩效率方面具有明显优势,在相同质量下,在同等质量下,TPG 图片格式的文件大小明显小于 JPG/JPEG、PNG、GIF、WEBP 等业界主流的图片格式,处于业界领先水平...不光是我们TPG研发团队,在参与AVS标准制定和推广的过程里,公司的研发管理部门和知识产权部也给予了很多帮助。” 在加快TPG 业务落地的同时,腾讯音视频实验室也在同步推进 TPG 的标准化工作。...目前,TPG 作为信息技术高效音视频编码第 7 部分(图像容器),已经申报成为国家标准。“我们也期待 TPG 能够早日实现标准化,并最终成为一种主流图片格式。”
: - 移动端IM开发入门文章:《新手入门一篇就够:从零开发移动端IM》 腾讯SNG社交网络事业群介绍: 腾讯SNG社交网络事业群(Social Network Group,简称SNG)是腾讯七大事业群之一...灰度发布: 作为首个大体量全面接入 TPG 的业务,为了保障平滑过渡,首先对新上传的图片保障异步压缩后存储在源站,被访问后会存储在中间源和 OC 点,大概一个月等 TPG 热数据占 70% 后,对旧的图片需要人工触发或者基于访问触发实时压缩...所以在处理海量数据的时候,FPGA 相比于 CPU 和 GPU,优势在于 FPGA计算效率更高,以相册TPG转码为例,FPGA 卡性能是普通图片处理服务器的10倍,编码延时减少 80%,大幅减少用户等待...但它的计算开销非常大,耗时不可接受。GPU 相比传统 CPU 具备高并发的图片类计算能力,Guetzli & GPU可大幅减少压缩时间到可接受范围。现在已有一些场景(漫画)在用这种方式。...技术难度真这么大?难在哪?》
TPG图片压缩技术,文件大小减少近20% TPG是基于新一代视频压缩编码标准AVS2的图像压缩格式。...TPG提供了一套完整解决方案,能将jpeg、png、gif等图片格式转换成TPG格式,在保证图片质量的同时大大减少文件大小,节省图片带宽及存储成本,显著提升页面加载时间。...通过目前已经公开的测试数据对比,在同等质量的前提下: • TPG 与 JPEG、PNG、GIF、WebP 等不同图片格式进行对比,TPG 的文件大小最小,位居第一; • TPG 对 PNG 小50%以上...,比 GIF 小80%以上; • TPG 对 JPEG格式图片(采用Libjpeg-Turbo编码)文件大小减少40%以上,对比采用 Guetzli 编码的JPEG格式则减少41.7%; • TPG 相对...多年沉淀,造就行业领先图片压缩方案 TPG图片编码技术目前服务于QQ空间、腾讯新闻、腾讯游戏、QQ浏览器、腾讯动漫等众多腾讯内部明星产品。各产品在上线TPG后,流量成本降低40%。
持反方观点,为大技术时代的到来欢呼的,一位是北京大学光华管理学院新媒体营销研究中心副主任苏萌,另一位是日本政治家、内阁成员山本一太。...他提出“一台电脑论”,即科学家们研究所需的数据,最好用一台电脑就能装下,否则数据处理会过于繁琐,无助于解决问题。他结合自身经验说,随着数据量的增大,研究的准确性一开始会随之上升,但很快就会趋平。...这有三个原因:一是因为不同机构间的数据还未真正流动起来,目前还只是数据“孤岛”;二是完整的生态产业链还未形成,尽管通过行为数据分析已能够分辨出一个消费者的喜好,但从供应到购买的链条还没建成;三是因为数据分析人才仍然极度匮乏...一位听众挑战正方,说,你们认为大数据过于庞杂纷繁,反而解决不了问题,那是不是说,当处理数据的计算工具变得足够好时,大数据就会变得有用?...正如Howard在发表“失败感言”时所说,“我们并非反对数据,只是反对大而无当的数据,数据本身当然非常重要”。人类已经并将继续产生日益庞大的数据,或许不论我们接受与否,大数据时代都已到来。
iSCSI 互联网小型计算机系统接口是由IBM下属的两大研发机构AImaden和Haifa研究中心共同开发的,是一个供硬件设备使用的、可在IP协议上层运行的SCSI指令集,是一种开放的基于IP协议的工业技术标准...TCP/IP对SCSI指令进行封装,使得这些指令能够通过基于IP网络进行传输,从而实现SCSI和TCP/IP协议的连接.对于局域网环境中的用户来说,采用该标准只需要不多的投资就可以方便、快捷地对信息和数据进行交互式传输及管理...设备由 SCSI 总线连接,iSCSI的主要功能是在 TCP/IP 网络上的主机系统 (启动器 initiator) 和存储设备 (目标器 target) 之间进行大量数据的封装和可靠传输过程.此外 iSCSI...Created TPG 1....由于/dev/sdb/是一个网络设备,而iSCSI是基于TCP/IP网络传输数据的,因此在配置自动挂载是应该加入_netdev参数,说明其是一个网络设备 [root@localhost /]# ll /
PsTmsjVpbRht681rrJ0J_Xl0fbNahfHFmF1doYNdca5XBFzghyiw19mnJwk0S3tXOBORUT217bsKp0fXMnVKLQ 大家做视频技术的都知道,视频跟其他的数据不太一样...由于视频的数据量特别大,它无法通过原始格式在网上传输,因此在这里就涉及到压缩,压缩就涉及到压缩算法的问题。压缩算法需要满足大家可以互联互通,这里涉及到要有一个共同的标准或者规范。...5、互联网图像 在互联网图像方面,我们与腾讯合作一起推行一个叫TPG的标准,目前这个TPG 标准,已经在腾讯的九大产品线部署了,包括手机QQ,QQ空间,手机管家,QQ浏览器,腾讯视频的客户端...,新闻,腾讯体育动漫等等,另外也在腾讯云上面部署了TPG,而且腾讯浏览器的内核,X5内核也完成了TPG的支持,现在还有游戏的引擎的厂商接入了TPG的格式,这个TPG它的优势在于:一呢,省流量、省存储,二是让页面或者图片的加载速度大幅度提升...Q4: TPG和HEIF的对比? A:HEIF的编码内核是HEVC的帧内编码,所以理论上来说它的性能和TPG在图像编码上是类似的。
数据大迁移的日期定为万圣节(10月31日),而这恰是交通量会非常高的一天。...上面图中的大问题是:我们仍然依赖于单一的PostgreSQL (数据库管理系统)来存储大部分的数据。下面的饼图显示了数据是如何在数据库中分配的: ?...我们评估了各种NoSQL(不同于传统的关系数据库的数据库管理系统的统称)的具有上述特点风格的数据库。...追加(无更新)数据模型:它仅支持一个只追加数据模型中,一旦它被写入后,就不能进行修改。这对于存储交易数据,并希望防止数据损坏的系统是非常有用的。由于是只追加模型,修改会自然幂等和交换。...在真正可以开始大迁移之前,第一个任务是从用户身份到用户唯一识别码的迁移,因为原代码依赖于自动递增的PostgreSQL 数据库标识符。几百条SQL查询需要被重写。
在现有IP网络上传输SCSI块命令的工业标准,它是一种在现有的IP网络上无需安装单独的光纤网络即可同时传输消息和块数据的突破性技术; iSCSI基于应用非常广泛的TCP/IP协议,将SCSI命令/数据块封装为...而iSCSI 服务提供数据集中化存取,且以区块为单位的数据存储空间,不仅简化存储空间管理的步骤、优化存储空间的使用,同时也增添了存储空间的弹性。...IP包中提取出数据或命令,并把它们传回到SCSI子系统。...(2) 灾难恢复公司希望把存储资源从一个数据中心镜像到另一个远程的数据中心上,后者在出现长时间停电的情况下可以用作热备份。...initiator 操作流程: iSCSI Target 端配置: Step1.本案例中我采用ESXI建立虚拟机并添加两块硬盘,并分别以磁盘上的一个分区来充当ISCSI存储空间的,实际应用中一般会添加新的磁盘或大容量存储的存储设备
GIF 动图相当于一组图片的集合,可以把它看做一个小视频,但 GIF 格式是一种位图文件格式,是利用颜色表索引来表示每个像素颜色,然后标记重复出现的数据,编码过程对图片颜色数据没有损失,是一种无损压缩方式...灰度发布: 作为首个大体量全面接入 TPG 的业务,为了保障平滑过渡,首先对新上传的图片保障异步压缩后存储在源站,被访问后会存储在中间源和 OC 点,大概一个月等 TPG 热数据占 70% 后,对旧的图片需要人工触发或者基于访问触发实时压缩...所以在处理海量数据的时候,FPGA 相比于 CPU 和 GPU,优势在于 FPGA计算效率更高,以相册TPG转码为例,FPGA 卡性能是普通图片处理服务器的10倍,编码延时减少 80%,大幅减少用户等待...和点播不同,大主播的设备和网络比较好,一般采用主播上行推2路流,一路H.264 (考虑低端手机硬解能力),一路 H.265。小房间考虑到主播上行带宽限制和转码计算成本,就只出一路 H.264....业务运维还有一个非常痛苦的场景就是做预算,利用精细化成本管理思路为产品做带宽预测和优化模型,因为数据会变化,所以可以采集数据,系统自动统计带宽的预算和合理性分析。 ?
灰度发布 作为首个大体量全面接入 TPG 的业务,为了保障平滑过渡,首先对新上传的图片保障异步压缩后存储在源站,被访问后会存储在中间源和 OC 点,大概一个月等 TPG 热数据占 70% 后,对旧的图片需要人工触发或者基于访问触发实时压缩...所以在处理海量数据的时候,FPGA 相比于 CPU 和 GPU,优势在于 FPGA计算效率更高,以相册TPG转码为例,FPGA 卡性能是普通图片处理服务器的10倍,编码延时减少 80%,大幅减少用户等待...分析企鹅电竞的房间大小,Top300的大主播占据了 61% 的用户,考虑转码资源性价比,只对 Top300 的主播进行H.265优化。...(6) 图片超分辨率-QQ相册 去年 QQ 相册大图使用了基于深度神经网络超分辨率技术。在图片无损的情况下可节约 75% 的流量和存储空间。...业务运维还有一个非常痛苦的场景就是做预算,利用精细化成本管理思路为产品做带宽预测和优化模型,因为数据会变化,所以可以采集数据,系统自动统计带宽的预算和合理性分析。
Created TPG 1....要求如下:仅允许从server0系统上使用登陆到数据库。 登陆数据库所用的账号为root,密码为root_password。...并设置数据库访问: 用户名 密码 权限 mary xxx 对legacy库的所有数据有选择操作权限 legacy xxx 对legacy库的所有数据有选择、插入、更新、删除操作权限 report xxx...对legacy库的所有数据有选择操作权限 注意:权限错了要会 revoke ?...在server0上登陆数据库,查看XXX库进行查询,并将结果填入相应的框格中。
大数据:大价值大机遇大变革 2017-3-26 张子阳 推荐: 1 难度: 1 ? 这本书就像一个印刷出来的PPT,字体比较大,留白比较多,大量图片,全彩印刷。...概括起来有下面这些要点: 数据量正指数级别增长。大数据时代已经来临。 大数据特点:存储量大、计算量大、增长速度快、类型多样化。...制造业应用:给挖掘机安装GPS和数据上传系统,统计挖掘机每月的工作时长。然后根据大量用户的实际使用数据,来判断市场是否有过剩的风险。 银行业应用:反诈骗系统。...数据仓库(Data Warehouse)是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。...相对稳定:数据一旦进入数据仓库以后,一般很少进行修改,更多地是对信息进行查询操作。 反映历史变化:不只是反映企业当前的状态,而是记录了过去某一点到当前各个阶段的信息。
tPG数据库(tPG作为腾讯商业数据库的替代方案,基于开源软件PostgreSQL进行扩展,拥有与商业数据库类似的特性)。...HadoopDoctor引入DoctorMaster新角色,其职责是从CM/RM获取子节点列表,定时、分批次地拉起子节点的doctorparser程序对作业的JobConf和JobHistory进行解析写到tPG...,有效控制tPG的写并发量。...数据冷备 目前TDW每天运行的MR作业数超过1百万,Map Task超过7千万,Reduce Task超过8百万,如此庞大的数据会使得tPG服务器的存储压力过大,HadoopDoctor的历史数据必须要实现冷备功能...把历史数据从tPG导入到TDW的Hive表,不仅仅实现了数据冷备功能,还可以使用TDW-IDE编写SQL语句对数据进行统计分析。 数据使用 (1)提供前台页面供用户查询作业的详细信息。
大数据已过时,算法正当道。数据已经成为一种商品,每个组织都能够收集和存储大量的数据。分析大数据也不再那么引人注目了。每个组织都可以聘用或培训大数据分析人员来了解数据模式。...由于数据湖带来了相当多的挑战,在2016年,我们将看到数据湖管理的未来:数据湖服务作为一种解决方案,为您的数据湖提供一个完整的管理方案。...由于数据湖在大规模数据存储和分析方面具有巨大优势,数据湖服务解决方案将被用于许多组织中。...因此,高级管理人员正在寻找其人力资源的确切数据,所以,2016年我们会看到人力资源分析将迈出一大步。 人力资源分析虽然是人事部门新的业务领域,但为了更好地提高人力资源的投资回报率,该业务增长极为迅速。...对于那些大的商业组织而言,大数据已经成为通用语言。在适应新趋势方面,政府是缓慢的,但是在2016年,我们会看到更多的国家、地区和地方政府会采用大数据技术来提高社会和公民的体验。
领取专属 10元无门槛券
手把手带您无忧上云