腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

about云

专栏作者

216

文章

314625

阅读量

58

订阅数

2021年最新鲜的面试题整理：亿信华辰

spark kafka hive 存储 hadoop

我们VIP成员很多在2021年春节年前、后，拿到了offer。而且不止一个，有的两个，有的四个，有的六个。这里给我们分享其中一位成员，整理的一家公司的面试题，后续将会陆续发布。

2021-03-22

1K0

大数据集群资源预估规划【适用于面试与工作集群规划】

kafka 存储大数据

问题导读 1.如何判断数据增量？ 2.QPS如何计算？ 3.存储空间需要考虑哪些因素？ 4.内存估算和哪些因素有关？我们在实际工作，或者面试中，经常会遇到这么一个问题，集群该如何规划，一台机器多少磁盘，多少内存，多少core等。

2020-12-17

2K0

基于Flink商品实时推荐系统项目【大数据及算法】

TDSQL MySQL 版 hbase 容器镜像服务推荐系统存储

介绍：基于Flink实现的商品实时推荐系统。flink统计商品热度，放入redis缓存，分析日志信息，将画像标签和实时记录放入Hbase。在用户发起推荐请求后，根据用户画像重排序热度榜，并结合协同过滤和标签两个推荐模块为新生成的榜单的每一个产品添加关联产品，最后返回新的用户列表。 1. 系统架构 v2.0 1.1 系统架构 v2.0

2020-07-02

3.1K1

比Hive快279倍的数据库-ClickHouse到底是怎样的

hive 数据库存储云数据库 SQL Server sql

1.什么是ClickHouse？ 2.ClickHouse适合哪些场景？ 3.为什么面向列的数据库查询如此快？ 1.什么是ClickHouse ClickHouse是一个面向列的数据库管理系统（DBMS），用于在线分析处理查询（OLAP）。在“传统”面向行的DBMS中，数据按以下顺序存储：

2018-12-11

7.5K0

Hadoop 2.x与3.x 22点比较：3.x将节省大量存储空间

hadoop 存储 api apache 开源

1.Hadoop3.x通过什么方式来容错？ 2.Hadoop3.x存储开销减少了多少？ 3.Hadoop3.x MR API是否兼容hadoop1.x？

2018-10-08

2.2K0

图片服务架构演进及云存储的优势

问题导读 1.构建独立的图片服务器有什么优势? 2.使用云存储服务有哪些优势？ 3.图片如何防盗链？现在几乎任何一个网站、Web App以及移动APP等应用都需要有图片展示的功能，对于

2018-03-27

4.4K0

hive文件存储格式:SequenceFile系统总结

mapreduce 存储大数据

问题导读 1.什么是SequenceFile？ 2.如何通过源码实现SequenceFile压缩？ 3.SequenceFile格式压缩有什么优点和缺点？ 1.SequenceFile是什么 1.1 SequenceFile概述 1.1.sequenceFile文件是Hadoop用来存储二进制形式的<Key,Value>对而设计的一种平面文件(Flat File)。 1.2.可以把SequenceFile当做是一个容器，把所有的文件打包到SequenceFile类中可以高效的对小文件进行存储和

2018-03-27

2.8K0

HBase高可用原理与实践

hbase 存储云数据库 SQL Server

问题导读： 1.HBase高可用原理是什么？ 2.HBase的实践？前言前段时间有套线上HBase出了点小问题，导致该套HBase集群服务停止了2个小时，从而造成使用该套HBase作为数据存储的应用也出现了服务异常。在排查问题之余，我们不禁也在思考，以后再出现类似的问题怎么办？这种问题该如何避免？用惯了MySQL，于是乎想到了HBase是否跟MySQL一样，也有其高可用方案？答案当然是肯定的，几乎所有的数据库(无论是关系型还是分布式的)，都采用WAL的方式来保障服务异常时候的数据恢复

2018-03-27

3K0

大数据架构和模式（一）: 大数据分类和架构简介

大数据存储安全

问题导读 1.本文对大数据做了哪些分类？ 2.对数据进行分类后，如何将它与合适的大数据模式匹配? 如何将大数据分为不同的类别大数据问题的分析和解决通常很复杂。大数据的量、速度和种类使得提取信息和获得

2018-03-27

1.2K0

Scala的map实现key和value排序及各种排序比较等知识讨论

scala 存储 hashmap

问题导读 1.map能否直接排序？ 2.如何转换，才能排序？ 3.排序结果可以存储在哪两个集合中？ 4._*如何使用？ 5.排序函数中，哪个可以进行升序和降序排列？ 6.他们的排序性能如何?

2018-03-26

3.6K0

构建高并发高可用的电商平台架构实践1

存储数据库

问题导读： 1.如何构建高并发电商平台架构 2.哈希、B树、倒排、bitmap的作用是什么？ 3.作为软件工程师，该如何实现读写？ 4.如何实现负载均衡、反向代理？ 5.电商业务是什么？ 6.基础中间

2018-03-26

1.5K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态