大数据与知识图谱-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

大数据与知识图谱

专栏成员

54

文章

47112

阅读量

13

订阅数

金字塔原理

芭芭拉·明托（Barbara Minto）1961年成为哈佛商学院录取的第一批女学员之一。1963年，明托被麦肯锡国际管理咨询公司聘请为该公司有史以来的第一位女性咨询顾问。她在写作方面的长处很快得到赏识，并于1966年被公司派往英国伦敦，负责提高麦肯锡公司日益增多的欧洲员工的写作能力。三十多年来，明托致力于向人们传授明托金字塔原理，传授对象是那些接受过商业或专业培训，但在工作中需要撰写复杂的报告、研究性文章、备忘录或演示文稿的人士以及其他社会各界人士。迄今，明托已为美国、欧洲、澳大利亚、新西兰和中东等国家和地区的许多公司讲过课，并在哈佛商学院、斯坦佛商学院、芝加哥商学院、伦敦商学院等做过讲座。

2022-11-11

7040

面试篇：数仓缓慢变化维的处理方式

对于某些维度属性，值不会发生变化，因此可以保留初始值，此方法什么也不做。例如日期维度的大多数属性，值都不会发生变化，如月份、季度、是否节假日等属性。

2022-06-01

1.3K0

面试篇: SparkSql如何把Sql转化成RDD可以执行的任务

analyzer spark linux sql 数据库

1.SparkSql通过Parser（解析器）把Sql转化成UnResolved Logical Plan（这是一棵Parsed Logical Plan AST语法树）。

2022-06-01

1.5K0

面试篇：两道常见面试sql题

1.有一个订单表order_tab，字段有： order_id,order_amt,user_id,user_address 计算每个用户使用最多的3个地址，以及每个地址使用的次数，对应地址消费的总金额； select user_id, user_address, cnt, order_amt from ( select user_id, user_address, cnt, row_number() over(

2022-06-01

2380

数仓经典面试互相关注sql题

用户uid给用户to_uid刷了礼物，求用户uid与用户to_uid的互相关注类型relation，

2022-06-01

9460

面试篇：Hive Sql转换成MapReduce的过程

sql hive 编程算法 mapreduce

总结：HiveSQL ->AST(抽象语法树) -> QB(查询块) ->OperatorTree（操作树）->优化后的操作树->mapreduce任务树->优化后的mapreduce任务树。

2022-06-01

1.7K0

二叉树的5种遍历方式

编程算法二叉树

锯齿形层序遍历：层序遍历的变种，要求我们按层数的奇偶来决定每一层的输出顺序。规定二叉树的根节点为第 0 层，如果当前层数是偶数，从左至右输出当前层的节点值，否则，从右至左输出当前层的节点值。

2022-06-01

1.6K0

面试篇：如何排查cpu占用过高？

可以看到tid为514线程，使用cpu最高。这边只有单线程的一个程序，为了看排查流程。

2022-06-01

7530

Flink如何实现Exactly-once语义？

flink 大数据 kafka 编程算法分布式

Flink自1.4.0开始实现exactly-once的数据保证，即在任何情况下都能保证数据对应用产生的效果只有一次，不会多也不会少。

2022-06-01

1.3K0

Kafka的零拷贝技术

缓存 kafka https socket编程网络安全

这个过程涉及到 4 次上下文切换以及 4 次数据的复制，并且有两次复制操作是由 CPU 完成。但是这个过程中，数据完全没有进行变化，仅仅是从磁盘复制到网卡缓冲区。

2022-06-01

3.1K0

面试篇：两个面试常见算法题

在遍历链表时，将当前节点的next指针改为指向前一个节点。由于节点没有引用其前一个节点，因此必须事先存储其前一个节点。在更改引用之前，还需要存储后一个节点。最后返回新的头引用。

2022-06-01

2120

Spark Shuffle机制

大数据数据结构 mapreduce spark

在MapReduce框架中，Shuffle是连接Map和Reduce之间的桥梁，Map的输出要用到Reduce中必须经过Shuffle这个环节，Shuffle的性能高低直接影响了整个程序的性能和吞吐量。Spark作为MapReduce框架的一种实现，自然也实现了Shuffle的逻辑。对于大数据计算框架而言，Shuffle阶段的效率是决定性能好坏的关键因素之一。

2022-06-01

1.3K0

技术篇：数据库的事务隔离级别

数据库 sql 云数据库 SQL Server

事务前后数据的完整性必须保持一致。比如A向B转账，A扣100元，B收到100元，符合逻辑运算。

2022-06-01

2010

技术篇：Spark的宽依赖与窄依赖

mapreduce spark https 网络安全

Spark中RDD的高效与DAG图有着莫大的关系，在DAG调度中需要对计算过程划分Stage，而划分依据就是RDD之间的依赖关系。

2022-06-01

2.4K0

面试篇：快手数据研发面试题

二叉树 java 编程算法

表中一行数据代表该用户在该日期登陆过，求每一位用户连续登陆天数最大分别是多少天。解题思路：

2022-06-01

1K0

去哪儿数仓面试题

3.kafka分区与group，consumer消费和partition是如何对应的

2022-06-01

3060

字节面试算法题

思路：首先设置两个节点 first ,second 都指向head节点，然后先让first向后移动，直到second和first的间隔恰好为N的时候，first和second一起向后移动，直到first.next == null 的时候，那么second所指的结点就是要删除的结点。

2022-06-01

2550

常见经典数仓面试题

array：array中的数据为相同类型，例如，假如array A中元素['a','b','c']，则A[0]的值为'a'。

2022-06-01

1.2K0

数据湖是下一代数据仓库吗？

数据湖数据处理数据结构数据库数据分析

Aberdeen 的一项调查表明，实施数据湖的组织比同类公司在有机收入增长方面高出 9%。这些领导者能够进行新类型的分析，例如通过日志文件、来自点击流的数据、社交媒体以及存储在数据湖中的互联网连接设备等进行机器学习。这有助于他们通过吸引和留住客户、提高生产力、主动维护设备以及做出明智的决策来更快地识别和应对业务增长机会。

2022-06-01

3890

PostgreSQL利用Multicorn访问CSV外部数据源

python postgresql sql ubuntu

Multicorn 是一个 PostgreSQL 9.1+ 的扩展模块，用于简化外部数据封装开发，允许开发者使用 Python 编程语言开发。

2022-06-01

5810

点击加载更多

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态