首页
学习
活动
专区
工具
TVP
发布

大数据技术栈

专栏作者
67
文章
82992
阅读量
17
订阅数
Hadoop面试复习系列——HDFS(一)
转载自: https://cloud.tencent.com/developer/article/1031641 https://my.oschina.net/freelili/blog/1853668
solve
2019-10-30
5600
Storm容错机制(一):ACK机制
我们知道 Storm 是一个常驻服务,消息源源不断的来,他源源不断的处理,那肯定在有些情况下会导致消息的不正确处理,比如worker进程挂掉了,那么正在被处理的消息很可能就会丢失掉,那么该如何解决这个问题呢?这时候我们就可以引入 ACK 机制了,当消息没有被正确处理时,可以通过 ACK机制 重新发送该消息进行处理。
solve
2019-10-30
6730
Storm入门(一):编程模型
本文是 storm 入门第一篇,因为 Storm 的本地模式体验极其简单, 故而我希望第一篇我们先来体验一下 Storm,而不是其他分布式技术那样, 开门就是架构,简介....
solve
2019-10-30
4100
KNN近邻算法 详解
通过本文,你将了解并深刻理解什么是 KNN算法。 当然,阅读本文前,你最好会点python, 这样阅读起来才会没有障碍噢
solve
2019-10-30
7960
推荐系统 —— 实践 Spark ALS算法
这里就不啰嗦了,直接贴代码,然后拿来运行就可以看到结果了,不过请注意该代码是基于 movelens 数据,所以想要运行你还得去下载一下这个数据,百度一下就有了噢 ALS算法也是spark提供的唯一的协同过滤推荐算法,其基本原理类似与 LFM,基于矩阵分解的隐因子算法。嗯,纯属过一把推经瘾。。。哈哈 package com.text import org.apache.spark.ml.recommendation import org.apache.spark.{SparkConf, SparkCon
solve
2019-10-30
1.4K0
推荐系统 —— LFM隐语义模型
本文是推荐系统系列的第三篇了,主要来讲一下 LFM 算法,与之前一样,注重原理方面,不会在算术上多做纠结,以方便快速理解该算法
solve
2019-10-30
1K0
推荐系统 —— 协同过滤
作为推荐系统 这一系列的第二篇文章,我们今天主要来聊一聊目前比较流行的一种推荐算法——协同过滤; 当然,这里我们只讲理论,并不会涉及到相关代码或者相关框架的使用,在这一系列的后续文章,如果可能,我们可以将我们的所有理论知识整合一下,实践一个 推荐系统的 实战。
solve
2019-10-30
7080
推荐系统 —— 概述
好久没有更新了!!! 最近一直在研究推荐相关的知识,也算是有一点感悟吧,暂且打算写一系列推荐入门的文章, 一为分享,共同学习。二为对知识做一个系统的整理。 这是第一篇,不打算说太多关于技术的问题,我们就来随便聊聊推荐系统,然后本篇文章也作为该系列的一个导航文章吧!
solve
2019-10-30
5400
shell 字符串操作 ${} 的截取,删除,和 替换
字符串截取 字符长度 [user@host dir]$ str=123abc123 [user@host dir]$ echo ${#str} 9 从左边截取 ${string:position:length} :从字符串 string 的 position 位置截取 length 个字符串 [user@host dir]$ str=123abc123 [user@host dir]$ echo ${str:3:3} abc [user@host dir]$ echo "${str:0:${
solve
2019-10-30
7.5K1
kafka 消费者详解
使用起来还是很简单的,不过如果想要用好 consumer, 可能你还需要了解以下这些东西:
solve
2019-10-30
1.1K0
贝叶斯算法-简易入门
推论过程:P(A∩B) = P(A|B) * P(B) = P(B|A) * P(A)
solve
2019-10-30
5020
yum 简单入门
什么是 yum? 通过分析RPM 的头部信息,自动处理 RPM 相关依赖的问题,简化了 RPM 升级安装和卸载的过程的一种工具。 一般情况下,我们使用yum,必须有一个 yum-server,事实上,只要你能连上网,那么有很多现成的 yum-server可以供你使用,所以使用 yum 的代价是很小的 yum 的相关命令 ·yum [option] [查询工作项目] [相关参数] [option] -y: 当 yum 要等待用户输入时,这个选项可以自动提供 yes 的响应; --installroot=
solve
2019-10-30
6140
关于spark job并行的问题
今天被同事问了一个简单又不简单的问题,一个spark app里面有两个job,那么,他们可以并行执行吗?
solve
2019-10-30
1K0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档