前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >大数据和云计算技术周报(第58期)

大数据和云计算技术周报(第58期)

作者头像
大数据和云计算技术
发布2018-07-26 15:56:40
4130
发布2018-07-26 15:56:40
举报

写在第58期

“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。

本期会给大家奉献上精彩的:职场规划、TSDB、HBase、Neo4j、物联网、Spark、代理模式、Redis、ES、机器学习算法、Hadoop、ZooKeeper、MongoDB。全是干货,希望大家喜欢!!!

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学,在技术的道路上一定会日益精进!感谢编辑们的长期坚持!

以下是正文,限于众编辑水平有限,不保证大家都喜欢。

物联网

①工业物联网作为一个新兴行业,然而由谁来引领工业互联网的发展?本来详细描述了物联网的本质、出发点和落脚点以及如何把握时代发展需求争抢中国工业物联网的战略制高点。

http://www.cnblogs.com/lsjwq/p/9228480.html

②本文主要介绍了历史至今的物理定位技术,在物联网时代,无论是室外,室内以及宏观和微观方面,定位技术都尤其重要。文章主要从物联网角度里介绍了定位技术,例如激光,FRID,地磁等技术,值得一阅。

https://mp.weixin.qq.com/s/3nsEOOkMm0tmz1vtxkmfXw

2

职场规划

跳槽要优先考虑成长问题

https://mp.weixin.qq.com/s/USinlXIXmIQVgF813JBNcw

3

TSDB

本文介绍OpenTSDB在HBase中数据表设计。在将这些数据存到HBase表中时,针对RowKey, Qualifier以及Value信息都做了特殊设计,可参考学习。

https://mp.weixin.qq.com/s/v7EOgPn7ZpMRdQXNm5KIkQ

4

HBase

本文介绍 HBase 常见的适合大数据量的迁移方法:DISTCP、SNAPSHOT

1、DSTCP+FIX 元数据信息

2、SNAPSHOT快照导出迁移

https://utf7.github.io/2018/01/13/hbase-data-migration/

5

Neo4j

Neo4j与Python结合,可以比较方便地实现网页排名算法与最小社区探测。

https://mp.weixin.qq.com/s/059jnKWkooGYU-9BRHs06w

6

Spark

Spark Streaming 的 checkpoint 目的是保证长时间运行的任务在意外挂掉后保证数据不丢失,checkpoint 包含两种数据:metadata 和 data,本篇主要讨论对 metadata 的 checkpoint。

https://mp.weixin.qq.com/s/QYOk0RFaejZ4E0BXlODcjw

7

代理模式

代理模式是设计模式中很重要的且特别常用的一种模式,例如spring的aop是基于动态代理实现的。基础是普通静态代理,但是一般应用最多的是动态代理,目前用的多的是jdk基于接口的动态代理以及。cglib基于继承的动态代理。最近因为工作的原因把代理复习了一遍,重新又理解了一遍,这篇文章图形并茂,生动具体的讲解了这一个重要的且常用的设计模式。

https://blog.csdn.net/luanlouis/article/details/24589193

8

Redis

在很多高并发请求的情况下,我们经常需要对系统进行限流,而且需要对应用集群进行全局的限流,那么我们如何类实现呢

https://mp.weixin.qq.com/s/1ZDWSKfy9UYoKZ7wOT5iQQ

9

ES

玩转es的sql功能,依然是熟悉的味道

https://elasticsearch.cn/article/687

10

机器学习算法

本文主要回顾下分类、回归、聚类等几个常用算法的适应场景及其优缺点,基于算法的优缺点,更易于我们去选择它。

https://mp.weixin.qq.com/s/X9DULk568vL0TOrQIJRggQ

11

Hadoop

Hadoop和Spark大数据两大平台,本文从性能,成本,安全性和机器学习分别进行了比较

https://mp.weixin.qq.com/s/txjZBlmlnafvlPydd9Hh3Q

12

ZooKeeper

ZooKeeper故障节点替换过程详解 一步一步教你操作

https://mp.weixin.qq.com/s/VUzFbC6pRL7IcdeNyYlSKg

13

MongoDB

本文讲述了MongoDB与Solr结合实现数据的同步,如何配置Solr及可能会遇到报错问题

http://www.what21.com/sys/view/71_sc_1475642114126.html

致谢:

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞、魏宏斌

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2018-07-02,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 大数据和云计算技术 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档