大数据和云计算技术周报(第61期)

大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。

本期会给大家奉献上精彩的:数据分析预测、数据库设计、Elasticsearch、流架构、分布式锁 、Kylin 、flink、Redis、神经网络、数据安全。全是干货,希望大家喜欢!!!

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。相信长期坚持认真阅读周报的同学,在技术的道路上一定会日益精进!感谢编辑们的长期坚持!

以下是正文,限于众编辑水平有限,不保证大家都喜欢。

数据分析预测

一个全世界最大的数据分析预测工具,去做数据分析和数据采集,采集网页并分析词和权重,最后做分析预测,预测它的每一次的排序展示是否符合用户当下的预期。

2

数据库设计

饿了么实战数据库设计,值得一看

3

Elasticsearch

Elasticsearch(ES)作为NOSQL+搜索引擎的有机结合体,不仅有近实时的查询能力,还具有强大的聚合分析能力。那么,我们如何调优呢

4

流架构

评估好哪一种流架构模式最适合你的业务场景,是大数据开发的先决条件。

大数据时代的的信息量都是爆发式的膨胀,对数据和信息的处理速度和时效要求也越来越高。传统的方式都是在后台系统每天作一次全量处理,目前的要求都需要实时作处理。Apache Hadoop 生态系统已成为企业实时地处理和挖掘大数据的首选。Apache的Kafka, Flume, Spark, Storm等技术在不断地推进新的可能。

5

分布式锁

什么是分布式锁?以漫画的方式进行讲解,形象生动,值得大家看一看

6

Kylin

在Apache Kylin的实际部署中,有时SQL查询并不能如预期在很短的时间内完成,这就需要开发人员有针对性地进行分析和优化。本文将分阶段为大家解析应如何分析和优化Apache Kylin的查询性能。

7

flink

本文主要是讲述flink与kafka结合。并对比Spark Streaming与kafka的结合。

8

Redis

本文主要描述的是对“高可用”Redis服务 的总结和思考。

9

神经网络

这篇文章详细的介绍了循环神经网络的概念和原理,rnn和cnn的联合使用,最后还给出了应用实例

10

数据安全

近年来,数据安全形势越发严峻,各种数据安全事件层出不穷。在当前形势下,互联网公司也基本达成了一个共识:虽然无法完全阻止攻击,但底线是敏感数据不能泄漏。也即是说,服务器可以被挂马,但敏感数据不能被拖走。服务器对于互联网公司来说,是可以接受的损失,但敏感数据泄漏,则会对公司产生重大声誉、经济影响。本文讲解如何根据自身特点,来进行数据安全保障

致谢:

周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞、

原文发布于微信公众号 - 大数据和云计算技术(jiezhu2007)

原文发表时间:2018-07-23

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏VRPinea

AR丧尸游戏《The Walking Dead: Our World》丨想尝尝被丧尸吃掉脑子的感觉吗?

提到丧尸,大家会想到什么?《釜山行》、《行尸走肉》......相必很多看过丧尸类电影或电视剧的小伙伴,都曾想象过生活在一个充满丧尸的世界里,用各种武器去屠杀漫山...

1852
来自专栏知晓程序

各大银行有哪些刷卡优惠?这款小程序帮你「薅羊毛」

现在,以 80、90 后为代表的新兴都市族们,对银行等金融机构及各类商家开展的一些优惠活动产生了浓厚兴趣,并专门出现了这样一批人,搜集各个银行等金融机构及各类商...

791
来自专栏镁客网

哥伦比亚大学的这款新型毫米波循环器,将彻底改变无线VR技术 | 黑科技

1600
来自专栏奇点大数据

大数据变现十日谈之七:AB测试

AB测试在很多互联网产品中都很常用,甚至有很多老牌的软件企业也从这种方式中汲取经验。 AB测试指的是什么呢? 在我看来,AB测试是一种评价体系的核心思想。大致的...

3536

黑暗领地 - 你知道你的信息在哪里吗?

原文地址:https://www.informationsecuritybuzz.com/articles/dark-territories-know-info...

1160
来自专栏FreeBuf

认知指纹:颠覆性的身份认证技术

导读 如果一个网站只需要输入用户名,然后点击“登录”按钮,就可以成功登录,并且其他人无法进入你的账户,听起来是不是很不可思议? —— 事实上,你输入用户名的时候...

24110
来自专栏CDA数据分析师

2017年6大热门开源项目

原作者 William Belk 编译 CDA 编译团队 本文为 CDA 数据分析师原创作品,转载需授权 2017 年哪些开源项目值得关注?让我们来看看 20...

2748
来自专栏FreeBuf

大数据安全分析(理念篇)

一、引言 单纯的防御措施无法阻止蓄意的攻击者,这已经是大家都认同的事实,应对挑战业界有了诸多方面的探索和实践,而其中最有趣的就非安全分析莫属了,围绕着安全分析展...

3475
来自专栏大数据文摘

大数据安全分析(理念篇)

3227
来自专栏架构师之路

1分钟了解协同过滤,pm都懂了

工程架构方向的程序员,看到推荐/搜索/广告等和算法相关的技术,心中或多或少有一丝胆怯。但认真研究之后,发现其实没有这么难。 今天的1分钟系列,给大家介绍下推荐系...

3834

扫码关注云+社区

领取腾讯云代金券