腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
大数据和云计算技术
专栏作者
举报
298
文章
436800
阅读量
101
订阅数
订阅专栏
申请加入专栏
全部文章（298）
大数据（78）
其他（47）
数据库（41）
https（33）
hbase（33）
网络安全（31）
spark（31）
sql（30）
mongodb（26）
存储（26）
编程算法（20）
nosql（18）
数据分析（16）
开源（13）
云数据库 MongoDB（12）
分布式（12）
hadoop（12）
云计算（10）
TDSQL MySQL 版（9）
安全（9）
apache（8）
人工智能（8）
数据处理（8）
hive（7）
kerberos（7）
数据结构（7）
linux（6）
yarn（6）
kafka（6）
机器学习（5）
java（5）
云数据库 SQL Server（5）
云数据库 Redis（5）
微信（5）
虚拟化（5）
Elasticsearch Service（5）
硬件开发（4）
容器镜像服务（4）
容器（4）
推荐系统（4）
微服务（4）
python（3）
node.js（3）
html（3）
arm（3）
api（3）
深度学习（3）
知识图谱（3）
devops（3）
运维（3）
二叉树（3）
物联网（3）
系统架构（3）
云服务器（2）
NLP 服务（2）
数据挖掘（2）
github（2）
spring（2）
mapreduce（2）
serverless（2）
缓存（2）
数据迁移（2）
卷积神经网络（2）
openstack（2）
zookeeper（2）
数据可视化（2）
mqtt（2）
费用中心（1）
自动驾驶（1）
c++（1）
go（1）
css（1）
ide（1）
git（1）
maven（1）
搜索引擎（1）
unix（1）
文件存储（1）
cdn 边缘计算（1）
网站（1）
DevOps 解决方案（1）
电商（1）
企业（1）
http（1）
自动化（1）
erp（1）
mybatis（1）
spring boot（1）
hashmap（1）
敏捷开发（1）
kernel（1）
windows（1）
fpga（1）
任务调度（1）
5g（1）
迁移（1）
es（1）
数据集成（1）
it（1）
nvidia（1）
ode（1）
scrum（1）
公有云（1）
互联网（1）
敏捷（1）
搜索文章
搜索
搜索
关闭
行程卡是怎么记录行程的？
大数据
上图是天津市通讯管理局里面明确行程卡使用的是基站数据，那大家会好奇了，为啥基站数据能得出来行程？其实这个和无线通讯的原理是有很大关系的， **无线是用一个个蜂窝来划分区域的，一个蜂窝叫一个小区，所以只要电话在线，就需要注册到一个个小区中去，知道了小区就知道了用户所在的位置。通过小区切换就能计算出用户移动的轨迹，这就是用户的位置数据。** 上面一段是笔者在2016年出版的《大数据架构详解》第一章就提到了，当时对这块的技术其实就已经成熟，可惜没有什么特别好的应用。 我们来重温一下《大数据架构详解》第一章关于电信
大数据和云计算技术
2022-03-03
1K
0
大数据与云计算技术周报（第142期)
https
网络安全
云数据库 Redis
大数据
知识图谱
“大数据” 三个字其实是个marketing语言，从技术角度看，包含范围很广，计算、存储、网络都涉及，知识点广、学习难度高。 本期会给大家奉献上精彩的：死锁、知识图谱、Spark 、TCP、MongoDB、Redis、AI、kafka。全是干货，希望大家喜欢！！！
大数据和云计算技术
2020-02-26
786
0
大数据和云计算技术周报（第132期)
https
网络安全
mongodb
云数据库 MongoDB
大数据
本文介绍了ElasticSearch 亿级数据检索案例，关于如何通过优化ES实现几十亿的数据查询秒级响应的效果。
大数据和云计算技术
2019-12-18
427
0
大数据时代的结构化存储-HBase的应用实践
hbase
TDSQL MySQL 版
数据库
大数据
sql
时间回到2011年，Hadoop作为新生事物，在阿里巴巴已经玩得风生水起，上千台规模的"云梯"是当时国内名声显赫的计算平台。 这一年，Hadoop的好兄弟HBase由毕玄大师带入淘宝，开启了它的阿里之旅。从最初的淘宝历史交易记录，到去年的支付宝消费记录存储在线历史存储统一；从蚂蚁安全风控的多年存储演进，到HBase、TT、Galaxy的大数据激情迭代；HBase在阿里经历过年轻的苦涩，释放过青春的活力，也付出过成长的代价。几代人的不懈努力下，五年陈的HBase开始表现出更成熟、更完善、更丰富的一面，成为公司内部被广泛使用的存储产品之一。 经过阿里集团内部的锤炼，集团将这个技术红利输送给广大阿里云客户。现已推出云数据库HBase产品，支持海量的PB级的大数据存储，适用于高吞吐的随机读写的场景。
大数据和云计算技术
2019-09-24
1.3K
0
HBaseSQL及分析-Phoenix&Spark
sql
spark
hbase
TDSQL MySQL 版
大数据
本文介绍了详细了HBaseSQL，Phoinix和Spark的架构，适用性以及优缺点，并在最后规划出未来将要设计的一款更符合用户需求的产品。
大数据和云计算技术
2019-09-24
716
0
Spark中的RDD介绍
spark
分布式
大数据
java
我们在研究WordCount的时候碰到了很多诸如JavaRDD、Function之类的字眼，其实这些个代码逻辑就是我们以后日日夜夜不断去写去改的那部分程序了，从某种程度上来讲，完成一道spark的作业题，基本也就是去设计我们的rdd和function了。既然话都说到这份上了，建立感情需要从认识开始。在前面的文章已经确认过眼神了，这次当然是正式介绍。
大数据和云计算技术
2019-09-24
538
0
JAVA&大数据架构方向 同与异？
大数据
分布式
java
编程算法
spark
架构不是一个职业而是一种能力,每一种架构师只不过是在不同的领域里面使用不同的技术,没有什么可对比,就好比如你问一个篮球明星和一个足球明星有什么区别一样！
大数据和云计算技术
2019-09-24
609
0
大数据和云计算技术周报（第94期)
网络安全
https
spark
mongodb
大数据
本文主要介绍了基于 Apache HBase 与 Google SimHash 等多种算法共同实现的一套支持百亿级文本数据相似度计算与快速去重系统的设计与实现。
大数据和云计算技术
2019-09-24
402
0
大数据和云计算技术周报（第95期)
网络安全
https
推荐系统
编程算法
大数据
物联网应用层协议主要有CoAP, MQTT, XMPP, HTTP等，本文主要从XMPP的架构，协议栈、协议的原理等方面介绍了XMPP协议。
大数据和云计算技术
2019-09-24
412
0
大数据和云计算技术周报（第96期)
网络安全
https
推荐系统
mqtt
大数据
本文分享了eBay团队如何对这些Hadoop job进行优化，eBay由于每天产生PB量级的CAL日志，如何解决MapReducejob实践中存在的问题对其它行业大有裨益。
大数据和云计算技术
2019-09-24
371
0
大数据和云计算技术周报（第97期)
https
网络安全
云数据库 Redis
云计算
大数据
https://mp.weixin.qq.com/s/L0C2TajMEM3veHgB0Yazxg
大数据和云计算技术
2019-09-24
406
0
大数据和云计算技术周报（第92期)
https
网络安全
知识图谱
大数据
python
Netty的内存管理其实做的很精细，对HBase的Offheap化设计有不少启发。目前HBase的内存分配器至少有3种。可以预期的是，HBase2.0性能必定是朝更好方向发展的，尤其是GC对P999的影响会越来越小。
大数据和云计算技术
2019-09-24
487
0
《大数据和云计算技术》社区2018成绩单
大数据
云计算
2018渐行渐远，《大数据和云计算技术》社区感谢有你的一路陪伴！回望2018，社区也总结总结2018的成绩单，期待新的2019。
大数据和云计算技术
2019-09-24
281
0
HBase应用实践专场-HBase问题排查思路
hbase
TDSQL MySQL 版
html
大数据
如果重度依赖HBase，有必要对HBase源码进行深入理解,建议根据日志去找追踪源码！！！
大数据和云计算技术
2019-09-24
1.3K
0
大数据和云计算技术周报（第111期)
https
网络安全
mongodb
云数据库 MongoDB
大数据
本文讲述了 HDFS Router-based Federation 的架构和特性。
大数据和云计算技术
2019-07-16
305
0
大数据和云计算技术周报（第107期)
https
spark
大数据
云数据库 Redis
mongodb
Spark应用中，Shuffle服务的可靠性和性能直接影响了Spark应用的执行效率，来自Facebook的Brian Cho与Dmitry Borovsky在今年4月份旧金山举行的Spark AI峰会上，分享了他们为Spark/Hive Shuffle优化做的工作，这些工作中的很大部分已经应用于Facebook的大数据平台生产环境，对于超大规模的Spark数据处理优化，有一定的参考借鉴价值。
大数据和云计算技术
2019-06-20
701
0
大数据和云计算技术周报（第103期)
大数据
kafka
https
nosql
网络安全
本文主要介绍MySQL + HBase 分别解决应用的在线事务问题和大数据场景的海量存储问题。
大数据和云计算技术
2019-05-23
565
0
大数据和云计算技术周报（第76期)
大数据
存储
mongodb
spark
大数据” 三个字其实是个marketing语言，从技术角度看，包含范围很广，计算、存储、网络都涉及，知识点广、学习难度高。
大数据和云计算技术
2018-12-12
645
0
大数据和云计算技术周报（第57期）
网络安全
https
大数据
Elasticsearch Service
知识图谱
“大数据” 三个字其实是个marketing语言，从技术角度看，包含范围很广，计算、存储、网络都涉及，知识点广、学习难度高。
大数据和云计算技术
2018-07-26
598
0
大数据和云计算技术周报（第54期）:NoSQL特辑
大数据
nosql
sql
hbase
本期有 HBase、MySQL、Spark、Kylin、MongoDB、分布式。 希望大家会喜欢！
大数据和云计算技术
2018-07-26
293
0
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天，分 10000 元奖品池！
立即发文
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档