腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
美团技术团队
我们信仰耐心和坚持的力量，愿意持续去做一些正确、有积累、可能表面看上去不那么重要实则非常关键的事情
专栏作者
举报
518
文章
732213
阅读量
345
订阅数
订阅专栏
申请加入专栏
全部文章（518）
编程算法（81）
数据库（44）
深度学习（42）
其他（40）
android（40）
机器学习（33）
java（33）
系统架构（31）
人工智能（28）
神经网络（25）
ios（24）
sql（24）
ide（23）
存储（23）
缓存（23）
分布式（22）
网站（19）
javascript（17）
node.js（17）
打包（17）
linux（17）
开源（17）
自动化（17）
运维（17）
数据结构（17）
api（16）
大数据（16）
安全（15）
容器（14）
实践（14）
网络安全（13）
微服务（13）
NLP 服务（12）
数据分析（12）
数据处理（12）
腾讯云测试服务（11）
jvm（11）
微信（11）
sdk（11）
模型（11）
云数据库 SQL Server（10）
spark（9）
数据（9）
react（8）
html（8）
容器镜像服务（8）
推荐系统（8）
自动化测试（8）
https（8）
c++（7）
知识图谱（7）
图像识别（7）
tensorflow（6）
http（6）
kubernetes（6）
kafka（6）
特征工程（6）
优化（6）
json（5）
云数据库 Redis（5）
搜索引擎（5）
spring（5）
webpack（5）
hive（5）
spring boot（5）
jenkins（5）
小程序（5）
安全漏洞（5）
腾讯云开发者社区（5）
flutter（5）
框架（5）
go（4）
css（4）
渲染（4）
数据安全（4）
hadoop（4）
rpc（4）
数据可视化（4）
搜索（4）
异常（4）
objective-c（3）
cocoa（3）
python（3）
vue.js（3）
jquery ui（3）
xml（3）
webview（3）
github（3）
jar（3）
apache（3）
日志服务（3）
图像处理（3）
日志数据（3）
监督学习（3）
cdn（3）
tcp/ip（3）
kernel（3）
uml（3）
架构设计（3）
腾讯会议（3）
迁移（3）
dart（3）
性能测试（3）
测试（3）
流量（3）
算法（3）
系统（3）
研发（3）
云镜（主机安全）（2）
自动驾驶（2）
数据挖掘（2）
swift（2）
xcode（2）
ajax（2）
opengl（2）
批量计算（2）
文件存储（2）
TDSQL MySQL 版（2）
serverless（2）
数据迁移（2）
无人驾驶（2）
jdk（2）
卷积神经网络（2）
强化学习（2）
mybatis（2）
面向对象编程（2）
hashmap（2）
openstack（2）
npm（2）
aop（2）
单元测试（2）
gradle（2）
processing（2）
任务调度（2）
flink（2）
学习方法（2）
数据集成（2）
智能客服机器人（2）
app（2）
mysql（2）
服务（2）
工作（2）
架构（2）
接口（2）
论文（2）
内核（2）
排序（2）
前端（2）
视频（2）
索引（2）
网络（2）
原理（2）
费用中心（1）
内容分发网络 CDN（1）
云点播（1）
对象存储（1）
维纳斯（1）
弹性伸缩（1）
人脸识别（1）
iphone（1）
jquery（1）
typescript（1）
android studio（1）
arm（1）
硬件开发（1）
access（1）
mvc（1）
git（1）
analyzer（1）
unix（1）
centos（1）
mapreduce（1）
GPU 云服务器（1）
容器服务（1）
短视频（1）
腾讯云可观测平台（1）
访问管理（1）
消息队列 CMQ 版（1）
cci 持续集成（1）
智能鉴黄（1）
图片标签（1）
文字识别（1）
人脸融合（1）
内容理解（1）
es 2（1）
视频处理（1）
高性能计算（1）
企业（1）
o2o（1）
url 安全（1）
express（1）
reactnative（1）
yarn（1）
压力测试（1）
html5（1）
正则表达式（1）
dns（1）
opencv（1）
zookeeper（1）
二叉树（1）
rabbitmq（1）
gcc（1）
迁移学习（1）
kerberos（1）
机器人（1）
windows（1）
物联网（1）
网站建设（1）
企业组织（1）
信息流（1）
云计算（1）
机器学习平台（1）
安全治理（1）
迁移服务（1）
groovy（1）
功能测试（1）
白盒测试（1）
黑盒测试（1）
模型测试（1）
etcd（1）
raft（1）
es（1）
智能审核（1）
应急响应服务（1）
Elasticsearch Service（1）
大数据存储（1）
数据湖（1）
设计云（1）
action（1）
aiops（1）
amp（1）
behavior（1）
click（1）
com（1）
db（1）
embedding（1）
field（1）
filter（1）
gpu（1）
gradient（1）
network（1）
prediction（1）
time（1）
tree（1）
ui（1）
vr（1）
地图（1）
公众号（1）
工作流（1）
管理（1）
基础（1）
集群（1）
监控（1）
解决方案（1）
进程（1）
开发（1）
可视化（1）
内存（1）
配置（1）
设计（1）
事件（1）
统计（1）
效率（1）
性能（1）
压缩（1）
终端（1）
数据库集群（1）
容灾（1）
搜索文章
搜索
搜索
关闭
互联网公司数据安全保护新探索
安全
数据库
hadoop
总第246篇 2018年 第38篇 背景 近年来，数据安全形势越发严峻，各种数据安全事件层出不穷。在当前形势下，互联网公司也基本达成了一个共识：虽然无法完全阻止攻击，但底线是敏感数据不能泄漏。也即是说，服务器可以被挂马，但敏感数据不能被拖走。服务器对于互联网公司来说，是可以接受的损失，但敏感数据泄漏，则会对公司产生重大声誉、经济影响。 在互联网公司的数据安全领域，无论是传统理论提出的数据安全生命周期，还是安全厂商提供的解决方案，都面临着落地困难的问题。其核心点在于对海量数据、复杂应用环境下的可操作性不佳。
美团技术团队
2018-06-07
1.1K
0
行进中换轮胎——万字长文解析美团和大众点评两大数据平台是怎么融合的
大数据
hadoop
sql
背景 互联网格局复杂多变，大规模的企业合并重组不时发生。原来完全独立甚至相互竞争的两家公司，有着独立的技术体系、平台和团队，如何整合，技术和管理上的难度都很大。2015年10月，美团与大众点评合并为今天的“美团点评”，成为全球规模最大的生活服务平台。主要分布在北京和上海两地的两支技术团队和两套技术平台，为业界提供了一个很好的整合案例。 本文将重点讲述数据平台融合项目的实践思路和经验，并深入地讨论Hadoop多机房架构的一种实现方案，以及大面积SQL任务重构的一种平滑化方法。最后介绍这种复杂的平台系统如何保证
美团技术团队
2018-03-13
1.1K
0
HDFS NameNode重启优化
hadoop
安全
一、背景 在Hadoop集群整个生命周期里，由于调整参数、Patch、升级等多种场景需要频繁操作NameNode重启，不论采用何种架构，重启期间集群整体存在可用性和可靠性的风险，所以优化NameNod
美团技术团队
2018-03-12
1.8K
0
HDFS Federation在美团点评的应用与改进
node.js
hive
大数据
spark
hadoop
背景 2015年10月，经过一段时间的优化与改进，美团点评HDFS集群稳定性和性能有显著提升，保证了业务数据存储量和计算量爆发式增长下的存储服务质量；然而，随着集群规模的发展，单组NameNode组成的集群也产生了新的瓶颈： 扩展性：根据HDFS NameNode内存全景和HDFS NameNode内存详解这两篇文章的说明可知，NameNode内存使用和元数据量正相关。180GB堆内存配置下，元数据量红线约为7亿，而随着集群规模和业务的发展，即使经过小文件合并与数据压缩，仍然无法阻止元数据量逐渐接近红线。
美团技术团队
2018-03-12
1.5K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天，分 10000 元奖品池！
立即发文
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档