腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
桥路_大数据
专栏作者
举报
179
文章
228692
阅读量
36
订阅数
订阅专栏
申请加入专栏
全部文章(179)
大数据(46)
hive(28)
sql(26)
存储(22)
数据(21)
数据库(19)
mapreduce(18)
hadoop(18)
mysql(16)
node.js(13)
编程算法(12)
分布式(10)
linux(9)
yarn(9)
shell(9)
云数据库 SQL Server(8)
kafka(8)
索引(8)
优化(8)
spark(7)
java(6)
react(6)
文件存储(6)
缓存(6)
windows(6)
hbase(6)
性能(6)
html(5)
ide(5)
TDSQL MySQL 版(5)
开源(5)
产品(5)
工具(5)
架构(5)
python(4)
javascript(4)
git(4)
jar(4)
网络安全(4)
面向对象编程(4)
数据分析(4)
数据处理(4)
nat(4)
开发(4)
内存(4)
线程(4)
其他(3)
bash(3)
android(3)
github(3)
http(3)
reactnative(3)
自动化(3)
tcp/ip(3)
https(3)
管理(3)
进程(3)
连接(3)
数据仓库(3)
系统(3)
最佳实践(3)
php(2)
nosql(2)
api(2)
centos(2)
apache(2)
nginx(2)
bash 指令(2)
spring(2)
访问管理(2)
serverless(2)
yum(2)
zookeeper(2)
系统架构(2)
迁移(2)
etl(2)
sqoop(2)
磁盘(2)
服务器(2)
脚本(2)
搜索(2)
统计(2)
费用中心(1)
云服务器(1)
官方文档(1)
机器学习(1)
bootstrap(1)
jquery ui(1)
xml(1)
css(1)
qt(1)
打包(1)
maven(1)
unix(1)
容器镜像服务(1)
神经网络(1)
深度学习(1)
专用宿主机(1)
云数据库 MongoDB(1)
消息队列 CMQ 版(1)
腾讯云测试服务(1)
es 2(1)
mongodb(1)
网站(1)
企业(1)
数据安全(1)
electron(1)
容器(1)
运维(1)
压力测试(1)
html5(1)
jdk(1)
ssh(1)
dns(1)
npm(1)
grep(1)
markdown(1)
gradle(1)
安全(1)
虚拟化(1)
实时数仓(1)
Elasticsearch Service(1)
action(1)
app(1)
block(1)
clickhouse(1)
dql(1)
error(1)
exe(1)
greenplum(1)
having(1)
hdfs(1)
message(1)
model(1)
native(1)
partition(1)
range(1)
rows(1)
select(1)
sort(1)
tabbar(1)
title(1)
遍历(1)
操作系统(1)
测试(1)
二维码(1)
高并发(1)
工作(1)
函数(1)
后端(1)
集合(1)
客户端(1)
流量(1)
路由(1)
命令行(1)
排序(1)
摄像头(1)
实践(1)
事务(1)
数组(1)
文件上传(1)
效率(1)
消息队列(1)
协程(1)
虚拟机(1)
压缩(1)
原理(1)
字符编码(1)
搜索文章
搜索
搜索
关闭
MySQL数据导出导出的三种办法(13/16)
服务器
数据
数据库
迁移
mysql
在选择使用哪种方法时,还需要考虑数据的大小、是否需要跨平台迁移、是否有权限访问服务器文件系统、是否需要保留表结构等因素。通常,如果需要快速迁移大量数据并且对数据的完整性有高要求,物理拷贝表空间是一个好选择。如果数据量较小或者需要跨平台迁移,使用mysqldump或导出CSV文件可能更合适。
十里桃花舞丶
2024-04-12
83
0
MPP技术的优势与严重缺陷
数据库
存储
架构
数据
数据仓库
MPP代表"Massively Parallel Processing",是一种计算机架构,旨在通过分布式处理来实现大规模数据处理和分析。它使用多个处理器或计算节点同时工作,以加快数据处理速度和提高性能。MPP架构通常用于处理海量数据的应用程序,如数据仓库、商业智能和大数据分析。
十里桃花舞丶
2023-10-16
369
0
大数据技术生态全景一览
数据库
大数据
产品
管理
数据
大数据有很多的产品,琳琅满目。从架构图上就能看出产品很多。这些产品它们各自的功能是什么,它们又是怎么样相互配合来完成一整套的数据存储,包括分析计算任务。这里要给大家进行一个讲解与分析。
十里桃花舞丶
2023-10-16
372
0
大数据技术为何诞生,它究竟解决了哪些问题?
数据库
存储
大数据
架构
数据
大数据是什么?其实大数据是满足数据达到海量这个规模以后,对这部分数据要完成存储包括计算的一种技术。
十里桃花舞丶
2023-10-16
278
0
【原理】数据模型&系统架构
hbase
TDSQL MySQL 版
数据库
sql
unix
HBase表,本质是以Key-Value的方式存储,然后使用二维表的形式进行组织。每张表都属于一个NameSpace(命名空间)之下,它是对表的逻辑分组,类似于关系数据库中的Database;利用命名空间,在多租户场景下可做到更好的资源和数据隔离。
十里桃花舞丶
2021-12-06
592
0
【简介】分布式NoSQL数据库
TDSQL MySQL 版
hbase
存储
分布式
数据库
NoSQL是一些分布式非关系型数据库的统称,它采用非关系的数据模型,弱化模式或表结构、弱化完整性约束、弱化甚至取消事务机制,可能无法支持,或不能完整的支持SQL语句。
十里桃花舞丶
2021-12-06
920
0
SQL DDL:基本操作
数据库
hive
sql
Hive DDL根据操作对象的不同可分为:数据库操作、表的基本操作、表的高级操作、函数操作。
十里桃花舞丶
2021-09-10
271
0
【微课】MySQL快速解除死锁
大数据
python
sql
云数据库 SQL Server
数据库
其中DML锁是因为SQL执行异常,导致更新事务无法提交,如更新语句中的查询语句无索引,造成全表扫描而阻塞。
十里桃花舞丶
2021-02-05
863
0
Hive Schema Tool元数据运维
hive
spark
运维
迁移
数据库
较早的Hive版本,不会在MetaStore中写入版本号。所以升级到新版本之后,会报错:
十里桃花舞丶
2021-01-07
1.5K
0
实时数仓:Kappa架构
数据库
sql
kafka
消息队列 CMQ 版
serverless
上一期讲了Lambda架构,对于实时数仓而言,Lmabda架构有很明显的不足,首先同时维护两套系统,资源占用率高,其次这两套系统的数据处理逻辑相同,代码重复开发。
十里桃花舞丶
2021-01-06
6.1K
0
实时数仓:流式数据建模
数据库
数据处理
sql
kafka
数据模型设计是贯穿数据处理过程的,在实时流式数据处理中也一样。实时建模与离线建模类似,数据模型整体上分为5层(ODS、DWD、DWS、ADS、DIM)。
十里桃花舞丶
2021-01-06
1.3K
0
【项目实战】架构设计&环境规划
云数据库 SQL Server
数据库
sql
hive
根据企业的需求,业务数据存储在 MySQL 中,选择 Sqoop 作为 ETL 工具,HDFS 临时保存 Sqoop 抽取的数据。数据仓库部分选择主流的 Hive,并使用 Tez 进行优化;其中 ADS 层的数据会导出到 MySQL 中,便于前端业务进行快速调用。使用 Presto 作为快速查询的工具,Azkaban 作为调度工具。
十里桃花舞丶
2020-09-24
382
0
【课后作业】ADS 层数据导出
sql
数据库
云数据库 SQL Server
在 MySQL 节点(Node02)的 /home/warehouse/sql 目录下编写 mysql_gmv_ddl.sql,创建数据表:
十里桃花舞丶
2020-09-24
784
0
【课后作业】Azkaban 自动化调度
sql
数据库
云数据库 SQL Server
最后,将完成的 Shell 脚本交由 Azkaban 进行自动化调度。具体步骤讲解如下。
十里桃花舞丶
2020-09-24
345
0
【项目实战】ADS 层数据导出
sql
数据库
云数据库 SQL Server
为了业务系统进行更快速的查询,需要将 ADS 层的结果数据导出到 MySQL 中,这个过程因为涉及到数据流转,所以需要通过 ETL 工具 Sqoop 来进行。
十里桃花舞丶
2020-09-24
897
0
【项目实战】ODS 层创建&数据接入
hive
大数据
sql
数据库
云数据库 SQL Server
此时已经将数据从 MySQL 中导入到 HDFS 中了,接下来就需要将数据导入到数据仓库的 ODS 层中,完成原始数据的存储。
十里桃花舞丶
2020-09-24
1.5K
0
Python3将API返回的bytes解码为str
数据库
sql
api
如果将这种类型的字串直接存入到数据库的话,从数据库中读取出的字串进行操作会出现问题,比如上面的字串直接进行解析的话会直接报错,原因是str存着的实际上是一串没有解码的bytes。所以存入数据库时,要对bytes进行解码的操作。各位看官,详细操作请往下看。
十里桃花舞丶
2019-02-20
804
0
CentOS7安装mysql
云数据库 SQL Server
yum
数据库
sql
centos
https://dev.mysql.com/downloads/repo/yum/
十里桃花舞丶
2019-02-20
26.7K
0
CentOS7, mysql主从同步数据库配置
云数据库 SQL Server
数据库
前言 最近免费试用了一下云服务器,然后在两台服务器上安装了Mysql并搭建了主从同步数据库。mysql数据库的安装,大家可以去查看我的另一篇博客文章,下面为大家介绍搭建步骤及原理。 原理 mysql主节点即master节点在每次对数据库执行操作后会将操作写入到本地的二进制日志(binary log)中,从节点slave会使用I/O Thread线程去监听和读取主节点的binary log数据,如果有修改,则更新自己的Relay log日志,然后使用SQL thread线程将Relay log
十里桃花舞丶
2018-05-17
2.2K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
立即发文
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档