需求描述 实现的sql 案例演示 字符串拆分： SUBSTRING_INDEX（str, delim, count） 替换函数：replace( str, from_str, to_str) 获取字符串长度：LENGTH( str ) 实现的原理解析 实现sql 正式的原理解析 Step1：首先获取最后需被拆分成多少个字符串，利用 help_topic_id 来模拟遍历 第n个字符串。 Step2：根据“，”逗号来拆分字符串，此处利用 SUBSTRING_INDEX（str, delim, count） 函数，最后把结果赋值给 num 字段。 扩展：判断外部值是否在 num列值中 find_in_set instr 字符串转多列
在MySQL中，字符串分割是一个常见的操作，用于将一个包含多个子字符串的大字符串拆分成多个部分。以下是几种常见的在MySQL中进行字符串分割的方法：
说明：Linux pstree命令将所有行程以树状图显示，树状图将会以 pid (如果有指定) 如果有指定使用者 id，则树状图会只显示该使用者所拥有的行程。
Linux 文本处理三剑客grep、sed、awk，这三个命令在工作和面试过程中出现的频率非常高，有时候很复杂的需求，一条简单的命令就可以实现，今天就先学习一下最强大的awk。
文章涉及到vim\grep\cat\more\less\echo\sed\awk的入门用法。
在发布系统中所有前置任务里面增加一些内容，发布系统中大约有200+的项目，手动是不可能手动的，只有在数据库中操作了。
小伙伴想精准查找自己想看的MySQL文章？喏 → MySQL江湖路专栏目录 | 点击这里
date - print or set the system date and time
注:oracle的concat函数只支持两个参数的方法，即只能拼接两个参数，如要拼接多个参数则嵌套使用concat可实现，如:
总是记不住字符串拼接，每次都要百度去搜索，所以在这里记录一下，好方便后续的查找，如有错误和问题可以提出，谢谢。
最近在做的业务场景涉及到了数据库的递归查询。我们公司用的 Oracle ，众所周知，Oracle 自带有递归查询的功能，所以实现起来特别简单。
MySQL通过delimiter来区分不同的SQL语句(SQL Statement)，默认的分隔符是 ;；
表在创建时，有分隔符属性，这个分隔符属性，代表在执行MR程序时，使用哪个分隔符去分割每行中的字段！ 查看表(实际在HDFS中也是一个文件)中的所有内容(包括分隔符)：
awk是一种编程语言，用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入、一个或多个文件，或其它命令的输出。它支持用户自定义 函数和动态正则表达式等先进功能，是linux/unix下的一个强大编程工具。它在命令行中使用，但更多是作为脚本来使用。awk的处理文本和数据的方 式是这样的，它逐行扫描文件，从第一行到最后一行，寻找匹配的特定模式的行，并在这些行上进行你想要的操作。如果没有指定处理动作，则把匹配的行显示到标 准输出(屏幕)，如果没有指定模式，则所有被操作所指定的行都被处理。awk分别代表其作者姓氏的第一个字母。因为它的作者是三个人，分别是Alfred Aho、Brian Kernighan、Peter Weinberger。gawk是awk的GNU版本，它提供了Bell实验室和GNU的一些扩展。
一、字符串拆分： SUBSTRING_INDEX（str, delim, count）
本文选取一些mysql函数进行具体举例介绍，从功能、语法等多方面做个记录说明，附上执行截图
注意：返回结果为连接参数产生的字符串，如果有任何一个参数为 NULL，则返回值为 NULL。
一、数据导入 1.什么是导入:把系统文件的内容保存到数据库服务器的表里 2.导入数据时的注意事项？ -表中字段的个数要和文件列中的个数相等 -字段的类型要和文件中列的值匹配 3.导入数据命令格式： load data infile '文件名' into table 表名 fields terminated by '分隔符' lines terminated by '\n'; *terminated by ‘分隔符’:指定列的分隔符 *lines terminated by
本篇文章主要介绍了MySQL中concat函数的用法(连接字符串)，在命令行模式下进行测试。
在学习常用函数之前，先来学习一些数据库的基本操作，因为在自己试下面这些函数时，按照图片中的代码敲不一定对。有kali的同学可以在docker里做，而大部分同学是用ubuntu的，这个时候搭建的mysql里可能没有库没有表，那么就需要自己来建库建表来实践。不然没有建的话根本没东西，按下面的代码敲，就会报错。
关键字delimiter的使用： delimiter是mysql分隔符。在mysqlclient中分隔符默认是分号（；）。 假设一次输入的语句较多，而且语句中间有分号，这时须要新指定一个特殊的分隔符。 在前一篇中有设置mysql的触发器时使用样例
mysql CONCAT（）函数用于将多个字符串连接成一个字符串，是最重要的mysql函数之一，下面就将为您详细介绍mysql CONCAT（）函数，供您参考
MySQL 中提供了LOAD DATA INFILE语句来插入数据。 以下实例中将从当前目录中读取文件 dump.txt ，将该文件中的数据插入到当前数据库的 mytbl 表中。
CONCAT_WS() 代表 CONCAT With Separator ，是CONCAT()的特殊形式。
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，默认以空格为分隔符将每行切片，切开的部分再进行各种分析处理。awk是行处理器,相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息
mysql -u用户名 -p密码 < 要导入的数据库数据(kxdang.sql)
Hive可以管理HDFS中的数据，可以通过SQL语句可以实现与MapReduce类似的同能，因为Hive底层的实现就是通过调度MapReduce来实现的，只是进行了包装，对用户不可见。 Hive对HDFS的支持只是在HDFS中创建了几层目录，正真的数据存在在MySql中，MYSQL中保存了Hive的表定义，用户不必关系MySQL中的定义，该层对用户不可见。Hive中的库在HDFS中对应一层目录，表在HDFS中亦对应一层目录，如果在对应的表目录下放置与表定义相匹配的数据，即可通过Hive实现对数据的可视化及查询等功能 综上所述，Hive实现了对HDFS的管理，通过MySQL实现了对HDFS数据的维度管理 Hive基本功能及概念 database table 外部表，内部表，分区表 Hive安装 1. MySql的安装（密码修改，远程用户登陆权限修改） 2. Hive安装获取，修改配置文件(HADOOP_HOME的修改，MySQL的修改) 3. 启动HDFS和YARN(MapReduce)，启动Hive Hive基本语法： 1. 创建库：create database dbname 2. 创建表：create table tbname Hive操作： 1. Hive 命令行交互式 2. 运行HiveServer2服务，客户端 beeline 访问交互式运行 3. Beeline 脚本化运行 3.1 直接在 命令行模式下 输入脚本命令执行(比较繁琐，容易出错，不好归档) 3.2 单独保存SQL 命令到 文件，如etl.sql ，然后通过Beeline命令执行脚本 数据导入： 1. 本地数据导入到 Hive表 load data local inpath "" into table .. 2. HDFS导入数据到 Hive表 load data inpath "" into table .. 3. 直接在Hive表目录创建数据 Hive表类型： 1. 内部表: create table 表数据在表目录下，对表的删除会导致表目录下的数据丢失，需要定义表数据的分隔符。 2. 外部表: create external table 表目录下挂载表数据，表数据存储在其他HDFS目录上，需要定义表数据的分隔符。 3. 分区表：与创建内部表相同，需要定义分区字段及表数据的分隔符。在导入数据时需要分区字段，然后会在表目录下会按照分区字段自动生成分区表，同样也是按照目录来管理，每个分区都是单独目录，目录下挂载数据文件。 4. CTAS建表 HQL 1. 单行操作：array，contain等 2. 聚合操作：(max,count,sum)等 3. 内连接，外连接（左外，右外，全外） 4. 分组聚合 groupby 5. 查询 : 基本查询，条件查询，关联查询 6. 子查询： 当前数据源来源于 另个数据执行的结果，即当前 table 为临时数据结果 7. 内置函数: 转换, 字符串, 函数 转换：字符与整形，字符与时间， 字符串：切割，合并， 函数：contain，max/min，sum， 8. 复合类型 map（key，value）指定字符分隔符与KV分隔符 array（value）指定字符分隔符 struct(name,value) 指定字符分割与nv分隔符 9. 窗口分析函数 10. Hive对Json的支持
在平时工作中，有时我们会编写存储过程。在存储过程中我们会在网上看到一些例子，在例子中会有类似 DELIMITER ?? 或者 DELIMITER // 这种写法，这种写法看上去就比较迷惑，并且网上的介
1.字符串是由一串Unicode字符组成的序列，每个Unicode字符都占用一个或多个字节的存储空间。
执行后，会把指定表中记录数据导出到c:/test.csv文件中。每个字段以,(逗号)分隔，字段内容是字符串的以”（双引号）包围，每条记录使用\r\n换行。如图所示
下面的自定义函数：CountBlock函数，可以根据提供的一个或多个分隔符进行查找，得到这些分隔符将字符串分隔成的文本块数。
返回结果为连接参数产生的字符串。如有任何一个参数为NULL ，则返回值为 NULL。
字符串是集合类型 1、定义 s = 'hello python' s = "hellp python" 以上2种没有区别 s = '''hello python''' s = """hello python""" 以上2种没有区别 区别在于三引号可以定义多行字符串 2、转义和自然字符串 s = 'i like \npython' 避免转义用r前缀 path = r'c:\nt\ 3、查 s[index] #返回字符串 4、字符串不可改变，可迭代 5、连接 “分隔符”.join(lst) #join是连接字符串方法，参数是可迭代对象, 6、分隔 s.split(‘分隔符’[,maxsplit=-1]) #默认使用空格分隔，多个当一个处理；当指定空格时，按每个空格分隔；maxsplit表示分隔几次，默认为-1，表示分隔所有 s.rsplit是split从右往左分隔，当不使用maxsplit时，两者一致，但是从左往右效率更高。 s.splitlines() #按行分隔，如果参数为True，则带换行符 s.partition('分隔符') #总是分成三部分，头、参数和尾部。适合分隔路径。 s.rpartition('分隔符') #和partition类似，从左往右分隔 7、转化 s,upper() #所有字母变为大写 s.lower() #所有字母变为小写 s.title() #所有首字母大写 s.capitalize() #仅第一个单词首字母大写 s.casefold() #不同平台有不同表现形式，同一平台下相同，通常用于忽略大小写的比较 s.swapcase() #大小写互换 8、显示 s.zfill(width) #不足width长度时，在前面加0补满 s.expandtabs(count) #把tab转为为count个空格 9、修改 s.replace(old,new[,count]) #替换，默认全部替换 s.strip([‘字符’]) #移除前后的指定字符，默认为移除空白 s.lstip(['字符 #只移除左边的指定字符 s.rstrip(['字符']) #只移除右边的指定字符 s.ljust(width[,'填充符']) #在左边填充，默认为空格 s.center(width[,'填充符']) #在多少字符中居中显示，其他用填充符，默认为空格 s.rjust(width[,'填充符']) #在右边边填充，默认为空格 10、查找 s.find('字符'[,start.end]) #从左往右查找，返回找到字符串的首字母的索引，当不存在时返回-1 s.rfind('字符'[,start,end]) #从右往左查找，都是先用start和end截取之后再查找 s.index('字符'[,start,end]) #和find一样，唯一区别是查找不到返回value error。 s.rindex('字符'[,start,end]) #从右往左查找 s.count('字符'[,start,end]) #查找字符出现的次数 list(enumerate(s)) 返回索引和值 11、判断 s.startswith('字符'[start,end]) #判断是否以字符为首字母开始，start表示从此位置开始比较 s.endswith('字符'[start,end]) #判断是否以字符结尾 s.isalnum() #判断是否只包含字母和数字 s.isidentifier() #判断是否是合法标识符：字母或者下划线开头；仅包含字母和下划线 12、字符串格式化 是拼接字符串的一种手段 2.6之前：用类似printf，继承c语音而来 'i love %s, i am %d' % ('python'.18) #如果类型不匹配，会typeerror %s 字符串 %d 整型 %f 浮点型 2.6开始format方法：用{}做占位符,可以在大括号中加位置，可以重复使用如,也可以加标识符： 'i love {0} , you love {0} , i am {age} you name {name}'.format('python',age=12,name='tom') 当占位符和参数不匹配时会报错
该字段由3部分组成，分别对应ip, user, password，现在要使用sql将该字段拆分，代码如下：
通过sqoop抽取Mysql表数据到hive表，发现hive表所有列显示为null
一、MySQL中字符串的截取 MySQL中有专门的字符串截取函数：其中常用的有两种：substring_index(str,delim,count) 和concat 1.substring_index(str,delim,count) 函数的使用较为普遍。 函数括号里面的依次为：要分隔截取的字符串（如：”aaa_bbb_ccc”）、分隔符（如：“_”）、位置（表示第几个分隔符处，如：“1”）。 count为正数，那么就是从左边开始数，函数返回第count个分隔符的左侧的字符串; count为负数，那么就是从右边开始数，函数返回第count个分隔符右边的所有内容; count可以为0，返回为空。
import工具从RDBMS向HDFS导入单独的表。表格中的每一行都表示为HDFS中的单独记录。记录可以存储为文本文件（每行一个记录），或以Avro或SequenceFiles的二进制表示形式存储。
/ect/init.d/mysql start (前面为mysql的安装路径)
3、导出数据库 mysqldump -u 用户名 -p 数据库名 > 导出的文件名
前面一篇已经介绍了MySQL 备份相关的原理与方法，要是还没有来得及看的可以戳此查看『MySQL 备份恢复（一）』，那么今天就接着上一篇的内容继续谈谈备份恢复相关内容。数据备份是 DBA 非常重要的工作之一，系统意外奔溃或者硬件损坏都可能导致数据库的数据丢失，因此 MySQL DBA 应该定期备份数据，使得意外发生时尽可能的减少损失。数据备份在工作中是重中之重，安全很重要。
本系列文章总结归纳了一些软件测试工程师常见的面试题，主要来源于个人面试遇到的、网络搜集（完善）、工作日常讨论等，分为以下十个部分，供大家参考。如有错误的地方，欢迎指正。有更多的面试题或面试中遇到的坑，也欢迎补充分享。希望大家都能找到满意的工作，共勉之！~
[] eg: TATA-box 则可表示为：TATAATAAT. (这里的塔塔盒是指TATAWAWN 其中W=A/T N=ATC/G)
今天遇到一个 OceanBase 数据库下 Oracle 租户的 PLSQL 分隔符问题，特来分享下。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
云直播
