默认情况下，在windows上用excel打开csv文件时，并不是按utf-8码解析的，就算代码里设置了写入字符串为utf-8字符集，也可能乱码。
Oracle字符集是AL32UTF8，查询表中的非英文字符显示正常，但是用utl_file写到CSV文件用Excel打开是乱码。
前提 ： 1数据库和表都是utf8_general_ci格式 2程序代码也是utf-8格式，且使用了mysql_query("set names utf-8"); 及 htmlentities ENT_QUOTES,'utf-8'
我们常常需要在 Python 中输出 CSV 文件，但你可能会发现，这些输出的 CSV文件，不能双击使用 Excel 打开，否则中文会变成乱码。例如下面这段代码：
之前看到ES6中对String扩展了不少新特性，字符串操作更加友好，比如"\u{1f914}"，codePointAt()，String.fromCodePoint()。其中涉及到不少字符编码的知识，为了更好理解这些新特性，本文对字符编码相关知识做一个较全面的梳理和总结。
用css绕过同源策略跨域窃取数据 序言 如果你和我一样无聊，你可能遇到过这种潜在的攻击 -》https://www.w3.org/TR/CSP2/#security-css-parsing 如果浏览器使用了一种宽松的css解析方法来渲染，攻击者可能通过插入非同源且非法的脚本来窃取用户的数据 宽松的解析 和遇到语法错误就会停止运行的JavaScript相比，css解析规则会在遇到语法错误的情况下忽略那些不合语法的部分 如何实现 2009年的时候， Chris Evans发现了一种跨域
Oracle创建数据库时指定字符集，一般不能修改，整个数据库都是一个字符集。虽然还支持指定国家字符集，用于nvarchar2类型，不过很少用到。常用的字符集：AL32UTF8和ZHS16GBK，其中AL32UTF8与UTF8几乎是等价的。一个汉字在AL32UTF8中占三个字节，而在ZHS16GBK中占用两个字节。
转载自：http://blog.csdn.net/dbzhang800/article/details/7540905
原文链接：https://blog.csdn.net/humanking7/article/details/81292013
开发中做了一个导出CSV功能，本地通过wps测试都没有问题，但是测试人员测试的时候发现用excel打开中文表头会出现乱码现象，很奇怪的现象，用nodePad工具打开看也是正常的，但是用excel打开就是中文乱码，通过查找资料了解到是因为csv文件是utf-8编码的，但是没有增加bom头，这样就会导致在window环境下一些软件会用默认编码打开文件从而导致乱码问题，本文详细介绍从前端下载、后端读写如何解决该问题。
学javascript的基础说白了就是学好ECMAScript，他是javascript的标准。
本篇包含了XSS漏洞攻击及防御详细介绍，包括漏洞基础、XSS基础、编码基础、XSS Payload、XSS攻击防御。
作 者 牛志恒，腾讯互娱开发工程师 商业转载请联系腾讯WeTest获得授权，非商业转载请注明出处。 WeTest 导读 本篇包含了XSS漏洞攻击及防御详细介绍，包括漏洞基础、XSS基础、编码基础、XSS Payload、XSS攻击防御。 第一部分：漏洞攻防基础知识 XSS属于漏洞攻防，我们要研究它就要了解这个领域的一些行话，这样才好沟通交流。同时我建立了一个简易的攻击模型用于XSS漏洞学习。 1. 漏洞术语 了解一些简单术语就好。 VUL Vulnerability漏洞，指能对系统造成损坏或能借之攻
1：最简单的方法是直接改 Session Option→选字体（新宋体）→再选Character encoding（选UTF-8） 然后再修改远程linux机器的配置 vi /etc/sysconfig/i18n 把LANG改成支持UTF-8的字符集 如：LANG=”zh_CN.UTF-8″ 2：如果再不行，可以试试这样 导出 /etc/sysconfig/i18n 原文件内容为： LANG=”zh_CN.UTF-8″ SUPPORTED=”zh_CN.UTF-8:zh_CN:zh:en_US.UTF-8:en_US:en” SYSFONT=”latarcyrheb-sun16″ 更改为： LANG=”zh_CN.GB2312″ LANGUAGE=”zh_CN.GB2312:zh_CN.GB2312:zh_CN” SUPPORTED=”zh_CN.GB2312:zh_CN:zh:en_US.UTF-8:en_US:en” SYSFONT=”latarcyrheb-sun16″ SecureCRT里中文显示乱码 打开 Options -> Session Options -> Appearance ,Character选UTF-8或OEM。 如果用了上述方法后，还是出现乱码，那有可能就是secureCRT字体设置的问题了
原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://polaris.blog.51cto.com/1146394/377468
不同的浏览器使用不同的 JavaScript 解析引擎 Chrome 浏览器 => V8 Firefox 浏览器 => OdinMonkey（奥丁猴） Safri浏览器 => JSCore IE 浏览器 => Chakra（查克拉） 其中，Chrome 浏览器的 V8 解析引擎性能最好！
以上这些问题都涉及到计算机中*础的知识点——字符集及字符编码的概念，本篇将从前端开发人员的视解，让你彻底搞清并理解这些问题的本质。
导出csv格式时其他都很正常，只有中文容易产生乱码，后来找到了添加BOM头的解决方案：
ASCII（美国信息交换标准代码）是基于拉丁字母的一套电脑编码系统。它主要用于显示现代英语，是现今最通用的单字节编码系统。
修改会受到原有数据限制，如果原有数据不能满足新的数据类型，修改不会成功，会报错，超出范围 out of range
最开始计算机只在美国用，八位的字节可以组合出256种不同状态。0-32种状态规定了特殊用途,一旦终端、打印机遇上约定好的这些字节被传过来时，就要做一些约定的动作，如：
接下来将分别介绍Unicode字符集的三种编码方式：UTF-8、UTF-16、UTF-32。这里先介绍应用最为广泛的UTF-8。
一般有设置charset基本在前端就没啥问题，问题就在于vue导出时就出现乱码了，有可能是这个，大多数网友的解决方案就是在请求里边加上参数：responseType: 'blob', // 表明返回服务器返回的数据类型，但这里我已经提前申明返回的数据是正常的，这时候又会咋样呢？
字符指类字形单位或符号，包括字母、数字、运算符号、标点符号和其他符号，以及一些功能性符号。一般来说我们称某个字符集里面的字符，叫xx字符，如ASCII字符集里面的ASCII字符，GB2312字符集里面的GB2312字符。
一位好兄弟前两天说某个老系统只能通过服务器上的sqlplus访问，所以提了几个和sqlplus相关的问题。官方或者第三方的图形化客户端，能简化我们的操作，然而不是所有的场景都可以使用。
className:返回节点样式，可以设置 className="demo1 class2"
很多时候，因为数据统计，我们需要将数据库的数据导出到Excel等文件中，以供数据人员进行查看，如果数据集不大，其实很容易；但是如果对于大数集的导出，将要考虑各种性能的问题，这里以导出数据库一百万条数据为例，导出时间不过20秒，值得学习的一种大数据导出方式。
字符编码：字符集只是规定了有哪些字符，而最终决定采用哪些字符，每一个字符用多少字节 表示等问题，则是由编码来决定的。计算机要准确的处理各种字符集文字，需要进行字符编码， 以便计算机能 够识别和存储各种文字
什么是字符集 字符集分为编码和解码两个操作(decode和encode)。 decode将字节转化为字符，是对字节的一种解释方式。 encode将字符转化为字节，是对字符的一种编码。 各种字符集 ASCII 7个字节表示一个字符。会有位缺失（一个字节里最后一个字节没有用）。能表示英文字母、换行符等常用符号 iso-8859-1 8个字节表示一个字符，表示范围包含了ASCII 中文 中华人民共和国为了应对iso-8859-1无法表示数量繁多的汉字而制定的编码规则。用两个字节表示一个字符。
将查询的数据以xls文件导出时（UTF-8编码），数据正常；但以CSV文件导出时，文件中的中文乱码，同样是UTF-8编码，改成GBK编码导出时，中文显示正常。
当一个系统需要导出动态数据时，有时候首选方案是：由服务端实时生成csv或Excel格式的文件，然后用二进制流的形式返回给前端。
源于GBK字符集和Unicode字符集之间的转换问题。Unicode和老编码体系的转化过程中，肯定有一些字，用Unicode是没法表示的，Unicode官方用了一个占位符来表示这些文字，这就是：U+FFFD REPLACEMENT CHARACTER。那么U+FFFD的UTF-8编码出来，恰好是 ‘\xef\xbf\xbd’。如果这个’\xef\xbf\xbd’，重复多次，例如 ‘\xef\xbf\xbd\xef\xbf\xbd’，然后放到GBK/CP936/GB2312/GB18030的环境中显示的话，一个汉字2个字节，最终的结果就是：锟斤拷——锟(0xEFBF)，斤（0xBDEF），拷（0xBFBD）。
UTF-16编码方式源于UCS-2(Universal Character Set coded in 2 octets、2-byte Universal Character Set)。而UCS-2，是早期遗留下来的历史产物。
Q:什么是存储引擎？ A：比如一个视频文件可以转成mp4,avi,wmv,而存储进磁盘中也会存在不同类型的文件系统中如linux中的ext3,ext4,xfs等.(直观区别就是占用系统的空间大小与清晰程度可能不一样);
Windows 早期采用多字节编码，的确容易出现乱码问题。随着 Windows 全面转向 Unicode 编码，多语言的支持得到完美解决，出现中文乱码的问题就很少出现。出现乱码问题一般是 GBK 编码的文件当做 utf8 编码打开，或者 utf8编码的文件当做 GBK 编码打开。这种情况也多出现在 Linux 和 Windows 之间交换文件。
Java内部将字符（字符类型）存储在16位UCS-2字符集中。 但外部数据源/接收器可以将字符存储在其他字符集（例如US-ASCII，ISO-8859-x，UTF-8，UTF-16等等）中，固定长度为8位或16位， 位或以1到4字节的可变长度。 [读取“字符集和编码方案”]。
对于大多数搞安全的来说，应该是能理解上面几个名次的，不过如果我说GBK ,Unicode, UTF-8, GB2312, ISO-xxxx, 二进制，八进制，十六进制 ASCII, BIG5, UTF-16,UTF-32,UTF-DOM，半角字符，全角字符 等等，这回你还能分清楚吗？
字符集是一系列字符的集合，将每个收录的字符和数字进行映射。最早的字符集是ASCII，使用一个字节进行存储字符，8位一共可以表示256个字符，而ASCII只使用了其中的128位，即0～127位，这128位里面包括了常用的英文字符以及标点符号。
有人丢给你下面这张图，如果你能清楚地说明它们之间的关系以及用途，那么你对字符编码的理解肯定过关了。
带你了解ASCII，Latin1，ANSI，Unicode，UCS-2，UCS-4，UTF-8，UTF-16，UTF-32，GB2312，GB13000，GBK，GB18030，BIG5，BMP，Code Page，BOM，MBCS，Little Endian，Big Endian，内码，外码。
在使用exp/imp导出导入，经常会碰见各种的问题，前两天某公众号发了篇《IMP-00009：异常结束导出文件解决方案》，介绍了导入出现IMP-00009错误的解决方案，讲了各种场景，可以参考。
JavaScript 是一种具有面向对象能力的、解释型的程序设计语言。更具体一点，它是基于对象和事件驱动并具有相对安全性的客户端脚本语言。
编辑手记：很多人在进行数据库导入导出操作的时候会遇到字符集的问题，今日拣选了 《循序渐进Oracle》一书中的相关章节，希望对初学Oracle的朋友有所帮助。 在传统的EXP导出文件中，记录着导出使用
http://www.eygle.com/special/NLS_CHARACTER_SET_04.htm
版权声明：本文为博主原创文章，转载请注明源地址。 https://blog.csdn.net/10km/article/details/80203286
EasyCVR平台可拓展性强、部署轻松、视频能力丰富，支持海量视频设备接入、视频汇聚与管理、转码与分发、告警上报、平台级联、智能分析等等。平台采用设备树对设备进行分组分级管理，对整合的视频监控资源的应用需求给予相应的操作权限，实现视频监控资源的最大化应用。
关于HIVE中文乱码问题的解决办法，网上有很多帖子，然而很多都是基于LINUX终端显示字符的修改，其实上对于一些条件下的HIVE中文乱码问题是无法解决的，如从CSV文件导入到HIVE中出现的中文乱码问题。
1OutputStreamWriter osw = newOutputStreamWriter(resp.getOutputStream(), "UTF-8");
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
