csv 用excel默认打开时,中文显示乱码问题/BOM(Bype Order Mark)

csv文件加bom python_CSV读取与写入的常见问题(空行、BOM、r/w/a模式、指针) import csv1. 多余的空行原因python正常写入文件的时候,每行的结束默认添加’\n’,即0x0D,而writerow命令的结束会再增加一个0x0D0A,因此对于windows系统来说,就是两行。采用’ b’参数,用二进制进行文件写入,系统默认是不添加0x0D的(故python2.x中的解决方式是使用“wb模式打开文件”,该方法python3.x中已不适用,会报错如下)。TypeErr... 阅读详情

从数据库extract data 保存为csv 文本文件,encoding ='UTF8'

 

用excel默认打开时,中文显示乱码。

 

1.选择合适的excel版本,excel 2003中文版(这个没有试过)

2.用editplus,打开,以Unicode 另存为 。 然后用excel 打开,这时,能看到中文,但是都在一个列,可以在使用 data-->text to column 分列。

3.在写csv 的时候,自己写csv 的 'UTF8'格式的开头,这个也没有试过,不过道理上应该可以 :)

4.参考:


http://www.java2000.net/viewthread.jsp?tid=5380
http://www.java2000.net/viewthread.jsp?tid=7378

 

 

======================上面两篇参考文章如下 =================

<!-- /* Font Definitions */ @font-face {font-family:SimSun; panose-1:2 1 6 0 3 1 1 1 1 1; mso-font-alt:宋体; mso-font-charset:134; mso-generic-font-family:auto; mso-font-pitch:variable; mso-font-signature:3 135135232 16 0 262145 0;} @font-face {font-family:"/@SimSun"; panose-1:2 1 6 0 3 1 1 1 1 1; mso-font-charset:134; mso-generic-font-family:auto; mso-font-pitch:variable; mso-font-signature:3 135135232 16 0 262145 0;} /* Style Definitions */ p.MsoNormal, li.MsoNormal, div.MsoNormal {mso-style-parent:""; margin:0in; margin-bottom:.0001pt; mso-pagination:widow-orphan; font-size:12.0pt; font-family:"Times New Roman"; mso-fareast-font-family:SimSun;} @page Section1 {size:8.5in 11.0in; margin:1.0in 1.25in 1.0in 1.25in; mso-header-margin:.5in; mso-footer-margin:.5in; mso-paper-source:0;} div.Section1 {page:Section1;} -->

utf8文件的标识字符

 

EF BB BF

Unicode签名 BOM(Byte Order Mark)

 

引用: http://blog.csdn.net/thimin/archive/2007/08/03/1724393.aspx

 

近日在调测一个 UTF8编码的中文 Zen Cart网站时遇到一件怪事,网页显示文字正常,用 ie的察看源文件(记事本打开)却发现乱码, firefox没有这个问题。经在网上多方查证和多次测试,解决了这个问题,其实是 UTF-8文件的 Unicode签名 BOM(Byte Order Mark)问题。

 

BOM(Byte Order Mark),是 UTF编码方案里用于标识编码的标准标记,在 UTF-16里本来是 FF FE,变成 UTF-8就成了 EF BB BF。这个标记是可选的,因为 UTF8字节没有顺序,所以它可以被用来检测一个字节流是否是 UTF-8编码的。微软做这种检测,但有些软件不做这种检测,而把它当作正常字符处理。

 

微软在自己的 UTF-8格式的文本文件之前加上了 EF BB BF三个字节 , windows上面的 notepad等程序就是根据这三个字节来确定一个文本文件是 ASCII的还是 UTF-8的 , 然而这个只是微软暗自作的标记 , 其它平台上并没有对 UTF-8文本文件做个这样的标记。

 

也就是说一个 UTF-8文件可能有 BOM,也可能没有 BOM,那么怎么区分呢?三种方法。 1,用 UltraEdit-32打开文件,切换到十六进制编辑模式,察看文件头部是否有 EF BB BF。 2,用 Dreamweaver打开,察看页面属性,看“包括 Unicode签名 BOM”前面是否有个勾。 3,用 Windows的记事本打开,选择 “另存为”,看文件的默认编码是 UTF-8还是 ANSI,如果是 ANSI则不带 BOM。

 

我找到 Zen Cart的模版文件中的 html_header.php,发现文件果然不带 BOM,用 UltraEdit-32另存为的方式加上 BOM后,再上传 html_header.php,一切正常。

 

注意用 Convertz把 gb2312文件转换成 UTF-8文件时,默认设置是不带 BOM的。不带 BOM可能出现上述乱码问题,但是带 BOM,对于 php的 include文件要小心,会在 php字节流前面多出 EF BB BF,提前输出到显示器有可能会带来程序错误。一个解决方案是凡是被 include的文件都保存为 ANSI,主文件可以是 UTF-8。要想把一个文件去掉 BOM,使用 UlterEdit打开 , 切换到十六进制编辑模式,把最前面三个字节 (就是那该死的 EF BB BF)替换为 20,保存(注意关闭保存时自动备份的功能),再切换到默认编辑模式,把最前面的三个空格去掉就可以了。

 

另外还学到一些编码的小知识:所谓的 unicode保存的文件实际上是 utf-16,只不过恰好跟 unicode的码相同而已 ,但在概念上 unicode与 utf是两回事, unicode是内存编码表示方案,而 utf是如何保存和传输 unicode的方案。 utf-16还分高位在前 (LE)和高位在后 (BE)两种。官方的 utf编码还有 utf-32,也分 LE和 BE。非 unicode官方的 utf编码还有 utf-7,主要用于邮件传输。 utf-8的单字节部分是和 iso-8859-1兼容的,这主要是一些旧的系统和库函数不能正确处理 utf-16而被迫出来的,而且对英语字符来说,也节省保存的文件空间(以非英语字符浪费空间为代价)。在 iso-8859-1的时候, utf8和 iso-8859-1都是用一个字节表示的,当表示其它字符的时候, utf-8会使用两个或三个字节。

 

 ----------------------------------------------------------------------------------------------------------------

 

工作需要必须创建 UTF-16格式的文件 .这几天在网络上找 ,似乎没有此类话题 ,无论是国外还是国内 .

代码 :

OutputStreamWriter fos = new OutputStreamWriter(new FileOutputStream(new File("c://2.csv")), "UTF-16");

fos.write("你好 ");

fos.flush();

fos.close();

 

生成文件之后 ,我在 windows平台打开 .使用 editeplus是乱码 .使用记事本打开不乱码 ,保存时察看文件编码确是 unicode big endian. 使用写字板打开时乱码 . 使用 excel打开仍然乱码 .

 

我不过 ,使用下面代码 ,就可以顺利创建 UTF-8的文件 .

OutputStreamWriter fos = new OutputStreamWriter(new FileOutputStream(new File("c://2.csv")), "UTF-8");

fos.write("你好 ");

fos.flush();

fos.close();

 

哪位碰到过这个问题 .帮忙看看

 

 

答:一个简单的问题,楼主怎么弄得这么复杂?楼主的问题是:用 UTF-16格式保存汉字,要求在 WINDOW平台使用:写字板、 EXCEL、 WORD能正常打开且不乱码(尤其是用 EXCEL能打开,用于导入 .csv文件)。很简单啊,用我的代码,保证你 100%成功。

查看复制到剪切板打印

 

   1. OutputStreamWriter fos = new OutputStreamWriter( 

   2.                 new FileOutputStream(new File("c://2.csv")), "UTF-16LE");  

   3. fos.write(0xFEFF);          

   4. fos.write("你好 ");  

   5. fos.flush();  

   6. fos.close(); 

 

OutputStreamWriter fos = new OutputStreamWriter(

                new FileOutputStream(new File("c://2.csv")), "UTF-16LE");

fos.write(0xFEFF);       

fos.write("你好 ");

fos.flush();

fos.close();

 

A:

提示楼主,写一个编码类型的几个字节到文件里,这样虽然能在 Windows下面的某些程序看到,但你的程序下次处理这个程序时,一定要注意这个问题。

前几个字节是有特殊意义的。

 

下面是部分 BOM的介绍

 

在 UCS 编码中有一个叫做 "ZERO WIDTH NO-BREAK SPACE"的字符,它的编码是 FEFF。而 FFFE在 UCS中是不存在的字符,所以不应该出现在实际传输中。 UCS规范建议我们在传输字节流前,先传输字符 "ZERO WIDTH NO-BREAK SPACE"。这样如果接收者收到 FEFF,就表明这个字节流是 Big-Endian的;如果收到 FFFE,就表明这个字节流是 Little- Endian的。因此字符 "ZERO WIDTH NO-BREAK SPACE"又被称作 BOM。

UTF-8不需要 BOM来表明字节顺序,但可以用 BOM来表明编码方式。字符 "ZERO WIDTH NO-BREAK SPACE"的 UTF-8编码是 EF BB BF。所以如果接收者收到以 EF BB BF开头的字节流,就知道这是 UTF-8编码了。

Windows就是使用 BOM来标记文本文件的编码方式的。

 

个人并不建议这样做,因为后患无穷。

 

 

CSV文件中的中文乱码--UTF-8 with BOM BOM(Byte Order Mark,字节顺序标记) 是位于文件开头的特殊标记,用于标识文本文件的编码方式和字节顺序(仅对多字节编码如UTF-16/UTF-32有意义)。 阅读详情

相关推荐

盘点CSV文件在Excel中打开后乱码问题的两种处理方法

CSV文件乱码问题主要表现为在Excel中打开文件后,原本应该显示正常字符的地方出现了乱码或特殊符号。这可能是由于CSV文件的编码格式与Excel默认的编码格式不一致,或者文件在传输过程中损坏导致的。为了解决这个问题,我们可以采取修改文件编码格式或利用文本编辑器进行预处理的方法。

这家伙很懒,什么都没有留下 2万+

CSV用Excel打开乱码

CSV用Excel打开乱码 CSV通常都是纯文本文件,CSV格式是分隔的数据格式。 使用EXCEL打开出现乱码的原因: 文件本身就损坏。 文件编码不对。 原因2解决操作: 简体中文系统的环境下,EXCEL打开的CSV文件默认是ANSI编码,如果CSV文件的编码方式为utf-8、Unicode等编码可能就会出现文件乱码的情况。 使用记事本打开CSV文件。点击菜单:文件-另存为,编码方式选择ANSI。保存完毕后,再用EXCEL打开这个文件就不会出现乱码的情况。 ......

weixin_44655383的博客 1万+

CSV文件乱码的原因及解决方案详解!

了解了原因,接下来我要向大家介绍几种解决CSV文件乱码的方法。我会详细说明每种方法的操作步骤,以及它们的优缺点,让大家可以根据自己的情况选择最适合的方案。 方案一:文本乱码转码助手 这是我强烈推荐的一款工具,特别适合不太懂技术的朋友使用。它由我本人开发,界面直观,操作简单。

m0_56280293的博客 1万+

excel打开csv乱码解决------------为什么pycharm里面csv不乱码,excel里面却乱码了

♈问题简述 我用爬虫爬取了一些需要的数据,,需要在Excel中处理并打印,在pycharm中是可以正常打开,无乱码情况。但是我直接用Excel打开这个CSV文件却发现,文件中的所有中文字符都变成了乱码,经过自己的尝试,找到了好几种方法,这里来详细讲解最简单的一种方法。 ♈问题起因 为什么用excel打开utf-8存储方式的文件会出现乱码呢?因为excel打开文件时默认使用unicode的编码方式,编码的不匹配导致了乱码情况的产生。 ♈问题展示 想要解决这个问题其实非常的简单。下面就来详细的说一下问题的

qq_46906413的博客 1万+

单机多环境部署apollo 2.3.0

理解apollo的整体架构后,对比nacos配置中心功能点,其设计的复杂度以及完整度相较nacos而言更为丰富 对于不同的环境,例如 FAT, PRO 在部署时进程已经完全物理隔离,并且每个环境config/adminservice依赖的数据也完全物理隔离(连接不同的db),在数据隔离与安全方面做的很完善,但同时也提升了架构的复杂度 而 portal 可以管理多个环境,单节点部署虽然有单点问题,但并不会影响业务从configservice读取配置, 挂掉只要重启就可以,只是在

Life is a starting point everywhere 1303

雷达杂波的基础知识

例如工作在海上的机载雷达,航行在海上的船用雷达,它们都不想要海杂波,会影响它们对小目标的检测,从而以为“漏掉”海面飞行的巡航导弹而被击毁。海杂波的反射系数是非常复杂的,影响的因素很多,除了和雷达参数有关,显然还和海况息息相关,经验模型经常将反射系数表示成海况的函数,在不同条件和不同模型的情况下,反射系数的值不同。说到“杂波”,你可能想到的就是如何去抑制它,去减少它在雷达回波中的分量,在很多情况是这样的。云雨的反射对飞机雷达来说是不希望的,但确是气象雷达所利用的,可以用来测量降雨率,提升天气预报的准确性。

qq_43416206的博客 2140

1分钟解决Excel打开CSV文件出现乱码问题

CSV 文件有多种编码格式,如 UTF - 8、UTF - 16、ANSI 等。如果,而打开,就可能出现乱码。例如,许多从网络应用程序或非 Windows 系统生成的 CSV 文件可能采用 UTF - 8 编码。

虚构规律,寰宇笑谈 2万+

光流法实战:如何用OpenCV的Farneback算法实现图像对齐(附调参技巧)

本文详细介绍了如何使用OpenCV的Farneback稠密光流算法实现图像对齐,包括核心原理、参数调优和工程实现。通过实战代码和参数优化策略,帮助开发者解决动态场景中的图像对齐问题,提升多帧融合和视频处理的效果。

weixin_29266007的博客 294

Csv 之 简单解决使用 Excel 打开 csv 出现中文乱码现象

Csv开发的一些知识整理,方便后期遇到类似的问题,能够及时查阅使用。本节介绍,在导出的csv文件中,使用Excel打开csv文件,中文显示成乱码现象的简单处理,欢迎指出,或者你有更好的方法,欢迎留言。win10。...

仙魁XAN 1万+

结合 Conda 手动安装 RepeatMasker

RepeatMasker 是一个广泛使用的生物信息学工具,用于识别和屏蔽(mask)基因组序列中的 重复序列(repeats) 。在使用过程中需要调用重复序列数据库(Repbase 和 Dfam),如果使用Conda安装的话会出现许多问题,因此推荐手动安装。在此记录我手动安装RepeatMasker的流程,希望对各位同学有所帮助。

m0_65437087的博客 2538

DeepLabv3+改进68:全网首发-添加DBlock模块 |高效且鲁棒的多任务低光图像修复神经网络

本文提出了一种高效鲁棒的多任务低光图像修复神经网络DarkIR,针对夜间或昏暗条件下图像存在的噪点、光线不足和模糊问题。不同于现有方法分别处理去模糊和低光增强任务,该模型采用新的注意力机制增强CNN感受野,在降低计算成本的同时,在LOL-Blur、LOLv2和Real-LOLBlur数据集上取得最优结果,并能良好泛化到真实夜间图像。

AIcurator的博客 326

什么是带bom的csv文件,以及怎么去掉bom,形成一个新的文件

用于指示文本的字节顺序和编码类型。BOM 通常用于 UTF-8 编码的文件,尤其是从某些文本编辑器或工具生成的文件。带 BOM (Byte Order Mark) 的 CSV 文件是在文件开头包含一个特殊的标记。文件,去掉 BOM 并生成一个名为。新文件将不包含 BOM。

keyboard专栏 1969

130、NPU的仿真测试:使用Gem5进行全系统仿真

这篇文章摘要(149字): 本文分享了使用Gem5全系统仿真器验证NPU设计的实践经验。作者通过搭建自定义NPU模型并集成到Gem5系统中,实现了CPU-NPU-内存协同仿真。关键点包括:1) 使用SimObject机制构建可配置的NPU模型;2) 合理配置IO和内存总线避免访问冲突;3) 开发Linux驱动实现CPU与NPU通信;4) 利用Gem5调试功能监控内部状态。相比RTL仿真和FPGA验证,该方法能快速验证微架构设计并定位系统级问题,有效减少了流片风险。文章特别强调了时钟域配置、总线仲裁、对齐访问

m0_50546716的博客 122

CSV Excel乱码问题 和 BOM标记

CSV Excel乱码问题 和 BOM标记

26857259 1397

基于STM32设计的数字电子秤

当前项目是采用采用STM32+称重模块+OLED实现了简单的电子秤项目,称重模块上采用24位的ADC芯片,精度较高。实现了称重,校准、去皮等功能。

1万+

AD9361功能介绍和使用

AD9361使用分数分频锁相环(PLL)来产生发射机和接收机本地振荡器(LO)频率和BB PLL。BB PLL 可用于数据转换、数字滤波器和 |/O 端口。PLL的参考时钟可以由外部振荡器或外部晶体(XO)和数字可编程片内可变电容提供,电容微调产生参考时钟频率,XO和微调电容的组合统称为DCXO。有多个天线输入的分集系统。接收链数据首先经过低噪声放大器(LNA),然后是同相(1)和正交(Q)放大器,混频器和频带整形滤波器,可将接收到的信号下变频为基带以进行数字化。时分双工(TDD)和频分双工(FDD)。。。

wangjie36的博客 1万+

【解决 Excel 打开 UTF-8 编码 CSV 文件乱码的 BUG 】

直接用 Excel 打开 UTF-8 编码的 CSV 文件会导致汉字部分出现乱码。原因是 Excel 以 ANSI 格式打开,不会做编码识别。打开 UTF-8 编码的 CSV 文件的方法:打开 Excel执行“数据”->“自文本”选择 CSV 文件,出现文本导入向导选择“分隔符号”,下一步勾选“逗号”,去掉“ Tab 键”,下一步,完成6)在“导入数据”对话框里,直接点确定7)保存完毕后,再用EXCEL打开这个文件就不会出现乱码的情况。

分享关于数据的知识。 2万+

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

Excel 打开CSV打开乱码的处理方法

在日常办公中需要打开csv文件,但是有时用excel打开下载的csv文件发现中文字符是乱码,这时候该怎么办呢,本文将分享经验,如何解决csv打开中文乱码的问题。 1.新建空白的excel文件,选择“数据—从文本/CSV"选项卡; 2.选择要导入的数据,并选择”导入“选项; 3.进入编辑页面 ,可以看到中午全部为乱码状态; 4.选择”文件原始格式“下拉菜单,在下拉菜单内选择第一项”无“; 5.其他选项无需调整,点击右下方”加载“按钮,可以发现中文字体均可以正常显示。 等待 数据导入 完成 即可正常

猫头虎技术团队:授渔优于赠鱼,兴趣引领智慧,探索之乐尤显珍贵。商务合作+:Libin9iOak ,万粉变现+:CSDNWF,猫头虎承诺每年免费为100名C站创作者做账号流量诊断服务!全网搜:猫头虎技术团队,点击文章底部名片或直接私信我一切皆可谈,快找虎哥! 2万+

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

Excel打开CSV乱码怎么办?两种有效处理方法分享

在数据处理和分析的过程中,CSV文件因其简单、通用的格式而被广泛使用。然而,有时在使用Excel打开CSV文件时,会遇到中文乱码的问题,这不仅影响了数据的可读性,还可能对后续的数据分析造成困扰。本文将介绍两种有效的方法,帮助你解决Excel打开CSV文件乱码的问题。

Yori_22的博客 2950

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

Excel 打开 UTF-8 编码 CSV 文件乱码的解决办法

用 Excel 打开 UTF-8 编码的 CSV 文件会导致汉字部分出现乱码。原因是 Excel 默认以 ANSI 格式打开,不会做编码识别。打开 UTF-8 编码的 CSV 文件的方法:1) 打开 Excel 2) 执行“数据”-&gt;“自文本”3) 选择 CSV 文件,出现文本导入向导(这里以文本方式打开可以正常识别UTF-8编码,因而不会出现乱码)4) 选择“分隔符号”,下一步5) 勾选“...

琴怀诗韵 1万+

写入到csv中的中文用excel打开时显示乱码,怎么解决?

推荐方法:使用 UTF-8 带 BOM 编码()是最简单且有效的方法,可以确保 Excel 正确显示中文字符。其他方法:如果无法修改代码,可以在 Excel 中手动指定编码,或使用其他工具调整文件编码。

专注最新最热的AI知识学习,以实战方式总结心得。 2955

excel打开csv中文乱码

excel打开csv中文乱码问题

weixin_39925939的博客 2112

BOM及CSV/Excel乱码及从代码上根源解决问题

BOM,Byte Order Mark; 打开CSV、Excel文件中文乱码,解决方法; 程序生成CSV、Excel文件乱码解决方法;

lonelymanontheway的博客 7311

csv文件用excel打开出现部分数据乱码现象

CSV文件常用UTF-8编码,而Excel默认使用ANSI编码(如GBK)打开文件,导致中文等非ASCII字符显示乱码。5.将原始文件格式改为UTF-8,分隔符设为逗号 点击加载。6.数据正确导出 无乱码。1.新建excel文件。3.点击从文本/csv。4.选择csv文件导入。

m0_74210648的博客 1687

解决Excel打开CSV文件中文乱码问题

CSV打开乱码的处理方法方法一:Excel的数据导入功能方法二 CSV打开乱码的处理方法 CSV是用UTF-8编码的,而EXCEL是ANSI编码,由于编码方式不一致导致出现乱码。明白了原因之后,我们只需要把CSV文件的编码方式修改成与Excel相同的编码方式就可以了。那怎么修改? 方法一:Excel的数据导入功能 直接用Excel打开下载的CSV文件,会看到汉字乱码,数字显示正常。如下图所示现象。 请先正常打开一份空白的excel文件,将鼠标定位在第一行第一列,这边鼠标定位的位置将决定后续打开的cs

haoweixl的博客 24万+
上一篇: linux下查看及修改ip
下一篇: Loading Java Classes
dingxy
博客等级 码龄19年 88粉丝 460原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值