java protobuf 打印中文乱码问题

最新推荐文章于 2024-07-23 20:19:45 发布

原创最新推荐文章于 2024-07-23 20:19:45 发布 · 5.8k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#protobuf # java #打印中文乱码 #tostring

本文介绍了解决Protobuf对象在打印时中文显示为数字的问题，提供了使用TextFormat.PrintToUnicodeString方法来正确显示中文字符的有效方案。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

对于一个protobuf对象，通过toString方法打印出来的中文是一串数字

如果想打印出中文可通过TextFormat.TextFormat.printToUnicodeString方法实现

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

lsletter

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

ProtoBuf入门基础

宁清的博客

07-27

1593

Protocol Buffers 是 Google 的一种语言无关、平台无关、可扩展的序列化结构数据的方法，它可用于（数据）通信协议、数据存储等。 Protocol Buffers 类比于 XML，是一种灵活，高效，自动化机制的结构数据序列化方法，但是比 XML 更小、更快、更为简单。你可以定义数据的结构，然后使用特殊生成的源代码轻松的在各种数据流中使用各种语言进行编写和读取结构数据。你甚至可以更新数据结构，而不破坏由旧数据结构编译的已部署程序。

在netty项目中使用protobuf编解码(二)：netty项目中使用protobuf编解码

rain_zhao_0102的博客

03-08

551

一、配置protobuf环境支持 idea安装protobuf插件 preference -> plugins ->搜索protobuf support安装环境安装protoc编译工具 1.下载protoc： https://github.com/protocolbuffers/protobuf/releases 2.选择合适操作系统的zip包，解压后protoc就是可执行程序。...

1 条评论您还未登录，请先登录后发表或查看评论

google protobuf-中英文使用手册

09-02

protocol buffer ( 中英文使用手册) 已经检查过的了，赚点积分请见谅，评论过后积分就回来的了！

protobuffer 中文乱码

jackymin的专栏

10-26

5433

protobuffer使用参看网络文档，此处说明如何解决属性中文乱码问题 1,构建时，用utf8统一转码 CMsg msg = CMsg.CreateBuilder() .SetMsgcheck(head.ToByteString().ToStringUtf8()) .SetMsgstude...

Protobuffer 中文序列化反序列化乱码？丢失？

就是记录一下而已

04-06

8438

需要对pb数据序列化成string进行传参发现数据丢失，或者转成wstring传参。先对pb数据序列化后进行UrlEncode UrlDecode 没问题std::string strMsg; SerializePartialToString(strMsg); UrlEncode(strMsg); //....进行其他操作 UrlDecode(strMsg); ParseFromStr

java protobuf 对象 toString 打印中文八进制转义序列问题

zhangmiaoping23的专栏

04-30

5776

对于一个protobuf对象，通过toString方法打印出来的中文是一串八进制串字符串,toString内部调的是 public final String toString() { return TextFormat.printToString(this); } 如果想打印出中文可通过TextFormat.TextFormat.printToUnicodeS...

protobuf解析出错：Windows与Linux通信之string乱码

guotianqing的博客

06-09

2997

现象 Windows上程序与Linux上程序通信，具体为Windows程序读取机器上一个文件，把数据信息发送到Linxu进程。 Linxu进程负责把结构体使用protobuf编码，写入redis，然后在有人请求的时候读出来展示。问题就出在了，编码和写入都成功了，查询的时候却报pb解析失败，一时摸不到头脑。定位及解决经过跟踪和分析，结构体中有一string，当windows进程读取到的该字段为英文时，到Linux进程中显示是正常的。当该字段为中文时，Linux进程日志中显示该字段为乱码：定位是

初识ProtoBuf

GG_Bruse的博客

07-25

677

消息（message）：定义的结构化对象，可以给这个结构化对象中定义其对应的属性内容为什么要定义消息？在网络传输中，需要为传输双方定制协议。定制协议本质就是定义结构体或者结构化数据，如：tcp，udp报文就是结构化的将数据持久化存储到数据库时，会将一系列元数据统一用对象组织起来，再进行存储ProtoBuf就是以message的方式来支持定制协议字段，后期帮助形成类和方法来使用message 消息类型名 {//...//消息命名规范：驼峰命名法，首字母大写。

Java基础

HBryce24的博客

02-14

976

java基础相关的知识

基于http协议使用protobuf进行前后端交互

weixin_34060299的博客

02-15

2173

protobuf介绍由于网上关于protobuf的交互的资料比较零散，所以自己整理了一下关于protobuf前后端交互的资料，以作参考。 Google Protocol Buffers 简称 Protobuf，它提供了一种灵活、高效、自动序列化结构数据的机制，可以联想 XML，但是比 XML 更小、更快、更简单。仅需要自定义一次你所需的...

Netty中Protobuf编解码应用

08-12

NULL 博文链接：https://shihuan830619.iteye.com/blog/2265589

在windows下生成brotobuf文件到idea中中文乱码问题

fct2001140269的博客

10-31

756

在windows下生成brotobuf文件（从gbk转utc-8），在idea的utf-8环境中出现中文乱码问题；一、问题描述：protocol-buffer - protoc 指定生成java文件是GBK编码，如何指定成UTF8？ protoc 指定生成java文件是GBK编码，如何指定成UTF8,–help也没有看到设置输出编码的怎么做呢？ window下默认是gbk编码，在idea中的u...

Java中使用Protobuf中文解析出错

热门推荐

DAMN WHERE'D YOU FIND THAT

05-16

1万+

报错： com.google.protobuf.InvalidProtocolBufferException: While parsing a protocol message, the input ended unexpectedly in the middle of a field. This could mean either that the input has been truncated or that an embedded message misreported its own len

protobuffer 中文反序列失败

xuq09的专栏

07-25

1857

protobuffer序列化时内容中有中文可以成功，但是在反序列化时失败。原因： 1.序列化时中文未按国际标准UTF8 生成。解决方法：序列化时所有内容都UTF8 转换就可以了。附：宽字符与UTf8 互转： // 宽字符转UTF8 string EncodeUtf8(wstring in) { string s(in.length()*3+...

Java输出中文后出现乱码解决方法

m0_71757914的博客

07-23

650

ANSI编码:不同的国家和地区制定了不同的标准，由此产生了各自的编码标准，这些使用多个字节来代表一个字符的各种汉字延伸编码方式称为 ANSI 编码，在简体中文Windows操作系统中，ANSI 编码代表 GB2312编码。在cmd使用javac命令的时候添加一个选项及参数-encoding utf-8。java编译默认读取格式：跟随操作系统的默认编码（Windows为GBK）解决方法：修改保存格式为GBK/修改读取格式为UTF-8（任意一种即可）乱码问题是保存的格式与读取的格式不一致而产生的问题。

java编码与protobuf使用

rainforc

08-15

691

1、为什么需要编码计算机中存储信息的最小单元是一个字节即 8 个 bit，所以能表示的字符范围是 0~255 个；人类要表示的符号太多，无法用一个字节来完全表示；要解决这个矛盾必须需要一个新的数据结构 char，从 char 到 byte 必须编码。 2、各种常见编码的简介 ASCII 码学过计算机的人都知道 ASCII 码，总共有 128 个，用一个字节的低 7 位表...

Protobuf3语言指南_protobuf 3语言指南(中文版)

2301_82244608的博客

04-12

444

在上面的例子中，Result消息类型与SearchResponse是定义在同一文件中的。如果想要使用的消息类型已经在其他.proto文件中已经定义过了呢？你可以通过导入（importing）其他.proto文件中的定义来使用它们。

Protobuf编码指南

kevin_tech的博客，微信搜「网管叨bi叨」

09-29

459

这个文档会介绍protocol buffer的二进制有线格式(binary wire format)。你并不是需要理解这些后才能在应用里使用protocol buffer，但是当你想知道不同的protocol buffer格式是如何影响编码后的消息体的体积时，这些知识会非常有用。一个简单的消息假设有一个非常简单的消息定义： m...

protobuf编码

weixin_30868855的博客

06-28

168

proto2 Protocol Buffers 是一种轻便高效的结构化数据存储格式，可以用于结构化数据序列化，适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。字段规则 required: 字段必须存在 optional: 字段没有或有一个 repeated: 字段重复，0个或多个...

java.lang.IllegalArgumentException: MIME type may not contain reserved characters

最新发布

03-28

<think>好的，我现在需要解决用户提出的关于Java中的`java.lang.IllegalArgumentException: MIME type may not contain reserved characters`异常的问题。首先，我要理解这个异常的含义以及它通常在什么情况下被抛出。用户可能是在使用某些HTTP客户端库，比如Apache HttpClient，或者在处理MIME类型时遇到了这个问题。首先，我应该回顾MIME类型的基本规则。MIME类型由类型和子类型组成，例如`text/plain`，中间用斜杠分隔。根据RFC标准，MIME类型中不允许包含空格、特殊字符如引号、括号等保留字符。如果用户提供的MIME类型字符串中包含这些非法字符，就会触发这个异常。接下来，我需要考虑用户可能遇到的具体场景。例如，在设置HTTP请求的Content-Type头时，或者在创建某种实体（如StringEntity）时指定了不正确的MIME类型。常见的错误可能包括拼写错误，错误地添加了字符集参数而没有正确格式化，或者在MIME类型中误用了不允许的字符。然后，我需要收集可能导致此异常的具体原因。比如： 1. MIME类型字符串中有空格，例如误写成`text/plain charset=UTF-8`而不是正确的`text/plain; charset=UTF-8`。 2. 使用了特殊字符，如引号、括号、逗号等。 3. 格式错误，比如缺少斜杠，或者类型和子类型之间用了其他符号。 4. 在MIME类型中错误地添加了注释或其他非标准内容。接下来，我需要提供解决方案和示例代码。例如，如何正确构造MIME类型字符串，如何添加参数如charset，以及如何避免非法字符。同时，可能需要指出使用标准库中的ContentType类来帮助正确构建MIME类型，减少手动构造时的错误。另外，用户可能需要了解如何调试和验证他们当前的MIME类型是否符合规范。例如，打印出MIME类型字符串，检查是否有非法字符，或者使用正则表达式进行验证。最后，我应该考虑用户可能的后续问题，比如如何正确处理带参数的MIME类型，或者在多部分表单上传时的正确格式，确保用户能够全面理解并避免类似的错误。</think>在处理Java网络编程时遇到`java.lang.IllegalArgumentException: MIME type may not contain reserved characters`异常，通常与MIME类型格式错误相关。以下是详细解析和解决方案： --- ### 一、异常原因分析该异常表明**MIME类型字符串包含非法字符**，主要发生在以下场景： 1. **HTTP请求头设置**：`Content-Type`或`Accept`头的值包含保留字符 2. **文件类型操作**：创建`MimeType`对象或处理文件上传时格式错误 3. **参数拼接错误**：在MIME类型中错误添加参数（如`charset`） --- ### 二、MIME类型规范要点根据RFC 2045标准： - **基础格式**：`type/subtype` - **合法字符**：ASCII字母、数字及`!`, `#`, `$`, `&`, `^`, `_`, `-`, `+`等 - **禁止字符**：空格、`()`, `<>`, `@`, `,`, `;`, `:`, `"`, `/`, `?`, `=`等 --- ### 三、典型错误场景及修复 #### 场景1：直接拼接参数导致空格 ```java // 错误写法（空格非法） String mime = "text/plain charset=UTF-8"; // 正确写法（使用分号分隔参数） String mime = "text/plain; charset=UTF-8"; ``` #### 场景2：包含非法符号 ```java // 错误写法（包含括号） String mime = "application/vnd.ms-excel(xlsx)"; // 正确写法 String mime = "application/vnd.openxmlformats-officedocument.spreadsheetml.sheet"; ``` #### 场景3：参数格式错误 ```java // 错误写法（使用逗号分隔参数） String mime = "multipart/form-data, boundary=abc123"; // 正确写法（使用分号） String mime = "multipart/form-data; boundary=abc123"; ``` --- ### 四、推荐解决方案 #### 方案1：使用ContentType工具类（Apache HttpClient） ```java // 自动处理参数编码 ContentType contentType = ContentType.create("text/html", "UTF-8"); StringEntity entity = new StringEntity("<html>内容</html>", contentType); HttpPost post = new HttpPost(url); post.setEntity(entity); ``` #### 方案2：参数标准化处理 ```java // 自动验证MIME类型 MimeType mime = new MimeType("application", "json"); mime.setParameter("charset", "UTF-8"); // 自动处理特殊字符 // 获取规范化的字符串 String validMimeType = mime.toString(); // 输出：application/json; charset=UTF-8 ``` #### 方案3：正则表达式验证 ```java public static boolean isValidMimeType(String mime) { String pattern = "^[\\w-]+/[\\w-]+(;[\\w-]+=([\\w-]+|\\\"[^\\\"]*\\\"))?$"; return mime.matches(pattern); } // 使用示例 if (!isValidMimeType(inputMime)) { throw new IllegalArgumentException("非法MIME类型格式"); } ``` --- ### 五、调试技巧 1. **十六进制检查**： ```java // 打印字符的ASCII码 for (char c : mimeType.toCharArray()) { System.out.printf("%c -> 0x%02X\n", c, (int)c); } ``` 2. **RFC规范验证**： ```java try { new MimeType(mimeString); } catch (InvalidMimeTypeException e) { System.out.println("错误定位：" + e.getMessage()); } ``` 3. **边界值测试**： ```java // 测试特殊边界案例 testMime("application/atom+xml"); // 合法 testMime("text/plain; version=1.0"); // 合法 testMime("image/svg+xml; param=<>"); // 非法 ``` --- ### 六、高级应用注意事项 1. **多部分表单处理**： ```java // 正确设置multipart边界 MultipartEntityBuilder.create() .setBoundary("----WebKitFormBoundary7MA4YWxkTrZu0gW") .addPart("file", new FileBody(file, ContentType.DEFAULT_BINARY)) .build(); ``` 2. **自定义MIME类型注册**： ```java // 注册非标准MIME类型 MimeTypeRegistry.registerMimeType("application/x-protobuf", "proto"); ``` 3. **国际化字符处理**： ```java // 非ASCII参数需要编码 String encodedValue = URLEncoder.encode("中文参数", StandardCharsets.UTF_8); String mime = "text/plain; desc=" + encodedValue; ``` --- ### 七、常见问题排查表 | 现象 | 可能原因 | 解决方案 | |------|----------|----------| | 报错包含空格 | 参数分隔使用空格而非分号 | 替换空格为`;` | | 中文乱码 | 未进行URL编码 | 使用`URLEncoder.encode()` | | 边界符错误 | multipart边界包含非法字符 | 使用字母数字组合 | | 版本号错误 | 使用`v1.0`而非`version=1.0` | 遵循`key=value`格式 | 通过以上方法可有效解决MIME类型相关的非法参数异常问题。