注意不可见的字符！

最新推荐文章于 2024-06-20 21:02:49 发布

原创最新推荐文章于 2024-06-20 21:02:49 发布 · 967 阅读

0 ·

CC 4.0 BY-SA版权

javascript 专栏收录该内容

125 篇文章

订阅专栏

在对手工输入的文本进行处理时，请务必注意控制符，空格等不可见的字符。

http://blog.youkuaiyun.com/

与

http://blog.youkuaiyun.com/

有什么区别呢？

视觉上是没有。

但看编码时，可能其中一个的后面有多个空格，而另一个没有。

今天有此教训。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

FuDesign2008

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Pwn python发送不可见字符串——小端序

MrTreebook的博客

04-04

1485

小端序，ctf，pwn

不可见字符的坑

东京易冷

06-19

1万+

不知道用户从哪里copy来的不可见字符,通过前端表单传给后端保存在数据库中,用户再次查看该数据时,前端无法解析后端返回的json字符串,后来通过数据库发现该数据中间出现了一个换行符号/u2028，带有这个字符的json通过js是不能解析的。这个字符属于不可见字符，很难发现。常见不可见字符 |Unicode|字符值|转义序列|含义|类别| |\u0008|\b|Backspace||| ...

1 条评论您还未登录，请先登录后发表或查看评论

java程序中处理一个包含诡异的不可见的字符。

04-23

NULL 博文链接：https://ruyi574812039.iteye.com/blog/2257259

不可见字符分析

明明

02-05

3874

ASCII中存在一些不可见字符，在用户使用网站文本框输入的时候或者使用文件上传内容的时候可能包含这些不可见字符，对于后端程序不友好进入数据库后也非常难处理。不可见字符范围0-32，127 。32代表空格，127代表删除命令。如果对字符串使用trim方法，方法源码是对字符串前后包含的小于等于32的字符进行去除。但是没有去除字符串中的不可见字符。所以需要自己编写代码进行处理。代码如下： public static String trim(String val) { String result ...

可见字符&不可见字符

Miss_Monster的博客

01-05

2万+

国际上普遍采用ASCII编码（American Standard Code for Information Interchange，美国信息交换标准代码）作为通用的字符编码。在ASCII码表中，算上空格, 从32到126共95个是可见字符，不算上空格则为94个。也叫打印字符，即可以被直接打印出来的字符。剩下的则是不可见字符，即不可以被直接打印出来。 ...

字符串中的不可见字符

dubaoti7942的博客

08-09

6638

最近用datax导入数据到pipeline的时候，碰到一个报脏数据的错误，检查后发现字符串包含\u0000和\u007f，就以为是这两个unicode字符搞的鬼，写了正则 unicode.replaceAll("[\\s+[\\u007f]\\s+]", "") 来匹配，还是会报脏数据，原始的字符串是下面这个样子的： 12345678 \u0000 \u007f  这里能看到方框，在...

Python中的诡异事：不可见字符！

夏小悠的博客

08-12

955

今天分享一件很诡异的事情，我写代码的时候遇到了不可见的字符！！！

数据指纹技术研究成果 0宽度字符技术研究成果零宽度字符技术研究成果不可见字符技术研究成果

04-08

零宽度字符作为一种特殊的Unicode字符，其字节宽度为0，在多数应用场景下是不可见的。这类字符主要包括： - **零宽度空格符**（U+200B）：用于辅助长单词的换行分隔。 - **零宽度非断空格符**（U+FEFF）：用于防止...

通过使用不可见的ASCII字符来确保基于文本的信息传输的安全性

03-28

与传统的文本隐写方法相比，例如隐写术中常见的利用空格或者替换特定字符的方式，利用不可见ASCII字符的方法能够在不引起任何视觉上的注意的情况下，更深层次地隐藏信息。该研究还着重强调了信息隐藏技术在通信...

python去除不可见字符 x00.docx

03-13

### Python去除不可见字符\x00的解决方案 #### 背景与问题描述在处理字符串时，我们经常需要对字符串进行分割、清洗等操作。然而，在某些情况下，字符串中可能会包含一些不可见字符，例如`\x00`（空字符），这会给...

C#实现简单过滤非法字符实例

09-03

这个方法的核心在于使用`StringBuilder`来构建新的字符串，而不是直接修改原始字符串，这是因为在C#中字符串是不可变的，频繁修改会导致性能下降。通过`for`循环遍历字符串中的每个字符，使用`switch`语句根据不同的...

常用不可见字符

zhoulixin8的专栏

05-30

5247

Vim里常见的几个不可见字符： ^@ = 0x00 Null值 ^I = 0x09 水平制表 ^J = 0x0A 换行 ^M = 0x0D 回车

ascii控制字符（不可见字符）和可打印字符（可见字符）------浪费15分钟的一次经历

热门推荐

认知行动坚持

06-09

5万+

系统工作得好好的，但某次却异常，花了十多分钟，才定位出是加载文件中包含了不可见字符导致的。最后解决方法是：增强系统的兼容性。今天我们来聊聊ascii控制字符（不可见字符）和可打印字符（可见字符），以后碰到类似问题就很敏感了。网上有人说，可以用printf来判断字符是否是可打印字符，这不是扯淡么？我在VC++6.0下试了一下，...

行走在阳光下的那些不可见字符

终极冥帝

12-18

581

行走在阳光下的那些不可见字符幻想小说网 www.7wx.org 假设我们已经知道Unicode字符集，如果不清楚也可阅读本文，然后等待下一篇主要介绍Unicode的文章。背景今天我们主要来聊聊这些行走在阳光下的不可见字符。不可见字符在计算机科学和通信学中被称为控制字符或非打印字符，是字符集中的一个码位（code point），不是一个书面符号，也就是在一般的书面呈现环境中...

又是文件中的不可见字符问题

认知行动坚持

07-10

7991

不久前，需要在配置文件中增加一项配置，把默认的error级别的日志开关换为debug级别的日志开关，于是就增加了该项。然后，这并没有起到卵用，明明是加这个配置啊，明明是这个值啊，为什么不生效呢？难道系统读的不是这个配置文件？正纳闷时，某哥提醒：可能是添加处格式不对，引入了一些字符，系统读取不了。我验证了一把，果然如此。呵呵哒，文件中的不可见字符

眼见不一定为实之MySQL中的不可见字符

夜郎King的博客

06-20

9208

本文以数据库中不可见字符处理为例，讲解在MySQL中，为什么会有这种“看”起来一致，但实际上不一样的问题，通过现象找本质，通过一步一步的排查，找到问题的根源，最后在寻根溯源后，找到解决的办法

js正则校验特殊的不可见字符

Charonmomo的博客

05-25

2640

表单的输入框，用户可能从Excel或者其他地方直接复制粘贴，这时候提交到后端会导致获取的用户输入中包含一些特殊的不可见字符，比如tab键或者制表符等，这时需要在前端对用户输入做一些检验，检查是否存在不可见字符。个字符（最后一个字符）都是不可见的（无法显示），但是它们都具有一些特殊功能，所以称为控制字符（ Control。是控制字符（不可见字符），我们可以在正则中通过。这种格式是错误的，没法进行正常的校验。1. 校验是否含有特殊的不可见字符。校验是否包含这些字符的16进制。2. 检验是否含有不可见字符。

ida调试输入不可见字符2.0

有头发的埼玉

11-10

159

使ida调试时可以输入不可见字符

LINUX shell中不可以见字符输入和验证

zhangxiong0301的专栏

03-24

1302

shell编程中经常用到不可见字符的情况，比如说hive查询的结果文件中，字段就是用ctl+A来分割的，要在shell中处理这些字段，就必须更改IFS为ctl+A。输入不可见字符：在shell里我知道的是两种方式，举例说明 1）a=$'\001'，即表示变量a的值已经是ctl+A啦 2）a=^A(其中^A通过ctl+v+A组合按键生成)，这种方式好...

Java 替换不可见字符和空格

最新发布

03-08

<think>好的，我现在要处理用户的问题，关于在Java中替换不可见字符和空格。首先，我需要理解用户的具体需求。用户提到“不可见字符”和“空格”，可能是指字符串中的空白符，比如空格、制表符、换行符，或者其他控制字符。用户可能遇到的情况是需要清理输入数据中的这些字符，比如处理用户输入时去除多余的空白，或者处理从文件或网络获取的数据中的不可见字符。接下来，我得回忆Java中处理字符串的相关方法。常用的有String类的replace()和replaceAll()方法。replace()可以替换字符或字符序列，但它是精确匹配，而replaceAll()支持正则表达式，功能更强大。不过，replaceAll()在使用正则时需要注意转义字符，比如反斜杠需要写成双反斜杠。不可见字符可能包括空格、制表符(\t)、换行符(\n)、回车符(\r)等，还有其他Unicode中的控制字符。要替换这些字符，正则表达式可能更合适。比如，使用\s可以匹配任何空白字符，包括空格、制表符、换行符等。但要注意，\s在Java字符串中需要转义为"\\s"。不过，如果用户想替换所有不可见字符，可能需要更全面的正则表达式，比如匹配Unicode中的控制字符，这时候可以用\p{C}，不过这个可能需要根据具体情况调整。另外，用户可能需要区分替换空格和替换所有不可见字符。例如，有时候只想替换空格而保留换行符，这时候需要明确替换的目标。比如使用replace(" ", "")来仅替换空格，或者用replaceAll("\\s+", "")来替换所有空白符为一个空格，或者去掉所有空白。还需要考虑性能问题，replaceAll()由于使用正则表达式，可能比replace()慢，特别是在处理大字符串或频繁操作时。因此，如果只是替换固定字符，用replace()更高效；如果需要模式匹配，才用replaceAll()。可能用户还会遇到trim()方法，但trim()只能去除首尾的空白符，不能处理中间的字符。因此，用户的问题可能不仅仅是trim()能解决的，需要替换中间的空格或不可见字符。接下来，我需要整理示例代码，展示不同的替换方法。比如，替换所有空格，替换所有不可见字符，使用正则表达式匹配不同的空白类型，或者自定义需要替换的字符集合。还要提醒用户注意转义字符在Java字符串中的处理，比如正则中的\s需要写成"\\s"。另外，可能需要提到Java 11引入的String.strip()方法，它与trim()类似，但能处理更多Unicode空白字符。但用户的问题是关于替换而不是去除首尾，所以可能关系不大。最后，需要总结不同方法的适用场景，帮助用户根据具体需求选择合适的方法。比如，如果只是替换普通空格，用replace(" ", "")；如果替换所有空白符，用replaceAll("\\s", "")；如果需要替换包括控制字符在内的所有不可见字符，可能需要更复杂的正则表达式，比如"[\\p{C}\\s]"，但需要测试确认。同时，提醒用户处理不可见字符时，可能需要注意不同编码或来源的数据中的特殊字符，有时候可能需要逐个检查字符的ASCII或Unicode值，以确保正确替换。</think>在Java中替换不可见字符和空格可以通过以下方法实现： --- ### 一、核心方法 1. **`replace()` 方法** 用于精确替换指定字符（不支持正则表达式）： ```java String str = "A B\tC\nD"; str = str.replace(" ", ""); // 替换普通空格 str = str.replace("\t", "-"); // 替换制表符为短横线 ``` 2. **`replaceAll()` 方法** 支持正则表达式匹配复杂模式： ```java String str = "A B\tC\nD"; str = str.replaceAll("\\s", ""); // 替换所有空白符（空格、制表符、换行等） str = str.replaceAll("\\s+", " "); // 将连续空白符替换为单个空格 ``` --- ### 二、常见场景 #### 1. 替换所有空格 ```java String input = "Hello World Java"; String output = input.replace(" ", ""); // 输出：HelloWorldJava ``` #### 2. 替换所有不可见字符 ```java String input = "Data\u0003\u200B\n\tEnd"; String output = input.replaceAll("[\\p{C}\\s]", ""); // \p{C} 匹配所有Unicode控制字符，\s 匹配空白符 // 输入："Data[不可见控制符][零宽空格][换行][制表]End" // 输出："DataEnd" ``` #### 3. 保留换行符但替换其他空白 ```java String input = "Line1\nLine2\tLine3"; String output = input.replaceAll("[ \\t\\x0B\\f]", ""); // 替换空格、制表符、垂直制表符、换页符，保留换行符\n ``` --- ### 三、关键细节 1. **正则表达式语法** - `\\s`：匹配空格、制表符(\t)、换行(\n)、回车(\r)、换页(\f) - `\\p{C}`：匹配Unicode控制字符（包括不可见字符） - `[ ]`：定义字符集合，如`[\\t\\n]`匹配制表符或换行 2. **性能建议** - 优先用`replace()`处理固定字符（如仅替换空格） - `replaceAll()`的正则表达式会降低性能，建议预编译`Pattern`： ```java Pattern pattern = Pattern.compile("\\s+"); String output = pattern.matcher(input).replaceAll(""); ``` --- ### 四、完整示例 ```java public class InvisibleCharDemo { public static void main(String[] args) { String input = "Hello\u0003 World\t\nJava\f"; // 方法1：替换所有空白和控制字符 String clean1 = input.replaceAll("[\\p{C}\\s]", ""); System.out.println(clean1); // HelloWorldJava // 方法2：仅替换空格和制表符 String clean2 = input.replace(" ", "") .replace("\t", ""); System.out.println(clean2); // HelloWorldJava （保留换行符和分页符） } } ``` --- 通过合理选择方法，可以高效处理字符串中的不可见字符和空格问题。实际应用中建议先明确具体需要替换的字符范围。