UTF-8转到JSON的问题

PHP字符编码(UTF-8/GBK)与json_encode/json_decode的关系 在项目中,因为字符编码的问题,踩了不少坑,之前踩,现在还接着踩,现在把它们总结出来,只希望以后不要再踩这坑了,我把我踩过的坑总结一下:   1)将数组转成json数据,json数据为null或为空字符串;   2)将数组转成json数据,json中的汉字乱码;   3)当json数据嵌套时(数组是个json,数组中的某个字段,也是个json字符串),json_decode失败;1 基本概念 阅读详情

我今天碰到一个问题,就是使用的C++代码发送json数据的时候,有中文的UTF-8编码.使用 boost::property_tree::ptree发送数据的时候,我输入的是

 boost::property_tree::ptree root;
 root.put<std::string>("location","四川成都");
 std::stringstream stream;
 boost::property_tree::write_json(stream,root,false);
 std::string josnString = stream.str();

其中发送的时候我发现,里面的内容不是unicode值,面是UTF-8的内存值.为了解决这个问题花了我大半天的时间,还没有解决.最后是超哥给我一段代码解决的.回过头来理解,其实是我没有真正认真的思考这个问题.相当然的写了,最终是错的.解决的办法如下:

void ChangeToUnicode (const std::string& utf8, std::vector< unsigned int >& unicode)
{
    for (std::size_t i = 0, size = utf8.size(); i < size;)
    {
        unsigned long uni;
        int bytes = 0;
        bool error = false;
        unsigned char ch = utf8[i++];
        if (ch <= 0x7F)
        {
            uni = ch;
            bytes = 1;
        }
        else if (ch <= 0xBF)
        {
            return ;
        }
        else if (ch <= 0xDF)
        {
            uni = ch & 0x1F;
            bytes = 2;
        }
        else if (ch <= 0xEF)
        {
            uni = ch & 0x0F;
            bytes = 3;
        }
        else if (ch <= 0xF7)
        {
            uni = ch & 0x07;
            bytes = 4;
        }
        else
        {
            return ;
        }

        for (int j = 1; j < bytes; ++j)
        {
            if (i == size)
                return ;
            unsigned char ch = utf8[i++];
            if (ch < 0x80 || ch > 0xBF)
                return ;
            uni <<= 6;
            uni += ch & 0x3F;
        }

        if (uni >= 0xD800 && uni <= 0xDFFF)
            return ;
        if (uni > 0x10FFFF)
            return ;
        unicode.push_back(uni);
    }
}


std::string Utf8ToAscii(const std::string& utf8) 
{
    std::vector<unsigned int> unicode;
    ChangeToUnicode(utf8, unicode);

    std::stringstream ss;
    ss << std::hex;
    for (auto code : unicode) {
        ss << "\\u" << code;
    }
    return ss.str();
}

还有一个问题就是生成的json中,有这个"\\u",而应该是"\u"就对了.为了解决这个问题,需要自己写函数遍历字符串,替换所有出现的值.代码如下:

std::string& KDClient::replace_all_distinct(std::string&   str,const std::string&   old_value,const std::string&   new_value)   
{   
    for(std::string::size_type   pos(0);   pos!=std::string::npos;   pos+=new_value.length())   
    {   
        if(   (pos=str.find(old_value,pos))!=std::string::npos   )   
            str.replace(pos,old_value.length(),new_value);   
        else   break;   
    }   
    return   str;   
}   
replace_all_distinct(josnString,"\\\\","\\");
 基本思路是这样,明天搞另一个项目.最近过的心烦,事儿真多,年纪大了,就是不开心的事就多了.




IdHTTPServer+utf8转换+json解析 本demo用IdHTTPServer接收上报数据,然后进行utf8编码转换,在用delphixe10.2自带的json作解析,代码简洁实用. 立即下载

相关推荐

Cursor概述及环境配置

Cursor 是一款基于 AI 的代码编辑器,支持 VS Code 配置迁移和 Java 开发环境配置。主要功能分为 Cursor Settings(AI 相关设置)和 Editor Settings(基础编辑器设置)。用户可通过一键导入或手动方式迁移 VS Code 配置,配置包括主题、扩展和快捷键等。对于 Java 开发,需配置 JDK 和 Maven 路径,并安装 Java 扩展插件以获得完整开发体验,如代码补全、调试和 Maven 项目管理。此外,Cursor 支持汉化配置,用户可安装中文语言包切换

Knight 3560

解决jsoncpp中文输出为unicode格式的“\u“、VS读取utf8格式中文输出乱码问题

解决jsoncpp中文输出为unicode格式的"\u"、VS读取utf8格式中文输出乱码问题 最近做的项目有一点是将后端传来的json格式数据传入C++后进行计算,再将计算结果输出为json格式返回至后端这一过程就需要jsoncpp。 但是在jsoncpp函数输出的时候,会发现中文字符串变成了"\u"格式的一串乱码,类似这样的,然后就在网上查呀,终于发现一位博主遇到了同样的情况并给出了解决方...

lpy369369的博客 1万+

神经网络基础-从零开始搭建一个神经网络

人工神经网络(Articial Neural Network,简写为ANN)也称为神经网络(NN),是一种模仿生物神经网络和功能的计算模型,人脑可以看做是一个生物神经网络,由众多的神经元连接而成,各个神经元传递复杂的电信号,树突接收到输入信号,然后对信号进行处理,通过轴突输出信号。人工神经网络也是类似,通过模仿人脑的“学习机器”,通过不断“看”数据(比如图片,数字),自己总结规律,最终学会预测(比如分类图片)在深度学习中,损失函数是用来衡量模型参数的质量的函数,衡量的方式是比较网络输出和真实输出的差异。

Zach的博客 4015

关于如何将下载的json数据转换为utf-8格式

String newStr = new String(response.getBytes("ISO-8859-1"), "utf-8");

androider_yxs的专栏 4269

从零开始做题:big_zip

内容为:You_know_the_bed_feels_warmer_Sleeping_here_alone_You_know_I_dream_in_color_And_do_the_things_I_want_You_think_you_got_the_best_of_me_Think_you_had_the_last_laugh_Bet_you_think_that_everything_good_is_gone。查看压缩包内容,发现有五字节长度的文件,用crc碰撞攻击破解明文。

weixin_44626085的博客 1242

强化学习Q值迭代的几何视角:从策略区域到快速收敛

在强化学习中,Q值迭代是求解最优策略的核心算法,其理论基础建立在贝尔曼不动点定理之上。该算法通过迭代更新Q函数,使其逐步逼近最优值函数。从几何视角看,整个Q函数空间可被视为一个高维流形,每个Q函数对应流形上的一个点,而贝尔曼最优算子则定义了流形上的变换轨迹。理解这一几何结构,特别是由策略超平面划分出的凸多面体区域,对于分析算法的收敛行为至关重要。在实际工程中,传统Q值迭代可能在高维或稀疏奖励环境下收敛缓慢,甚至陷入策略高原。通过引入策略区域缓存与自适应学习率等几何启发方法,可以更高效地导航策略空间,加速策略

weixin_30444111的博客 319

当前端需要把Excel文档转成json翻译格式

1.将Excel翻译文件用软件打开: 2.选择数据库字段列,然后右键选择【设置单元格格式】: 3.设置数字-自定义-类型@添加英文的冒号“:”,如下图: 4.确定后,json键值对的键值就改造好了,如下图: 5.选中其他语言的列,同理【设置单元格格式】: 6. 同样选择自定义,右边类型输入英文字符:!"@!", 这样中间@代表单元格内容: 7.点击确定后,后面语言就格式化好json的值了: 8.需要en英语翻译的js文件中,可以【隐藏】中间的列,复制 到成组的...

happy921212的博客 1168

测试dali协议的软件,DALI2.0和DALI1.0完美兼容同一个模块,测试每项可过协议

DALI2.0和DALI1.0完美兼容同一个模块,测试每项可过协议深圳聚积智能 夏先生 13246760327 QQ 349098308■IEC62386-102(V2.0)通过测试内容IEC62386-102/2.1/Test preambleIEC62386-102/3.1/Polarity testIEC62386-102/3.2/Maximum and minimum system v...

weixin_35343788的博客 1352

C语言将字符串转json

示例代码: #include <stdio.h> #include <string.h> #include <stdlib.h> char *strrpc(char *str,char *oldstr,char *newstr){ /* 将一个字符串中的某些字符进行替换 str 需要替换的字符串 o...

weixin_30622107的博客 1365

squidpy 教程 2:利用 Scanpy 和 Squidpy 进行空间数据的可视化分析

本教程详细介绍了如何利用Squidpy和Scanpy对空间转录组数据进行可视化分析。通过将Scanpy处理得到的聚类结果映射回原始组织图像,并结合基因表达与空间邻域信息,帮助研究者直观揭示细胞类型分布、基因表达模式及空间相互作用,从而深入挖掘空间组学数据的生物学意义。

weixin_29081703的博客 448

【读代码】SQLBot:开源自然语言转SQL智能助手原理与实践

SQLBot是 DataEase 团队开源的自然语言转 SQL 智能助手,致力于让非技术用户也能通过自然语言与数据库对话,自动生成 SQL 查询,实现自助数据分析、智能BI问答、报表生成等场景。SQLBot 结合了大语言模型(LLM)、数据库元数据解析、SQL解析与执行等多项技术,具备强大的多数据库适配能力和灵活的扩展性。降低数据分析门槛,让业务人员无需掌握SQL即可获取数据洞察支持多种数据库类型,适应企业多样化数据环境提供可扩展的API和插件机制,便于集成到各类BI、数据平台和业务系统。

kakaZhui的博客 831

【亲测免费】 Utf8Json完全指南:极速零分配的JSON处理库

**Utf8Json** 是由开发者Yoshifumi Kawai在2016年发布的,专为C#(包括.NET、.NET Core、Unity及Xamarin)设计的一款高性能JSON序列化与反序列化库。它以“绝对最快且零内存分配”著称,在速度与资源效率上远超传统如Newtonsoft.Json等库,特别适合对性能要求高的场景。 ## 项目快速启动 要快速开始使用Utf8Json,首先确保你的开...

gitblog_00969的博客 940

液态神经网络(Liquid Neural Networks)从线虫大脑到下一代 AI

液态神经网络(Liquid Neural Networks,LNN)是一类具有动态内部结构的神经网络,其灵感来源于生物神经系统,尤其是大脑中神经元如何以复杂、非线性的方式响应外部刺激。与传统神经网络不同,液态神经网络的每个神经元在处理输入时,不再是静态线性或非线性变换,而是基于一个微分方程模型进行响应。这种建模方式使神经元的行为具有时间连续性和动态适应性。换句话说,它不仅“记住”过去的信息,还能根据当前环境实时调整自身的动态特性,这对于感知、决策、预测等任务都非常关键。

hello.reader 7427

java json utf-8_JSON无效的UTF-8中间字节

当(杰克逊,在这种情况下)JSON引擎尝试解析一些未使用UTF-8编码的JSON时,会发生此错误。如何告诉引擎它应该期望与UTF-8不同的东西,例如UTF-16?HttpHeaders requestHeaders = createSomeHeader();RestTemplate restTemplate = new RestTemplate();HttpEntity> requestEn...

weixin_35702498的博客 1341

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

MySQL对JSON类型UTF-8编码导致中文乱码探讨

前言 继上文发表之后,结合评论意见并亲自验证最终发现是编码的问题,但是对于字符编码还是有点不解,于是乎,有了本文,我们来学习字符编码,在学习的过程中,我发现对于MySQL中JSON类型的编码导致数据中文出现乱码还有可深挖之处,接下来我们来分析一下,若有错误之处,还请批评指出。 字符编码 评论中指出任何不在基本多文本平面的Unicode字符,都无法使用MySQL的utf8字符集存储,包括E...

weixin_35736086的博客 1597

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面,电脑运行连游戏界面都一样大小,很怀旧,很真实,(英文版)强烈推荐,很小的文件,很难才找到的。

java json utf-8_java-球衣Web服务json utf-8编码

java-球衣Web服务json utf-8编码我使用Jersey 1.11制作了一个小型Rest Web服务。 当我调用返回Json的url时,非英语字符的字符编码存在问题。 Xml的相应URL(“ test.xml”在开始的xml-tag中使其成为utf-8。如何使网址“ test.json”返回utf-8编码的响应?这是该服务的代码:@Stateless@Path("/")public cl...

weixin_35902168的博客 298

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

PHP json_encode返回空白 Malformed UTF-8 characters, possibly incorrectly encoded 中文乱码问题

在项目开发中遇到了 echo json_encode($res);返回结果空白 可以用两个PHP自带的方法来检查错误 json_last_error() (PHP 5 >= 5.3.0, PHP 7) json_last_error—返回最后发生的错误 如官方所示,这个函数会返回当前json_encode的错误原因,返回的是数字,需要对应看下具体是哪个错误。 JSON_ERROR_NONE 没有错误发生 JSON_ERROR_DEPTH 到达了最大堆栈深度 ...

qq_39711485的博客 4433

R语言——UTF-8各种问题解决方法

R语言在碰到读UTF-8文件,或者处理UTF-8数据时总是会遇到各种各样的问题,本姑娘也是在碰了n多次壁,被气得吐血好多次之后,终于对这类总结出了一些解决办法: 1. 读UTF-8文件,例如UTF-8格式的csv: 最好的处理办法就是: a1=read.table('C:\\test11.csv',sep=',',fileEncoding = 'UTF-8',header = F) 如果使

snowdroptulip的博客 5万+

将utf-8文本保存在json.dumps中为UTF8,而不是\\ u转义序列

sample code: 样例代码: >>> import json >>> json_string = json.dumps("ברי צקלה") >

p15097962069的博客 1万+

C++/Windows 开发中 UTF-8 与 GBK 混乱问题全解析(含 nlohmann::json 实战案例)

本文深入解析了C++/Windows开发中UTF-8与GBK编码混乱问题的根源与解决方案。文章指出,由于Windows默认采用GBK编码,而现代开发工具普遍使用UTF-8,导致控制台乱码、JSON报错等问题频发。作者提出两大解决方案:一是全面采用UTF-8(最佳实践),包括设置源文件编码、编译器参数和控制台输出;二是针对老旧项目保留GBK但增加运行时转码。文章特别强调nlohmann::json库对UTF-8的严格要求,并给出可直接复用的代码模板。最终建议开发者尽快将工程全面UTF-8化以避免各类编码问题。

ag4526的博客 1429

java json utf-8_Java 编码 和JSON

1.编码序列化(urlencode编码):经过urlencode编码String a="[{\"clubNo\":\"10000002\",\"clubType\":\"1\"},{\"clubNo\":\"10000003\",\"clubType\":\"4\"},{\"clubNo\":\"10000004\",\"clubType\":\"3\"}]";将字符串a经过urlencode编码...

weixin_28848833的博客 1620

python json unicode utf-8处理总结

1.直接输出字典中文 在python中经常遇见直接print dict(字典),或者dict转json,但是没有给特定的参数,然后打印json字符串,输出的中文就成了unicode码的情况,如下: d = {'name': '张三', 'age': '1'} print d jd = json.dumps(d) print jd 输出结果为: {'age': ...

weixin_30381793的博客 8616

【python】UTF-8和UTF-8sig编码区别

json文件读取成dataframe出现了yurf-8编码错误

zoetu 4008

Utf8Json与主流JSON库性能对比:数据说话,谁才是真正的王者

在C#开发中,JSON序列化/反序列化性能直接影响应用响应速度和资源消耗。Utf8Json作为一款宣称"Definitely Fastest and Zero Allocation"的JSON库,究竟能否超越Newtonsoft.Json、System.Text.Json等主流方案?本文通过权威性能测试数据,从序列化速度、反序列化效率和内存占用三个维度进行全面对比,为你揭示真正的性能王者。 ##

gitblog_00687的博客 1186
上一篇: ubuntu下使用unixODBC+ODBC Driver 11 for SQL Server 连接SQL Server
下一篇: 在linux下连接MS SQL Server2008中SQL语句like中文
Code_My_Life
博客等级 码龄12年 43粉丝 108原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值