百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程网 > 正文

如何用 SQL Server 玩转 JSON 数据解析:一场性能与可靠性的较量

yuyutoo 2025-02-09 14:52 1 浏览 0 评论

需求描述

公司老系统设计接口请求的响应结果放到了一个表里的一个字段中,是一个 json 格式的数据,需要解析里面的某个字段的值,如:

{
  "Content": {
    "prePactNo": "20191217003209329291",
    "dealSts": "1",
    "dealDesc": "自动审批通过"
  },
  "IsSuccess": true,
  "Message": null,
  "RespCode": "0000",
  "RespDesc": "通信成功"
}

ResponseJson 存储的就是上面说的 json 格式的数据,需要解析出 dealDesc 的值。

可以随便用一种程序语言来写一个程序来解析,比如 java、c# 等,但是如果只能用 sql 实现呢?

实现方案一

可以使用 SQL Server 内置的函数 JSON_VALUE ,直接提取 JSON 数据中的标量值。

SELECT top 10 ResponseJson,
    JSON_VALUE(ResponseJson, '$.Content.dealDesc') AS dealDesc
FROM
    business.RequestLog
WHERE ResponseJson IS NOT NULL
ORDER BY Id DESC;

$.Content.dealDesc 是 JSON 路径,表示提取 Content 对象中的 dealDesc 属性值。

实现方案二

使用 OPENJSON 可以将 JSON 数据展开为表格格式,适合复杂的 JSON 结构。

SELECT
    ResponseJson,
    dealDesc
FROM
    business.RequestLog
CROSS APPLY
    OPENJSON(ResponseJson, '$.Content')
    WITH (
        dealDesc NVARCHAR(100) '$.dealDesc'
    ) AS ParsedContent
WHERE ResponseJson IS NOT NULL

实现方案三

使用字符串操作,这种情况适合 SQL Server 版本较旧,不支持 JSON 函数的情况,但是这种方式不推荐,效率低且不够优雅。

SELECT
    ResponseJson,
    dealDesc
FROM
    business.RequestLog
CROSS APPLY
    OPENJSON(ResponseJson, '$.Content')
    WITH (
        dealDesc NVARCHAR(100) '$.dealDesc'
    ) AS ParsedContent
WHERE
  ResponseJson IS NOT NULL

其中 CHARINDEX 用于查找字段 dealDesc 的位置,SUBSTRING 提取指定位置的值。

实现方案四

使用基于字符串操作的解决方案,能够实现解析 JSON 字段值的功能,但在性能、可维护性和可靠性方面存在一些问题和需要改进的地方。

这种方式不推荐。

实现 SQL 如下:

SELECT TOP 10 w.ResponseJson,
       SUBSTRING(w.ResponseJson, p1.number + 13, p2.number-p1.number-13) AS Resul,p1.number,p2.number
FROM business.RequestLog w WITH (NOLOCK)
    JOIN
    (
        SELECT number
        FROM master.dbo.spt_values
        WHERE type = 'P'
              AND number > 0
    ) p1
        ON CHARINDEX(',"dealDesc":"', w.ResponseJson) = p1.number
		 JOIN
    (
        SELECT number
        FROM master.dbo.spt_values
        WHERE type = 'P'
              AND number > 0
    ) p2
        ON CHARINDEX('"},"IsSuccess":', w.ResponseJson) = p2.number
WHERE  InterfaceName = 'SinglePreAduit'
ORDER BY w.Id DESC;

得到的【Resul】就是需要的值。有了这个思路,还可以解析更多的值。

上面的 sql 用到了系统里的一个表【master.dbo.spt_values】,这是一个数字辅助表,使用了其 type 和 number 两个字段,取出的是 【type = 'P' AND number > 0】的数据,在数据库中执行下:

其 number 就是从1到2047连续的数字,因为一个 josn 格式是固定的,结合这个特性,再利用这个数字(即字符串的位置)我们就能建立表连接,然后取相对位置,就能取出 json 格式里的任何字段的数据了,但是缺陷是只能取到2047。

这个表就是一个辅助表,不光有我们用到了数字(type='P'),还有 bool(type='B'),有兴趣的可以去研究研究。

这种使用有性能问题,原因如下:

  • 使用 CHARINDEX 和 SUBSTRING 解析字符串需要对每一行进行多次字符串操作,性能较差,尤其是在大数据量的表上。
  • master.dbo.spt_values 表本身并不是为这种用途设计的,频繁 JOIN 会增加计算复杂度。

可靠性也差,原因如下:

  • 硬编码的偏移量:假设了 JSON 格式固定(如 "dealDesc": 后的固定偏移量为 13),一旦数据格式发生变化(如字段名称长度变化或多余的空格),结果可能会出错。
  • 边界问题:如果数据不包含 ,"dealDesc":""},"IsSuccess":,查询会失败或者结果不准确,缺少对异常情况的处理。

可读性和可维护性很差:

  • SQL 过于复杂,包含多个嵌套字符串操作和硬编码,理解和维护难度较高。
  • JOIN master.dbo.spt_values 表引入了额外的复杂性,对于后续的扩展或调试不够直观。

还有 master.dbo.spt_values 是 SQL Server 内置的系统表,通常不推荐直接在业务逻辑中使用,因为未来的版本可能会修改或移除。

实现方案五

可以封装一个存储过程或用户自定义函数来简化多次使用的场景。

CREATE FUNCTION dbo.GetDealDesc(@json NVARCHAR(MAX))
RETURNS NVARCHAR(MAX)
AS
BEGIN
    RETURN JSON_VALUE(@json, '$.Content.dealDesc');
END;
GO

调用:

SELECT 
    dbo.GetDealDesc(ResponseJson) AS dealDesc
FROM 
    business.RequestLog;

相关推荐

史上最全的浏览器兼容性问题和解决方案

微信ID:WEB_wysj(点击关注)◎◎◎◎◎◎◎◎◎一┳═┻︻▄(页底留言开放,欢迎来吐槽)●●●...

平面设计基础知识_平面设计基础知识实验收获与总结
平面设计基础知识_平面设计基础知识实验收获与总结

CSS构造颜色,背景与图像1.使用span更好的控制文本中局部区域的文本:文本;2.使用display属性提供区块转变:display:inline(是内联的...

2025-02-21 16:01 yuyutoo

写作排版简单三步就行-工具篇_作文排版模板

和我们工作中日常word排版内部交流不同,这篇教程介绍的写作排版主要是用于“微信公众号、头条号”网络展示。写作展现的是我的思考,排版是让写作在网格上更好地展现。在写作上花费时间是有累积复利优势的,在排...

写一个2048的游戏_2048小游戏功能实现

1.创建HTML文件1.打开一个文本编辑器,例如Notepad++、SublimeText、VisualStudioCode等。2.将以下HTML代码复制并粘贴到文本编辑器中:html...

今天你穿“短袖”了吗?青岛最高23℃!接下来几天气温更刺激……

  最近的天气暖和得让很多小伙伴们喊“热”!!!  昨天的气温到底升得有多高呢?你家有没有榜上有名?...

CSS不规则卡片,纯CSS制作优惠券样式,CSS实现锯齿样式

之前也有写过CSS优惠券样式《CSS3径向渐变实现优惠券波浪造型》,这次再来温习一遍,并且将更为详细的讲解,从布局到具体样式说明,最后定义CSS变量,自定义主题颜色。布局...

柠檬科技肖勃飞:大数据风控助力信用社会建设

...

你的自我界限够强大吗?_你的自我界限够强大吗英文

我的结果:A、该设立新的界限...

行内元素与块级元素,以及区别_行内元素和块级元素有什么区别?

行内元素与块级元素首先,CSS规范规定,每个元素都有display属性,确定该元素的类型,每个元素都有默认的display值,分别为块级(block)、行内(inline)。块级元素:(以下列举比较常...

让“成都速度”跑得潇潇洒洒,地上地下共享轨交繁华
让“成都速度”跑得潇潇洒洒,地上地下共享轨交繁华

去年的两会期间,习近平总书记在参加人大会议四川代表团审议时,对治蜀兴川提出了明确要求,指明了前行方向,并带来了“祝四川人民的生活越来越安逸”的美好祝福。又是一年...

2025-02-21 16:00 yuyutoo

今年国家综合性消防救援队伍计划招录消防员15000名

记者24日从应急管理部获悉,国家综合性消防救援队伍2023年消防员招录工作已正式启动。今年共计划招录消防员15000名,其中高校应届毕业生5000名、退役士兵5000名、社会青年5000名。本次招录的...

一起盘点最新 Chrome v133 的5大主流特性 ?

1.CSS的高级attr()方法CSSattr()函数是CSSLevel5中用于检索DOM元素的属性值并将其用于CSS属性值,类似于var()函数替换自定义属性值的方式。...

竞走团体世锦赛5月太仓举行 世界冠军杨家玉担任形象大使

style="text-align:center;"data-mce-style="text-align:...

学物理能做什么?_学物理能做什么 卢昌海

作者:曹则贤中国科学院物理研究所原标题:《物理学:ASourceofPowerforMan》在2006年中央电视台《对话》栏目的某期节目中,主持人问过我一个的问题:“学物理的人,如果日后不...

你不知道的关于这只眯眼兔的6个小秘密
你不知道的关于这只眯眼兔的6个小秘密

在你们忙着给熊本君做表情包的时候,要知道,最先在网络上引起轰动的可是这只脸上只有两条缝的兔子——兔斯基。今年,它更是迎来了自己的10岁生日。①关于德艺双馨“老艺...

2025-02-21 16:00 yuyutoo

取消回复欢迎 发表评论: