python中實現json-repair快速修復損壞的JSON文件

更新時間：2025年11月25日 09:26:44 作者：風華浪浪

本文主要介紹了python中實現json-repair快速修復損壞的JSON文件,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧

一、背景

本人場景：大模型提示詞要求返回json格式類型，但是卻```json開頭，以```結尾, 或者少引號等各種情況
修復 JSON 中的語法錯誤
缺少引號、錯誤放置的逗號、未轉義的字符以及不完整的鍵值對。
缺少引號、格式不正確的值（true、false、null）以及修復損壞的鍵值結構。
修復格式錯誤的 JSON 數組和對象
通過添加必要的元素（例如，逗號、括號）或默認值（null、“”）導致數組/對象不完整或損壞。
該庫可以處理包含額外非 JSON 字符（如注釋或位置不正確的字符）的 JSON，并在保持有效結構的同時清理它們。
自動完成缺失的 JSON 值
自動使用合理的默認值（如空字符串或 null）完成 JSON 字段中缺失的值，確保有效性。

二、安裝與參數

此庫來完全替換json.loads()等

pip install json-repair

json_repair -h
usage: json_repair [-h] [-i] [-o TARGET] [--ensure_ascii] [--indent INDENT] [filename]

Repair and parse JSON files.

positional arguments:
  filename              The JSON file to repair (if omitted, reads from stdin)

options:
  -h, --help            show this help message and exit
  -i, --inline          Replace the file inline instead of returning the output to stdout
  -o TARGET, --output TARGET
                        If specified, the output will be written to TARGET filename instead of stdout
  --ensure_ascii        Pass ensure_ascii=True to json.dumps()
  --indent INDENT       Number of spaces for indentation (Default 2)

三、使用示例

少引號

from json_repair import repair_json, loads

json_string = repair_json("{'test_chinese_ascii':'統(tǒng)一碼, }", ensure_ascii=False)
print(json_string)

{"test_chinese_ascii": "統(tǒng)一碼"}

json_data = loads(json_string)
print(type(json_data), json_data)

<class 'dict'> {'test_chinese_ascii': '統(tǒng)一碼'}

有時大模型提示詞說返回jison格式類型，但是卻```json開頭，以```結尾, 或者少引號等各種情況

json_string = "```json{'username': 'zhangsan', 'age': 13, 'phone': 13312345678, 'description': 'hello world'}```"
repair_data = repair_json(json_string)
print(repair_data)

{"username": "zhangsan", "age": 13, "phone": 13312345678, "description": "hello world"}

json_data = loads(json_string)
print(type(json_data), json_data)

<class 'dict'> {'username': 'zhangsan', 'age': 13, 'phone': 13312345678, 'description': 'hello world'}

處理報錯 json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes: line 1 column 2 (char 1)
序列化報錯

import json
json_string = "{'start_row': 0, 'end_row': 0, 'env': 0, 'now': 0}"
json_data = json.loads(json_string)
print(json_data)

序列化正確

json_string = "{'start_row': 0, 'end_row': 0, 'env': 0, 'now': 0}"
json_data = loads(json_string)
print(type(json_data), json_data)

四、注意

避免這種反模式
這是很浪費的，因為json_repair它已經為您驗證了 JSON 是否有效，
如果您仍然想這樣做，那么請skip_json_loads=True按照下面部分所述添加到調用中

obj = {}
try:
    obj = json.loads(string)
except json.JSONDecodeError as e:
    obj = json_repair.loads(string)
    ...

使用中文字符需要添加ensure_ascii=False

repair_json("{'test_chinese_ascii':'統(tǒng)一碼'}")
{"test_chinese_ascii": "\u7edf\u4e00\u7801"}

repair_json("{'test_chinese_ascii':'統(tǒng)一碼'}", ensure_ascii=False)
{"test_chinese_ascii": "統(tǒng)一碼"}

性能注意事項
如果你發(fā)現這個庫因為正在使用而太慢，json.loads()你可以通過傳遞skip_json_loads=True給來跳過它repair_json

from json_repair import repair_json

good_json_string = repair_json(bad_json_string, skip_json_loads=True)

我選擇不使用任何快速 json 庫以避免任何外部依賴，以便任何人都可以使用它，無論他們的堆棧如何。

設置return_objects=True總是會更快，因為解析器已經返回一個對象，并且它沒有將該對象序列化為 JSON
skip_json_loads只有當你 100% 確定該字符串不是有效的 JSON 時才會更快
如果您在轉義時遇到問題，請將字符串作為**原始字**符串傳遞，例如：r"string with escaping\""

到此這篇關于python中實現json-repair快速修復損壞的JSON文件的文章就介紹到這了,更多相關python json-repair修復損壞JSON文件內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: