日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 前端技术 > javascript >内容正文

javascript

开源 , KoobooJson一款高性能且轻量的JSON框架

發(fā)布時間:2023/12/4 javascript 54 豆豆
生活随笔 收集整理的這篇文章主要介紹了 开源 , KoobooJson一款高性能且轻量的JSON框架 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

  在C#領域,有很多成熟的開源JSON框架,其中最著名且使用最多的是?Newtonsoft.Json ,然而因為版本迭代,其代碼要兼容從net2.0到現(xiàn)在的最新的net框架,并且要支持.net平臺下的其它語言,所以最新發(fā)布版本的Newtonsoft.Json其dll大小接近700k,另一方面,因為其復雜的迭代歷史導致它的代碼為了維護向下擴展性和向上兼容性而舍棄一些性能。

  如果你不太在乎體積和性能的話,那么?Newtonsoft.Json?無疑是一款很好的選擇。但是如果你在意性能的話,在github上仍然有一些出名的以速度為稱的c# JSON框架,其中最為人知的應該是?JIL?, JIL有著出色的性能是因為它采用了大量的加速技術(shù),但這也帶來了一些局限性,它不夠靈活,對object類型的解析必須得調(diào)用它的另一個API,并且因為出于性能考慮其采用的是Emit技術(shù),不易維護,在我的測試中有很多類型它不支持。但是JIL的地位是顯而易見的,因為它的出現(xiàn),github上有著很多相仿思路的以速度為稱的JSON框架,幾乎每個都稱自己是最快的,但實際上很少有超越JIL的,并且它們中的大部分沒有一個良好的文檔,這導致我在做性能測試時,我想改個配置都得對源碼全局搜索花費一定時間。

  在說回程序集大小,JIL的最新發(fā)布版本是500k,并且其依賴一個庫,加起來是800k大小。

  那么,我講這些,大家應該知道我想要表達什么!

  是的,考慮到前面種種,這些都不是在某種場景最理想化的那種JSON庫,所以我寫了一款以體積更小,速度更快,類型覆蓋更廣的開源C# JSON框架,它叫:KoobooJson

在我正式介紹KoobooJson之前,我要介紹一下什么是Kooboo!

Kooboo是我們老板用C#編寫的一個開源的非常神奇的網(wǎng)站開發(fā)工具,它是一個類CMS生成器,但其從數(shù)據(jù)庫,前端引擎,到各種網(wǎng)絡協(xié)議服務器都是用c#自主創(chuàng)造的,幾乎很少使用到第三方庫,它編譯后的發(fā)布版本僅有幾M,而正是因為僅僅只有幾M,為了Json框架不要太影響主程序的大小,這才有了KoobooJson此次的誕生!

Kooboo是開源的:https://github.com/Kooboo/Kooboo

KoobooJson自然也是開源的:https://github.com/Kooboo/Json

在NuGet包中可以直接搜索 KoobooJson 下載使用即可

什么是KoobooJson?

  KoobooJson是一款C#的JSON工具,其主要通過表達式技術(shù)構(gòu)建,最低支持.NET4.5(可以支持.NET4.0,但考慮到一些因素,最終沒有支持,有需要支持的可以自行源碼分支更改。另外,幾乎每個以性能號稱的JSON框架都最低支持.NET4.5),最低支持.NET Core 2.0,提交小巧,性能出色,類型覆蓋廣是KoobooJson的優(yōu)點!

  • KoobooJson的優(yōu)點

    • 小巧

    • 快速

    • 覆蓋類型廣

  • KoobooJson的實現(xiàn)? (后續(xù)我將出一篇新的文章詳細講解實現(xiàn))

    • 序列化

    • 反序列化

  • 功能介紹

    • 忽略注釋

    • 忽略互引用所導致的堆棧循環(huán)

    • 忽略Null值

    • 排序特性

    • 忽略序列化元素

    • 序列化時僅包含該元素

    • 時間格式

    • 首字母大小寫

    • 別名特性

    • 反序列化時指定構(gòu)造函數(shù)

    • 值格式化特性

    • 全局Key格式化

  • 其它

KoobooJson的優(yōu)點

1. 小巧

目前KoobooJson只有130k, 并且沒有任何額外依賴項, KoobooJson當前支持框架版本.NET4.5 .NET Core2+ .NET Standard 2

2. 快速

KoobooJson 遵循JSON?RFC8259規(guī)范, 是一款適用于C#的快速的Json文本序列化器

它基于表達式樹構(gòu)建, 在運行時會動態(tài)的為每個類型生成高效的解析代碼, 這過程包括: 利用靜態(tài)泛型模板進行緩存, 避免字典查詢開銷, 避免裝箱拆箱消耗, 緩沖池復用, 加速字節(jié)復制...

KoobooJson生成代碼的方式并沒有采用Emit, 而是采用ExpressionTree. ExpressionTree相比Emit而言, 它不能像Emit直接寫出最優(yōu)的IL代碼, 它依賴于下層的編譯器, 在某些時候它會多生成一些不必要的IL代碼路徑, 故而性能上有所遜色. 但相較于幾乎沒有類型檢查的Emit而言, ExpressionTree不會出現(xiàn)各種莫名其妙的錯誤, 它更加安全, 也更加容易擴展維護.

雖然ExpressionTree與Emit相比在性能方面可能會有所差異, 但是KoobooJson的表現(xiàn)卻相當亮眼!

?

上圖是使用BenchmarkDotNet在Net Core2.1上做的Json序列化和反序列化的性能測試,隨機生成大量的測試數(shù)據(jù),迭代100次后產(chǎn)生的結(jié)果,基準報告在這里

BenchmarkDotNet=v0.11.4, OS=Windows 10.0.17763.316 (1809/October2018Update/Redstone5)?Intel Core i7-8550U CPU 1.80GHz (Kaby Lake R), 1 CPU, 8 logical and 4 physical cores?.NET Core SDK=2.1.505?[Host] : .NET Core 2.1.9 (CoreCLR 4.6.27414.06, CoreFX 4.6.27415.01), 64bit RyuJIT?Job-XEQPPS : .NET Core 2.1.9 (CoreCLR 4.6.27414.06, CoreFX 4.6.27415.01), 64bit RyuJIT

IterationCount=100 LaunchCount=1 WarmupCount=1

3. 覆蓋類型廣

在類型定義上, KoobooJson并沒有單獨實現(xiàn)每個集合或鍵值對類型, 而是對這些FCL類型進行劃分成不同的模板

a. KoobooJson將序列化分為5種類型:

  • 原始類型?
    它包括 Boolean, Byte, SByte, Int16, UInt16, Int32, UInt32, Int64, UInt64, IntPtr, UIntPtr, Char, Double, and Single.

  • 所有擁有鍵值對行為的類型
    任何能夠?qū)崿F(xiàn)IDictionary<>或能夠?qū)崿F(xiàn)IDictionary且能夠通過構(gòu)造函數(shù)注入鍵值對的類型, 都將以鍵值對方式進行解析

  • 所有擁有集合行為的類型?
    任何能夠?qū)崿F(xiàn)IEnumable并且滿足IColloction的Add行為或擁有自己獨特的集合行為且能夠通過構(gòu)造函數(shù)注入集合的類型, 都將以集合方式進行解析

  • 特殊類型?
    如Nullable<>, Lazy<>, Guid, Datatable, DateTime, Type, Task, Thread, Timespan...等等這些特定的類型實現(xiàn)

  • 常規(guī)Model的鍵值對類型?
    在KoobooJson中, 如果當類型不滿足上述4種時, 將會以鍵值對的形式來對其解析, KoobooJson會對Model中公開的所有元素進行序列化, 在這個環(huán)節(jié), 幾乎配置器中所有的配置都是有關Model的. 諸如別名, 忽略特性, 指定構(gòu)造函數(shù), 忽略堆棧循環(huán)引用, 首字母大小寫, 格式化器... 值得一提的是, 在對接口類型進行反序列化時, KoobooJson默認會自動創(chuàng)建并返回一個實現(xiàn)于該接口的對象.

b. 在對類型的解析上, 其中浮點型,日期時間類型, GUID的解析是參照了JIL的代碼, 在此表示感謝.

作為一款活躍的Json庫, KoobooJson會不斷支持更多的類型, 這其中, 因為對FCL中的鍵值對和集合的行為進行歸納, 所以對于這兩種類型, KoobooJson并不像其它框架一樣去特定的為每種類型單獨實現(xiàn), 實際上, 第2和3所定義的規(guī)則可以容納FCL中的大多數(shù)鍵值對或集合類型.

目前KoobooJson所覆蓋的類型包括?:?Hashtable, SortedList, ArrayList, IDictionary, Dictionary<,>, IList,List<>, IEnumerable<>, IEnumerable, ICollection, ICollection<>, Stack<>, Queue<>, ConcurrentBag<>, ConcurrentQueue<>, ConcurrentStack<>, SortedDictionary<,>, ConcurrentDictionary<,>, SortedList<,>, IReadOnlyDictionary<,>, ReadOnlyDictionary<,>, ObservableCollection<>, HashSet<>, SortedSet<>, LinkedList<>, ReadOnlyCollection<>, ArraySegment<>, Stack, Queue, IReadOnlyList<>, IReadOnlyCollection<>, ReadOnlyCollection<>, ISet<>, BitArray, URI, NameValueCollection, StringDictionary, ExpandoObject, StringBuilder, Nullable<>, Lazy<>, Guid, Datatable, DateTime, Type, Task, Thread, Timespan, Enum, Exception, Array[], Array[,,,,,]...

KoobooJson的實現(xiàn)

序列化

class UserModel
{
public object Obj;
public string Name;
public int Age;
}
string json = JsonSerializer.ToJson(new UserModel());

在對類型第一次序列化時, KoobooJson會為這個類型生成大致是這樣的解析代碼.

void WriteUserModel(UserModel model,JsonSerializerHandler handler)
{
...配置選項處理...格式化器處理...堆棧無限引用處理...
handler.sb.Write(
"Obj:")
WriteObject(model.Obj);
//在序列化時將為Object類型做二次真實類型查找

handler.sb.Write(
"Name:")
WriteString(model.Name);

handler.sb.Write(
"Age:")
WriteInt(model.Age);

}

如果是List<UserModel>的話, 那么將生成這樣的代碼

handler.sb.Write("[")
foreach(var user in users)
{
WriteUserModel(user);
WriteComma()
}
handler.sb.Write(
"]")

在當前版本中, KoobooJson序列化使用的容器為StringBuilder, 與直接ref char[]相比, 多了一些額外的調(diào)用.?將考慮在下個版本中構(gòu)建一個輕便的char容器, 并會區(qū)分對象大小, 考慮棧數(shù)組和通過預掃描大小來減少對內(nèi)存的開銷,這將顯著提升序列化速度.

反序列化

在對類型進行第一次反序列化時, KoobooJson會為這個類型生成大致是這樣的解析代碼.

UserModel model = JsonSerializer.ToObject<UserModel>("{\"Obj\":3,\"Name\":\"Tom\",\"Age\":18}");
void ReadUserModel(string json,JsonDeserializeHandler handler)
{
...Null處理...
ReadObjLeft()
空元素處理...構(gòu)造函數(shù)處理...配置項處理...格式化器處理...
while(i-->0){
switch(gechar())
{
case 'O':
switch(getchar())
case 'b':
switch(getchar())
case 'j':
ReadQuote();
ReadObject();
if(getchar()==',')
i
++;
}
}
ReadObjRight()
}

KoobooJson生成反序列化代碼, KoobooJson會假設json格式完全正確, 沒有預先讀取Json結(jié)構(gòu)部分, 而是直接使用代碼來描述結(jié)構(gòu), 所以KoobooJson少了一次對json結(jié)構(gòu)的掃描, 執(zhí)行過程中如果json結(jié)構(gòu)發(fā)生錯誤, 會直接拋出異常.

而對于key的匹配, KoobooJson生成的是逐個char的自動機匹配代碼, 目前KoobooJson是以字典樹為算法, 逐個char進行類型比較, 與一次比較多個char相比, 這種方式顯然沒有達到最小的查詢路徑, 不過在jit優(yōu)化下, 兩種方式實現(xiàn)經(jīng)測試效率幾乎一樣.

在反序列化讀取字符時, 因為是對類型動態(tài)生成編碼, 提前知道每個類型中的元素的字節(jié)長度和其類型的值長度, 所以KoobooJson出于更高的性能對反序列化采取了指針操作, 并加速字節(jié)讀取.

case 3:
if (*(int*)Pointer != *(int*)o) return false;
if (*(Pointer + 2) != *(o + 2)) return false;
goto True;
case 4:
if (*(long*)Pointer != *(long*)o) return false;
goto True;
case 5:
if (*(long*)Pointer != *(long*)o) return false;
if (*(Pointer + 4) != *(o + 4)) return false;

因為是指針操作, KoobooJson在反序列化環(huán)節(jié)幾乎不需要去維護一個char池來存放下一個需要讀取的json結(jié)構(gòu)片段.

功能介紹

KoobooJson當前僅支持3個API調(diào)用

string Kooboo.Json.JsonSerializer.ToJson<T>(T value, JsonSerializerOption option=null)

T Kooboo.Json.JsonSerializer.ToObject
<T>(string json, JsonDeserializeOption option=null)

object Kooboo.Json.JsonSerializer.ToObject(
string json, Type type, JsonDeserializeOption option=null)

忽略注釋

在json字符串的讀取中KoobooJson會自動忽略注釋

string json = @"
/*注釋*/
{//注釋
/*注釋*/""Name"" /*注釋*/: /*注釋*/""CMS"" /*注釋*/,//注釋
/*注釋*/
""Children"":[//注釋
1/*注釋*/,
2/*注釋*/
]//注釋
}//注釋
/*此處*/
";
var obj = JsonSerializer.ToObject(json);
obj
=>Name:CMS
obj
=>Children:Array(2)

忽略互引用所導致的堆棧循環(huán)

class A
{
public B b;
}
class B
{
public A a;
}
A.b
=B;
B.a
=A;

A指向B, B指向A, 在序列化時這種情況會發(fā)生無限循環(huán).可通過KoobooJson的序列化配置項中的屬性來設定這種情況下所對應的結(jié)果

JsonSerializerOption option = new JsonSerializerOption
{
ReferenceLoopHandling
= JsonReferenceHandlingEnum.Null
};
string json = JsonSerializer.ToJson(a, option);
json
=> {\"b\":{\"a\":null}}
------
ReferenceLoopHandling
= JsonReferenceHandlingEnum.Empty
json
=> {\"b\":{\"a\":{}}}
-----
ReferenceLoopHandling
= JsonReferenceHandlingEnum.Remove
json
=> {\"b\":{}}

忽略Null值

class A
{
public string a;
}
A.a
=null;
JsonSerializerOption option
= new JsonSerializerOption { IsIgnoreValueNull = true };
var json = JsonSerializer.ToJson(A, option);
json
=> {}

排序特性

class A
{
[JsonOrder(
3)]
public int a;
[JsonOrder(
2)]
public int b;
[JsonOrder(
1)]
public int c;
}

可通過[JsonOrder(int orderNum)]來排序序列化的json元素位置.?如果是正常沒有通過[JsonOrder]排序元素,那么解析出來的Json則是默認順序:{"a":0,"b":0,"c":0}?上面樣例通過[JsonOrder]排序后是這樣的:{"c":0,"b":0,"a":0}

忽略序列化元素

class A
{
[IgnoreKey]
public int a;
public int b;
}

可通過[IgnoreKey]特性來標記序列化和反序列化要忽略的元素 json => {"b":0}?當然, 也可以通過配置來動態(tài)選擇忽略對象

JsonSerializerOption option = new JsonSerializerOption { IgnoreKeys = new List<string>(){"b"} };
var json = JsonSerializer.ToJson(A, option);
json
=> {}

序列化時僅包含該元素

class A
{
[JsonOnlyInclude]
public int a;
public int b;
public int c;
}
json
=> {\"a\":0}

如果一個model里包含幾十個元素, 而你僅想序列化其中一個, 那么就沒必要對每一個元素進行[IgnoreKey]標記,只需要對想要序列化的元素標記[JsonOnlyInclude]即可

時間格式

JsonSerializerOption option = new JsonSerializerOption { DatetimeFormat=DatetimeFormatEnum.ISO8601 };
json
=> 2012-01-02T03:04:05Z

JsonSerializerOption option
= new JsonSerializerOption { DatetimeFormat=DatetimeFormatEnum.RFC1123 };
json
=> Thu, 10 Apr 2008 13:30:00 GMT

JsonSerializerOption option
= new JsonSerializerOption { DatetimeFormat=DatetimeFormatEnum.Microsoft };
json
=> \/Date(628318530718)\/

首字母大小寫

class A
{
public int name;
}
JsonSerializerOption option
= new JsonSerializerOption { JsonCharacterRead=JsonCharacterReadStateEnum.InitialUpper };
json
=> {\"Name\":0}

在對model序列化時可以指定key的首字母大小寫,反序列化時也可以設置對字符串不區(qū)分大小寫.首字母大小寫屬于內(nèi)嵌支持, 在解析時并不會影響性能

別名特性

class A
{
[Alias(
"R01_Name")]
public int name;
}
json
=> {\"R01_Name\":0}

當元素被標記[Alias]后,KoobooJson無論序列化還是反序列化都會按照Alias來進行解析

反序列化時指定構(gòu)造函數(shù)

class A
{
public A(){}
[JsonDeserializeCtor(
3,"ss")]
public A(int a,string b){}
}

在反序列化的時候, 我們不得不調(diào)用構(gòu)造函數(shù)來以此創(chuàng)建對象.?在常規(guī)情況下, KoobooJson會通過優(yōu)先級自動搜索最合適的構(gòu)造函數(shù),其優(yōu)先級順序為:?public noArgs => private noArgs => public Args => private Args, 這其中, 會對有參構(gòu)造函數(shù)進行默認值構(gòu)造.

然而你也可以顯式通過[JsonDeserializeCtor(params object[] args)]特性來指定反序列化時的構(gòu)造函數(shù),?這樣 當KoobooJson創(chuàng)建A實例的時候就不是通過new A(); 而是new A(3,"ss");

值格式化特性

class A
{
[Base64ValueFormat]
public byte[] a;
}

當你需要來覆寫由KoobooJson進行元素解析的行為時, 我們可以繼承一個 ValueFormatAttribute 來覆寫行為.

class Base64ValueFormatAttribute:ValueFormatAttribute
{
public override string WriteValueFormat(object value,Type type, JsonSerializerHandler handler, out bool isValueFormat)
{
isValueFormat
=true;
if(value==null)
return "null";
else
return ConvertToBase64((byte[])value);
}

public override object ReadValueFormat(string value,Type type, JsonDeserializeHandler handler, out bool isValueFormat)
{
isValueFormat
=true;
if(value=="null")
return null;
else
return Base64Convert(value);
}
}

值格式化特性也可以標記在結(jié)構(gòu)體或類上, 而另一點是對于值格式化器, 也可以以全局的方式來進行配置:以序列化為例, 可通過 JsonSerializerOption中的GlobalValueFormat委托來進行配置

JsonSerializerOption.GlobalValueFormat=(value,type,handler,isValueFormat)=>
{
if(type==typeof(byte[]))
{
isValueFormat
=true;
if(value==null)
return "null";
else
return ConvertToBase64((byte[])value);
}
else
{
isValueFormat
=false;
return null;
}
}

值得注意的是,對于byte[]類型的base64解析行為, KoobooJson已經(jīng)內(nèi)嵌在配置項中, 只要設置JsonSerializerOption.IsByteArrayFormatBase64=true即可

全局Key格式化

對于Model中的Key處理, KoobooJson支持全局的Key格式化器.

class R01_User
{
public string R01_Name;
public int R01_Age;
}

如果我們想把R01這個前綴給去掉, 只需要注冊全局Key格式化器的委托即可

JsonSerializerOption.GlobalKeyFormat=(key,parentType,handler)=>
{
if(parentType==typeof(R01_User))
{
return key.Substring(4);
}
return key;
}

這樣,出來的json是這樣的:{"Name":"","Age":""}

同樣, 對于反序列化,我們也同樣應該注冊:

JsonDeserializeOption.GlobalKeyFormat=(key,parentType)=>
{
if(parentType==typeof(R01_User))
{
return "R01_"+key;
}
return key;
}

?

原文地址:https://www.cnblogs.com/1996V/p/10607916.html

.NET社區(qū)新聞,深度好文,歡迎訪問公眾號文章匯總 http://www.csharpkit.com

總結(jié)

以上是生活随笔為你收集整理的开源 , KoobooJson一款高性能且轻量的JSON框架的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。