对一般VBA开发群体来说,处理json、xml结构的数据源,在VB6的世界里,是一件非常不容易的事情,隐约记得当年自己从哪里找到了一个使用字典实现的json解释的函数,实在非常稀有。
在.Net的世界里,这些却变得如此简单,易用,本篇对普通.Net开发来说,可能是很陈旧的老知识点,希望对VBA开发者能有一点启发。
在上一篇38波的开源代码中,大量的json解释的代码,其中用到的是大名顶顶的Newtonsoft.Json类库。
因为Excel催化剂绝大部分使用场景为数据采集工作,对采集到的json的数据进行数据转换,变为结构化的可供数据库和Excel用户使用的标准数据表结构。
所以只需用到查询的功能为主,无需进行json数据的生成(json数据生成也是很简单的序列化一下即可)。
数据查询,在关系数据库里是SQL为王,在.Net世界里,当然是linq。所以对json的查询,就变成和linqtoxml的体验无异了(强烈建议学习linq的知识,并顺带学习linqtoxml,投入产出比非常高,大量的场景可使用)。
好的类库,有大量的学习材料和文档,Newtonsoft.Json也不例外,以其看Excel催化剂的蹩脚代码,不如花时间看看类库作者写的示例文档。
Newtonsoft.Json将对json的访问变为类似对xml访问一样流畅自如,都是可通过linq查询。
当然,在面向对象编程的思想下,更为直接的是将json直接转换为某个类对象实例,直接用LinqToObject来访问就可以,也就一句代码,即可将json字符反序列化为实例对象。
有了实例化,就可以有强类型智能显示代码的功能,写起代码来,更加飞一般的感觉。
说到反序列化,那肯定也有序列化,也是一两种代码的事情,可以轻松将配置文件信息序列化为json保存到本地。
当然还有一些小细节微调,如对原本返回的日期格式不满意,可以用以下代码去控制它。
var timeConverter = new IsoDateTimeConverter { DateTimeFormat = "yyyy-MM-dd HH:mm:ss" };
string str = JsonConvert.SerializeObject(result, Formatting.Indented,timeConverter);
同样地如果json字符串要求序列化的结果为C#关键字时,可以用JsonProperty这样处理它
class PostData
{
public string api_name { get; set; }
public string token { get; set; }
//params为C#关键字不能用
[JsonProperty(PropertyName = "params")]
public Dictionary<string, string> Params { get; set; }
public string fields { get; set; }
}
在Newtonsoft.Json的世界,json和xml是兄弟,是左右手,随时想转换都同样只需一句代码即可,所以Excel催化剂实现功能过程中,也懒得对xml字符串进行表格化转换了,实在xml见到的机会越来越少了,实在有,直接转成json,再作处理就好。
xml有xpath的查询,在json的世界,也有jsonPath,语法很接近于xpath,学这些通用性知识,很容易类比到其他同类的知识上,学习回报很不错,同样推崇的当然还有正则,那是后话。
对jsonPath感兴趣的,可以在这个网站上学习。https://goessner.net/articles/JsonPath/
结语
作为数据分析工作者的业余开发,不能对开发的细节面面俱到,仅将自己开发Excel催化剂过程中,会遇到的一些细节,给大家一同分享,希望对大家有所帮助。
技术交流QQ群
QQ群名:Excel催化剂开源讨论群, QQ群号:788145319
关于Excel催化剂
Excel催化剂先是一微信公众号的名称,后来顺其名称,正式推出了Excel插件,插件将持续性地更新,更新的周期视本人的时间而定争取一周能够上线一个大功能模块。Excel催化剂插件承诺个人用户永久性免费使用!
Excel催化剂插件使用最新的布署技术,实现一次安装,日后所有更新自动更新完成,无需重复关注更新动态,手动下载安装包重新安装,只需一次安装即可随时保持最新版本!
Excel催化剂插件下载链接:https://pan.baidu.com/s/1Iz2_NZJ8v7C9eqhNjdnP3Q
取名催化剂,因Excel本身的强大,并非所有人能够立马享受到,大部分人还是在被Excel软件所虐的阶段,就是头脑里很清晰想达到的效果,而且高手们也已经实现出来,就是自己怎么弄都弄不出来,或者更糟的是还不知道Excel能够做什么而停留在不断地重复、机械、手工地在做着数据,耗费着无数的青春年华岁月。所以催生了是否可以作为一种媒介,让广大的Excel用户们可以瞬间点燃Excel的爆点,无需苦苦地挣扎地没日没夜的技巧学习、高级复杂函数的烧脑,最终走向了从入门到放弃的道路。
最后Excel功能强大,其实还需树立一个观点,不是所有事情都要交给Excel去完成,也不是所有事情Excel都是十分胜任的,外面的世界仍然是一个广阔的世界,Excel只是其中一枚耀眼的明星,还有其他更多同样精彩强大的技术、工具等。*Excel催化剂也将借力这些其他技术,让Excel能够发挥更强大的爆发!
关于Excel催化剂作者
姓名:李伟坚,从事数据分析工作多年(BI方向),一名同样在路上的学习者。
服务过行业:零售特别是鞋服类的零售行业,电商(淘宝、天猫、京东、唯品会)
技术路线从一名普通用户,通过Excel软件的学习,从此走向数据世界,非科班IT专业人士。
历经重重难关,终于在数据的道路上达到技术平原期,学习众多的知识不再太吃力,同时也形成了自己的一套数据解决方案(数据采集、数据加工清洗、数据多维建模、数据报表展示等)。
擅长技术领域:Excel等Office家族软件、VBA&VSTO的二次开发、Sqlserver数据库技术、Sqlserver的商业智能BI技术、Powerbi技术、云服务器布署技术等等。
2018年开始职业生涯作了重大调整,从原来的正职工作,转为自由职业者,暂无固定收入,暂对前面道路不太明朗,苦重新回到正职工作,对Excel催化剂的运营和开发必定受到很大的影响(正职工作时间内不可能维护也不可能随便把工作时间内的成果公布于外,工作外的时间也十分有限,因已而立之年,家庭责任重大)。
和广大拥护者一同期盼:Excel催化剂一直能运行下去,我所惠及的群体们能够给予支持(多留言鼓励下、转发下朋友圈推荐、小额打赏下和最重点的可以和所在公司及同行推荐推荐,让我的技术可以在贵司发挥价值,实现双赢(初步设想可以数据顾问的方式或一些小型项目开发的方式合作)。