常用的"小脚本"-json数据处理
小背景:
我们公司项目中的小脚本是一些工具类,比如常用的是MapUtil工具类的一些方法
写公司的MapUtil工具类的方法要注意,方法名的命名,因为方法名,在公司的项目的某个业务流程有对方法名的进行String截取开头字符串然后进行判断
一、工具的使用推荐
1、获取到请求url(接口的形式-一般数据都是json)
推荐谷歌浏览器,当然其他浏览器也可以的
在network 下,刷新获取目标url

2、获取到目标url(是json数据格式)
推荐火狐浏览器,直接在火狐的地址栏搜索目标url,就可以得到格式美化后的json数据了

3、小细节
(1) 使用谷歌浏览器,获取目标url进行复制的时候,有一个小细节-选择copy,不要选copy value
- 因为copy value 会对url中的某些参数进行utf8格式转化

二、网页的Json数据和java代码的Map数据
真实业务需求中的数据结构比较复杂,多层嵌套,比如请求url的json数据:map中嵌套list,然后list的每个元素是map,这个map又嵌套了map。
小细节:要注意嵌套的是map还是list(因为0、1、2、3、4... 既可能是索引下标,也可能只是key):
- 通过火狐浏览器折叠后的形状做判断,比如{} 则是map,如果是[] 说明是list
- 如果是idea 调试,也是要注意debug 模式下的类型提示。因为debug 模式下,比如set类型的数据结构,有5个元素,它会给0、1、2、3、4存储一下元素然后再展示给你观察,但是要是你注意到提示的类型是Set类型的话,你就清楚在内存中,存储的绝对不是0、1、2、3、4 这样连续存储。
1、网页的json数据
例子:

json 数据格式特点:
key:value
键值对之间是冒号形式
■ json 数据的本质:
就是字符串,json字符串。
2、java代码的Map数据

Map 数据格式特点:
key=value
键值对之间是等号形式
3-1、业务处理-json和map的相互转换【json 序列化、反序列化】
(1) 推荐使用: JsonUtil 工具类
其实就是封装了ObjectMapper 关于json和map的相互转换。toObject方法封装的是readValue方法,toJson封装的是writeValueAsString方法。
json转换成map:JsonUtil.toObject(String content, Class valueType) 返回值是一个 T 类型的
或者 JsonUtil.toObject(String content, TypeReference valueTypeRef) 返回值是一个 T 类型的
▷ 返回值还是T 类型(相当于Object类型),要想进一步转换map,可以强转一下
map转成json:JsonUtil.toJson(Object obj)
■ 例子-json转map:
/**
* json字符串(非常普通的key:value)转成map
*/
String json = createJsonString("user","xiaoming");
Object object1 = JsonUtil.toObject(json, new TypeReference<Object>() {});//或者使用方法JsonUtil.toObject(json, Object.class);效果也是一样的
Map<String, Object> map1 = (Map<String, Object>) object1;
System.out.println(map1.toString());
System.out.println(map1.getClass());
/*创建json字符串的方法*/
public static String createJsonString(String key, Object value) {
JSONObject jsonObject = new JSONObject();
jsonObject.put(key, value);
return jsonObject.toString();
}
/**
* json字符串(listmap)转成ListMap
*/
public static List<Map<String, Object>> toListMap(String json) {
List<Object> list = JsonUtil.toObject(json, new TypeReference<List<Object>>() {});
List<Map<String, Object>> listw = new ArrayList<Map<String, Object>>();
for (Object object : list) {
Map<String, Object> ret = (Map<String, Object>) object;
listw.add(ret);
}
return listw;
}
/**
* map转成json字符串
*/
Map<String, Object> oldMap1 = new HashMap<>();
oldMap.put("1", "一");
String json = JsonUtil.toJson(oldMap);
System.out.println(json);
(2) 直接使用:ObjectMapper
map 在java中,可以划分到更大的范围进行处理-Object进行处理
json转换成map:
readValue(String content, Class valueType) 返回值是一个 T 类型的
或者 readValue(String content, TypeReference valueTypeRef) 返回值是一个 T 类型的
▷ 返回值还是T 类型(相当于Object类型),要想进一步转换map,可以强转一下
map转成json:
writeValueAsString(Object obj)
/**
* map转成json字符串
*/
Map<String, Object> oldMap1 = new HashMap<>();
oldMap.put("1", "一");
ObjectMapper objectMapper = new ObjectMapper();
String json = objectMapper.writeValueAsString(oldMap);
System.out.println(json);
3-2、业务中,将map转成了json字符串后,想获取json字符串中的key或者value
- 如果是数据非常简单,量非常小,可以使用String的相关截取合并函数,但是不建议,因为json数据的key长度不是固定的,截取非常麻烦
思路:将json字符串转成json(节点)对象
节点:这块理解和dom元素的node是一样的。每个元素都可以理解位一个节点。
■ 例子:
细节:如果是一个JsonNode数组,使用jsonNode.elements();读取数组中每个node, 如果不是JsonNode数组,使用jsonNode.elements();返回jsonNode的values
//首先把嵌套map转换json字符串
String jsonStr = mapper.writeValueAsString(oldMap);
//把json字符串转换jsonNode节点对象,通过jsonNode可以获取到想要的字段
JsonNode jsonNode = mapper.readValue(jsonStr, JsonNode.class);
//迭代获取到jsonNode的values
Iterator<JsonNode> elements = jsonNode.elements();
while (elements.hasNext()) {
JsonNode node = elements.next();
System.out.println(node.toString());
}
//也可以迭代获取到jsonNode的keys
Iterator<String> keys = jsonNode.fieldNames();
while (keys.hasNext()) {
String key = keys.next();
System.out.println("key键是:" + key);
}
//通过key 获取到 value
JsonNode jNode = jsonNode.get(key);//得到value,value可能是普通的值,也可能是map
//获取到键值对
Iterator<Map.Entry<String,JsonNode>> jsonNodes = jsonNode.fields();
while (jsonNodes.hasNext()) {
Map.Entry<String, JsonNode> node = jsonNodes.next();
System.err.println("遍历获取key:"+node.getKey());
System.err.println("遍历获取值:"+node.getValue().toString());
}
- JsonNode节点对象(看出Object)转成 josn 字符串,使用JsonUtil.toJson(jsonNode) 方法即可。
三、关于网页相关的常识
1、网页打不开
原因:可能是网站是在外网,网速受到限制;也可能是该网页的大小太大了(常见情况就是该网页有非常非常多的图片),并且网站还是在外网;
解决:vpn
2、网页打开慢时,如何查看网页加载的大小和时间

transferred over network和 resources loaded by the page 区别:
其实和content-encoding: gzip相关;两者的差别就在于压缩上,transferred 是前端页面加载的所有资源经过解压之后的原始大小。
■ 还可以查看某个请求的大小,比如图片请求的大小
一般默认下,直接查看就可以啦(毕竟看完也只是做个大概预判)

- 如果想更精准的查看某个请求的情况:

3、善用network 提供的过滤项
(1) 通过过滤,保留接口请求

(2) 直接通过关键词过滤

4、关于刷新获取到请求url
关键:看的是页面的布局,例如滚动布局,为了获取到url,你需要滚动页面进行刷新;
通用:按F5刷新。
具体情况具体分析,例如你想获得某个点击事件的url,打开network,那就点击一下(按钮),然后观察network新增了一条url。
5、快速判断页面的数据是同步加载还是异步加载
使用谷歌浏览器,禁止js,如果禁止js后还可以看到页面数据,则是同步数据,否则就是异步数据。

如果本文对你有帮助的话记得给一乐点个赞哦,感谢!
常用的"小脚本"-json数据处理的更多相关文章
- JavaScript DOM 编程艺术(第二版) 常用JS小脚本
function addLoadEvent(func) { var oldonload = window.onload; if (typeof window.onload != 'function') ...
- JavaScript常用的Hook脚本
JavaScript常用的Hook脚本 本文Hook脚本 来自 包子 页面最早加载代码Hook时机 在source里 用dom事件断点的script断点 然后刷新网页,就会断在第一个js标签,这时候就 ...
- 第一个Mac shell 小脚本
大多数程序员都喜欢偷懒的,我也不例外.相信好多Android开发的coder 在网络http请求方面,会浪费很多时间在接口调试这里..有时候,自己写了一个小测试,行还好,不行的话,还要跟写后台的哥们一 ...
- 【转】常用的shell脚本
from:http://blog.sina.com.cn/s/blog_4152a9f501013r6c.html 常用的shell脚本 (2012-10-10 22:09:07) 转载▼ 标签: 杂 ...
- 【多端应用开发系列1.1.1 —— Android:使用新浪API V2】服务器Json数据处理——Json数据概述
[前白] 一些基础的东西本系列中就不再详述了,争取尽量写些必不可少的技术要点. 由于本系列把Web Service 构建放到了第二部分,Android项目就采用新浪微博API v2作为服务器端. [原 ...
- 自动FTP的小脚本
自动FTP的小脚本 使用以下脚本,可以实现自动FTP,将你需要的文件传送到需要的地方,或者将需要的文件从某个地方抓取下来. cd /PATH_YOU_WANT_TO_UPLOAD(DOWNLOAD) ...
- python 小脚本升级-- 钉钉群聊天机器人
一则小脚本(工作中用) 在这篇文章中写的监控的脚本,发送监控的时候 是利用的邮箱,其实在实际,邮箱查收有着不方便性,于是乎升级, 我们工作中,经常用钉钉,那么如果要是能用到钉钉多好,这样我们的监控成功 ...
- 常用模块(random,os,json,pickle,shelve)
常用模块(random,os,json,pickle,shelve) random import random print(random.random()) # 0-1之间的小数 print(rand ...
- Mac shell 小脚本开发(转)
大多数程序员都喜欢偷懒的,我也不例外.相信好多Android开发的coder 在网络http请求方面,会浪费很多时间在接口调试这里..有时候,自己写了一个小测试,行还好,不行的话,还要跟写后台的哥们一 ...
- 常用数据存储格式之json
常用数据存储格式介绍 JSON: JavaScript Object Notation(JavaScript 对象表示法) JSON 是存储和交换文本信息的语法.类似 XML. JSON 比 XML ...
随机推荐
- python Modbus 进行通讯时抛出Modbus Error: Exception code = 2
源码: import modbus_tk from modbus_tk import modbus_tcp import modbus_tk.defines as cst PORT = 'com1' ...
- uniapp安装和使用
工具安装 开发uni-app需要安装HBuilder X. 下载地址:https://www.dcloud.io/hbuilderx.html. 下载成功后直接解压即可 创建第一个uni-app 点击 ...
- $_GET方法踩坑
背景 写代码时,遇到一个奇怪的问题:小程序卡券解码接口老是报解码失败,苦寻了一个小时,发现原来是url参数经过thinkphp的I方法被过滤掉,而且涉及到PHP原生的$_GET 原因 I方法底层是原生 ...
- kali之pip和pip3安装
安装pip 首先安装setuptools,setuptools是 Python Enterprise Application Kit(PEAK)的一个副项目,它 是一组Python的 distutil ...
- cmd无限弹窗
记一次写 .bat 文件时犯的低级错误,搞的重启了好几次才发现问题所在 如下 文件名 和 批处理 内容 会造成 无限弹出cmd窗口 原因是一般情况下会启动系统的 cmd.exe,而此处用的简写,在执行 ...
- 轻松解决 CSS 代码都在一行的问题
前言 最近在做博客园的界面美化,用的是博客园[guangzan]的开源项目,配置超级简单,只需要复制粘贴代码就好啦. 但在粘贴 CSS 代码时遇到一个问题,那就是所有代码都挤在了一行,没有一点排板的样 ...
- Windows 安装 Anaconda
下载 anaconda 官网 https://repo.anaconda.com/archive/ 国内镜像 https://mirrors.bfsu.edu.cn/anaconda/archive/ ...
- Linux音频采集和在国产化平台中遇到的坑(一)
Linux音频采集和在国产化平台中遇到的坑(一) 最近在做一个国产化平台的软件项目的开发,是基于国产芯片的银河麒麟系统.其中有一个重要模块,是采集和播放音频数据,播放不用多说了,采集的话,包括采集麦克 ...
- C# 线程查漏补缺
进程和线程 不同程序执行需要进行调度和独立的内存空间 在单核计算机中,CPU 是独占的,内存是共享的,这时候运行一个程序的时候是没有问题.但是运行多个程序的时候,为了不发生一个程序霸占整个 CPU 不 ...
- 三种循环的区别-break语句
三种循环的区别 循环语句的区别 for 和 while 的小区别: 控制条件语句所控制的那个变量,在for循环结束后,就不能再被访问到了,而while循环结束还可以继 续使用,如果你想继续使用,就用w ...