kettle 利用 HTTP Client 获取猫眼电影API近期上映相关信息，并解析json

前言
Kettle 除了常规的数据处理之外，还可以模拟发送HTTP client/post ，REST client。

实验背景
这周二老师布置了一项实验：

建立一个转换，实现一个猫眼API热映电影的json，生成为xls文件。
猫眼的热门电影接口为： http://m.maoyan.com/#movie，从里面找到API接口：http://m.maoyan.com/ajax/movieOnInfoList。需要获取里面的：电影名、评分、主演、信息。

处理流程
我使用的是kettle的HTTP GET 请求访问了猫眼电影提供的接口

HTTP Client 组件在kettle中的位置是：

kettle 的处理流程为：

参数设置

HTTP Client 为设置请求，HTTP client 通过url调用接口，有两种方式。第一种是直接给定 url，第二种通过步骤从前一步当中传 url 过来。
调用之后返回的数据一般会以json的形式存在一个字段当中。我们可以通过设定“结果字段名”对获取后的 json 进行命名，方便下面操作。

 

在调用HTTP client 时如果被拒绝访问时可以添加请求头。

kettle 解析json
kettle 解析json主要通过 输入内的组件 json input 。
使用该组件时，必须保证解析的json的格式完全符合自己编写的解析规则。
读取本地文件解析无需勾选 源定义在一个字段里 。
勾选之后可以从上个步骤当中获取包含json的字段 ，对其解析。该字段一般会是 http client 的 结果输出字段名 。

HTTP client 解析时json 结构未知,需要我们自己书写解析规则。
以下面的json 为例 ，我们需要获取 results 中的nm 、star、sc、showInfo、rt等信息对应的json解析规则如下