ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

数据清洗第四章课后操作题

2021-10-07 14:30:57  阅读:172  来源: 互联网

标签:控件 文件 操作题 JSON 点击 课后 按钮 双击 第四章


数据清洗第四章课后操作题
一. CSV文件的抽取
1.打开Kettle工具创建一个csv_extract,并添加“CSV文件输入”控件、“表输出”控件以及Hop连接线,用来实现CSV文件数据的抽取功能。
在这里插入图片描述
2.双击CSV文件输入控件,进入“CSV文件输入”界面,点击浏览,选取文件csv_extract.csv
在这里插入图片描述
3.点击获取字段按钮,Kettle自动检索CSV文件,对文件中的字段类型,格式,长度,精度等属性进行分析。
在这里插入图片描述
在这里插入图片描述
4.双击“表输出”控件,进入表输出界面,点击“新建”按钮,进行配置数据库连接,勾选指定数据库字段复选框,将csv_extract.csv中的字段进行匹配,选择“数据库字段”选项卡。
连接数据库:
在这里插入图片描述
在这里插入图片描述
“输入字段映射”按钮,弹出“映射匹配对话框”,一次选中“源字段”中的和“目标字段”中的字段,再点击Add按钮,将一对映射字段添加至映射框中。
在这里插入图片描述
在这里插入图片描述
点击运行,CSV文件中的数据已经被导入数据表中。
在这里插入图片描述
二.JSON数据的抽取
1.使用Kettle工具创建转换json_extract.json,并添加JSON input控件、“表输出”控件以及Hop跳连接线,用于抽取JSON文件种的Key值为id,field和value的数据,并保存至数据表json中。
在这里插入图片描述
2.配置JSON input控件
双击JSON input控件,进入“JSON 输入”界面。
点击浏览按钮,选择抽取的json_extract.json,点击“增加”按钮,将选择文件添加至“选中文件处”。

在这里插入图片描述
单击“字段”选项卡,进入“字段选项卡”界面,添加要抽取的字段。
在这里插入图片描述

3.双击JSON input2控件,进入“JSON 输入”界面,勾选“源定义在一个字段里?”复选框,在“从字段获取源”后下拉列表中选择字段名,即data。
在这里插入图片描述
4.点击“字段”选项卡,进入“字段”选项卡界面。添加从字段data中抽取的field和value字段。
在这里插入图片描述
5.配置“表输出”控件
双击“表输出”控件,进入“表输出”界面
在这里插入图片描述
6.连接数据库在这里插入图片描述
点击右侧“浏览”按钮,选择输出目标表,即数据表json。
在这里插入图片描述
点击“字段”选项卡,单击“输入字段映射”按钮,弹出“映射匹配”对话框。
在这里插入图片描述
单击“映射匹配”对话框中的“确认”按钮。
在这里插入图片描述
三.XML文件的抽取
1.使用Kettle工具创建转换xml_extract,并添加Get data from XML控件,“表输出”控件,以及Hop跳连接线,用于实现抽取XML文件中的标签testDescription、rowID、v1以及v2中的数据。
在这里插入图片描述
2.双击Get data from XML控件,进入“XML文件输入”界面
在这里插入图片描述
点击“增加”按钮,将所选择的文件路径添加到“选中的文件和目录”处
在这里插入图片描述
点击“内容”选项卡,点击“获取XML文档的所有路径”,添加循环读取路径,即AllRows/Rows/Row。
在这里插入图片描述
在这里插入图片描述
双击表“表输出”控件,进入“表输出”界面。

在这里插入图片描述
点击“浏览”按钮,选择输出的目标表
在这里插入图片描述
勾选“指定数据可字段”复选框,用于将数据表xml字段与XML文件里的字段进行匹配。
在这里插入图片描述

标签:控件,文件,操作题,JSON,点击,课后,按钮,双击,第四章
来源: https://blog.csdn.net/weixin_46986606/article/details/120635423

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有