国家开放大学

实验3 网页数据获取 数据获取是数据生命周期中的第一个环节，数据抽取过程是搜索全部数据源，按照某种标准选择合乎要求的数据，并将其进行适当的格式转换之后，传送到目的地中存储。为了克服被抽取的数据源分布广泛、异构、非结构化等问题，数据抽取技术和抽取工具应运而生。学习数据科学与大数据技术不仅需要掌握其理论，更重要的是能够运用工具和方法来完成数据的获取。 1.实验目...

实验4 大数据去重 1.实验目的 通过Hadoop数据去重实验，学生可以掌握准备数据、伪分布式文件系统配置方法，以及在集成开发环境Eclipse中实现Hadoop数据去重方法。 2.实验要求 了解基于Hadoop处理平台的大数据去重过程，理解其主要功能，并能够在Hadoop环境下独立完成。 （1）制订实验计划。 （2）准备数据。 （3）伪分布式文件系统配置。...

实验5 大数据可视化 1.实验目的 通过大数据可视化的实验，学生可以掌握Echarts.js可视化方法，直方图、饼图和标签云可视化方法，进而为大数据分析结果展现奠定基础。 2.实验要求 了解数据可视化技术的主要内容，理解Echarts.js的主要功能，并能够独立完成以下内容。 （1）构建Echarts.js环境。 （2）准备实验数据。 （3）柱状图。 （4）...

实验1：Linux系统下Hadoop安装与使用（4学时） 目的：演示Linux系统下如何使用Hadoop进行一些常用操作 内容： 1. Linux虚拟机的安装 2. 常用的Linux命令 3. Linux虚拟机环境下完成Hadoop伪分布式环境的搭建 4. 常用的Hadoop操作 要求：理解Hadoop生态系统及其组件，熟悉Linux系统下Hadoop的安装...

实验2：MapReduce的应用（4学时） 目的：在Hadoop平台编写基本的MapReduce 程序实现数据分析 内容： 1. 从分布式文件系统中读入数据 2. 执行Map任务执行中间结果 3. 通过Shuffle阶段把中间结果分区排序整理后发送给Reduce任务 4. 执行Reduce任务得到最终结果并写入分布式文件系统 要求：理解MapReduce的工...

题目序列是随机的，请按题目关键词查找（或按快捷键Ctrl+F输入题目中的关键词，不要输入整个题目） 题目：从事建设工程活动的人员，要通过国家任职资格考试、考核，由建设行政主管部门注册并颁发（ ）证书。 A.学历 B.学位 C.资格 D.聘用 答案：资格 题目：当裂缝的发生不是由于砌体受荷造成的，称之为（ ）。 A.强度裂缝 B.非受力裂缝 C.沉降裂缝 D....

实验3：数据可视化（6学时） 目的：展示使用Python或PySpark进行数据可视化的过程 内容： 1. Python的展示和简单介绍 2. 数据的读入与简介 3. 数据的预处理 4. 选择合适的可视化图形 5. 图形解读、分析和结论 要求：理解如何通过数据可视化的技术进行探索数据的特征和模式，发现数据中潜在的价值信息

实验4：大数据的分析与挖掘（4学时） 目的：展示使用Python或PySpark进行数据可视化的过程 内容： 1. Python的展示和简单介绍 2. 数据的读入与简介 3. 数据的预处理 4. 选择合适的可视化图形 5. 图形解读、分析和结论 要求：理解如何通过数据可视化的技术进行探索数据的特征和模式，发现数据中潜在的价值信息

试题 1 某钢结构工程全部采用卢森堡钢材，所有钢材均应具有（ ）。 a. 商检报告 b. 环保认证证书 c. 质量认证标志 d. 绿色节能标志 试题 2 某项目施工过程中，分包人负责的工程质量出现问题，总承包人应（ ）。 a. 承担连带责任 b. 根据问题成因进行责任划分和承担 c. 无责任 试题 3 设计交底会议纪要、图纸会审纪要经（ ）签认，即成为施工和...

题目序列是随机的，请按题目关键词查找（或按快捷键Ctrl+F输入题目中的关键词，不要输入整个题目） 题目：（ ）被称为“第四代”新型节能建筑门窗。 A.钢门窗 B.铝合金门窗 C.木门窗 D.U-PVC硬质塑料门窗 答案：U-PVC硬质塑料门窗 题目：（ ）传力线路明确，受力合理，适用于跨度较大或荷载较大的楼梯。 A.板式楼梯 B.梁式楼梯 C.墙承式楼梯 ...