数据采集的方法有哪些.docx

上传人:乾*** 文档编号:12640297 上传时间:2022-05-30 格式:DOCX 页数:6 大小:160.26KB
下载 相关 举报
数据采集的方法有哪些.docx_第1页
第1页 / 共6页
数据采集的方法有哪些.docx_第2页
第2页 / 共6页
数据采集的方法有哪些.docx_第3页
第3页 / 共6页
数据采集的方法有哪些.docx_第4页
第4页 / 共6页
数据采集的方法有哪些.docx_第5页
第5页 / 共6页
点击查看更多>>
资源描述

数据采集的方法一、基本方法数据采集根据采集数据的类型可以分为不同的方式,主要方式有:传感器采集、爬虫、录入、导入、接口等。(1) 传感器监测数据:通过传感器,即现在应用比较广的一个词:物联网。通过温湿度传感器、气体传感器、视频传感器等外部硬件设备与系统进行通信,将传感器监测到的数据传至系统中进行采集使用。M女闻戦第睾绥精联!II议丸何諛据睪奧強块PLC皿丸同IS墜餐握崎罐(2) 第二种是新闻资讯类互联网数据,可以通过编写网络爬虫,设置好数据源后进行有目标性的爬取数据。(3)第三种通过使用系统录入页面将已有的数据录入至系统中。(4)第四种方式是针对已有的批量的结构化数据可以开发导入工具将其导入系统中。(5)第五种方式,可以通过API接口将其他系统中的数据采集到本系统中。二、大数据技术的数据采集(1) 离线采集:工具:ETL;在数据仓库的语境下,ETL基本上就是数据采集的代表,包括数据的提取(Extract)、转换(Transform)和加载(Load)。在转换的过程中,需要针对具体的业务场

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 重点行业资料库 > 商业租赁

Copyright © 2018-2021 Wenke99.com All rights reserved

工信部备案号浙ICP备20026746号-2  

公安局备案号:浙公网安备33038302330469号

本站为C2C交文档易平台,即用户上传的文档直接卖给下载用户,本站只是网络服务中间平台,所有原创文档下载所得归上传人所有,若您发现上传作品侵犯了您的权利,请立刻联系网站客服并提供证据,平台将在3个工作日内予以改正。