数据采集的五种方法有:1、调查法;2、观察法;3、实验方法;4、文献检索;5、网络信息收集。调查法分为普查和抽样调查两大类,观察法是指观察法是指研究者根据一定的研究目的、研究提纲或者观察表,用自己的感官和辅助工具去直接观察被研究对象,从而获得资料的一种方法。
1、调查法
调查法分为普查和抽样调查两大类。
普查:普查是指一个国家或者一个地区为详细调查某项重要的国情、国力,专门组织的一次性大规模的全面调查,其主要用来调查不能够或不适宜用定期全面的调查报表来收集的资料,来搞清重要的国情、国力。普查是为了某种特定的目的而专门组织的一次性的全面调查。普查一般是调查属于一定时点上的社会经济现象的总量,但也可以调查某些时期现象的总量,乃至调查一些并非总量的指标。普查涉及面广,指标多,工作量大,时间性强。为了取得准确的统计资料,普查对集中领导和统一行动的要求最高。
抽样调查:抽样调查是一种非全面调查,它是从全部调查研究对象中,抽选一部分单位进行调查,并据以对全部调查研究对象做出估计和推断的一种调查方法。显然,抽样调查虽然是非全面调查,但它的目的却在于取得反映总体情况的信息资料,因而,也可起到全面调查的作用。
2、观察法
观察法是指研究者根据一定的研究目的、研究提纲或者观察表,用自己的感官和辅助工具去直接观察被研究对象,从而获得资料的一种方法。科学的观察法具有目的性、计划性、系统性、可重复性。
观察法在设计调研中,通常被应用于调研早期,设计的本源是解决人们的生活、工作中遇到的问题或者创造更加良好的体验,所以,设计不是设计师一排脑子,不是设计师臆造出来的。设计师必须了解使用者的方方面面(生活、工作、习惯、爱好、文化……)。
3、实验方法
实验方法需要研究者真正设计实验,并记录结果、整合为数据,服务于后期的数据分析与挖掘工作。
实验的设计需要满足一个大原则:有实验组与对照组。实验组是只有要研究的变量发生变化的组;对照组是保持变量不变的组。这样,通过控制变量的方法,能得到观测数据。
通过实验得到的一手数据叫做实验数据。调查数据是针对自然现象的。比如说,植物背光生长的快慢、小白鼠对食物的记忆规律等等。
4、文献检索
文献检索(Document Retrieval)即从一个文献集合中查找出专门包含所需信息内容的文献,是以文献为检索对象的信息检索类型。文献检索结果提供的是与用户的信息需求相关的文献的线索或原文。
近代认为文献是指具有历史价值的文章和图书或与某一学科有关的重要图书资料,随着现代网络技术的发展,文献检索更多是通过计算机技术来完成。
5、网络信息收集
“网络信息收集”是指利用互联网搜索引擎技术实现有针对性、行业性、精准性的数据抓取,并按照一定规则和筛选标准进行数据归类,并形成数据库文件的一个过程。
网络信息收集采用的技术基本上是利用垂直搜索引擎技术的网络蜘蛛(或数据采集机器人)、分词系统、任务与索引系统等技术进行综合运用而完成;随着互联网技术的发展和网络海量信息的增长,对信息的获取与分拣成为一种越来越大的需求。
延伸阅读
数据采集的含义和目的
一般来说,数据采集是指尽可能地收集目标对象,设备,服务等数据产生方的数据,传输汇总到相应区域,为之后的数据挖掘分析提供基础。
- 数据目标:数据目标可以从横向和纵向两个维度进行展开。横向就是指我们采集数据的维度有哪些,比如一些用户属性数据,行为数据,系统数据等等。纵向则是从数据产生传播链路上展开,比如远端设备和应用数据,云端服务数据等。稍微思考下,不难得出这个结论:越接近链路上游的数据价值越大,同时越接近链路上游的数据非结构化程度越高。
- 数据传输:数据传输决定了数据的及时性和稳定性。同样的,越接近链路上游的数据稳定性越差越易丢失,越接近链路上游的数据及时性越强。
文章标题:数据采集的五种方法有哪些,发布者:Z, ZLW,转载请注明出处:https://worktile.com/kb/p/47648