前嗅ForeSpider数据建表和高级配置界面介绍

比特行者
• 阅读 258476

今天,小编为大家介绍一下,前嗅ForeSpider的数据建表,和高级配置界面,具体内容如下:

一,数据建表

前嗅ForeSpider数据建表和高级配置界面介绍

【数据建表界面】
1.采集表单
数据采集之后需要存入数据库,在ForeSpider中创建的表单,就是数据采集入库的表结构。不同的频道可以使用同一个表单,创建任意多个数据表。

前嗅ForeSpider数据建表和高级配置界面介绍

【采集表单】

前嗅ForeSpider数据建表和高级配置界面介绍

添加表单。

前嗅ForeSpider数据建表和高级配置界面介绍

删除表单。

2.表单配置
用于配置字段属性、采集内容、数据类型、数据长度、高级类型和字段说明。(方法一:快速建表/方法二:自由建表)

前嗅ForeSpider数据建表和高级配置界面介绍

【表单配置】

前嗅ForeSpider数据建表和高级配置界面介绍

添加字段。

前嗅ForeSpider数据建表和高级配置界面介绍

编辑字段。

前嗅ForeSpider数据建表和高级配置界面介绍

上移字段。

前嗅ForeSpider数据建表和高级配置界面介绍

下移字段。

前嗅ForeSpider数据建表和高级配置界面介绍

删除字段。

前嗅ForeSpider数据建表和高级配置界面介绍

保存字段设置。

3.关联数据表
数据表是数据库定义的,实现数据的存储,与表单结构相同。一个表单可以创建几个名称不同的数据表,但是他们的结构(字段名称和属性)都是和该表单一模一样的。(>>更换已连接的数据库)
关联数据表,在对应的表单下勾选数据表保存即可。

前嗅ForeSpider数据建表和高级配置界面介绍

【关联数据表】

二,高级配置
任务属性配置,根据采集目标的不同,进行不同的设置。(不常用功能)

前嗅ForeSpider数据建表和高级配置界面介绍

【高级配置界面】
高级配置包括网站编码、继承方式、OAuth认证、采集映射、独立控制、自动化控制、关联变量、外部数据源共8个部分。

点赞
收藏
评论区
推荐文章
推荐学java 推荐学java
3年前
推荐学java——Spring集成MyBatis
前情回顾到本文,我们已经学习了SSM框架中的和,本文介绍如何将两者结合起来在项目中使用,这也是实际开发中常用的操作,必须掌握,下面开始撸码集成步骤第一步:创建数据库、数据表数据库各位跟随自己爱好建就行,数据表我这里是programmer,字段有这几个:id主键,varchar(64)、自动增长、不为nullname姓名,varchar
Abel617 Abel617
4年前
2秒内向数据库中插入十万条数据?
怎么向数据库中快速插入十万条数据呢,当然得需要对比才能看到效果,今天给大家亲身测了两种方法对比,差别25倍左右1,数据库用sqlserver2008r2,表结构非常简单,四个字段,建数据表的sql代码如下USETestDBGO
lix_uan lix_uan
3年前
Hive调优
Explain查看执行计划在查询语句前加explainsqlexplainselectfromtable;查看详细执行计划explainextendedselectfromtable;建表优化分区表sql创建分区表createtabledeptpartition(deptnoint,dnamest
Wesley13 Wesley13
3年前
mysql数据库中的数据导入与导出
需求:  在本地电脑上的mysql中创建了一个数据库,并且在该数据库中创建了很多表,表中数据比较多;  现在想换一台电脑,但是又不想重新建数据库、建表、造数据。解决方案:  利用mysql提供的命令,在本地将所需数据和表导出成.sql文件;  然后在另外一台电脑中使用mysql提供的命令,将导出的.sql文件导入,这样就能
Stella981 Stella981
3年前
Hive 数据导入HBase的2种方法详解
最近经常被问到这个问题,所以简单写一下总结。Hive数据导入到HBase基本有2个方案:  1、HBase中建表,然后Hive中建一个外部表,这样当Hive中写入数据后,HBase中也会同时更新  2、MapReduce读取Hive数据,然后写入(API或者Bulkload)到HBase1、Hive外部表创
Wesley13 Wesley13
3年前
oracle 快速复制表结构、表数据
1.情景展示  根据现有的表,建一个新的表,要求:新表的结构与原有表的表结构一模一样,如何快速实现?  根据现有的表,建一个新的表,要求:新表的结构、数据与原表一模一样,如何实现快速复制旧表?2.解决方案  只复制表结构  语法:createtablenewTableasselectfro
Stella981 Stella981
3年前
ElasticSearch 使用不同表结构存储时间序列数据的查询效率分析
这里我们使用和之前完全相同的测试数据,来测试elasticsearch存储时间序列的表结构选择问题。一个点一个doc的表结构同样我们以最简单的表结构开始。在elasticsearch中,先要创建index,然后index下有mapping。所谓的mapping就是表结构的概念。建表的配置如下:settings
Wesley13 Wesley13
3年前
MySQL Workbench 使用教程 (三)
Workbench的建立数据库EER模型图1.先看一下模型图建成的样子!(http://static.oschina.net/uploads/space/2014/1027/191505_ZgcG_1861317.png)2.使用Workbench进行数据库建模,包括数据库表、视图等等,建完之后通过F
Wesley13 Wesley13
3年前
mysql区分大小写
两种情况下会区分大小写,1、建表时,表的编码是utf8\_bin(utf8\_general\_ci不会区分大小写),注意是表编码不是数据库编码。区分大小写与数据库编码无关。2、建表后,可以通过binary调整。语句如下:altertable\wl\_testdx\_bin\.\wlt\_testDx\_bin\modify\
Stella981 Stella981
3年前
RoadFlow ASP.NET Core工作流快速入门
RoadFlow新建一个流程分为以下几步:1、建表   在数据库建一张自己的业务表(根据你自己的业务需要确定表字段,如请假流程就有,请假人、请假时间、请假天数等字段),数据表必须要有一个主键,主键类型是(int自增,或者guid(uniqueidentifier)类型)。    !image.png(http://www.r
Stella981 Stella981
3年前
Hadoop Hive基础sql语法
1.DDL操作1.建表2.3.创建简单表4.创建外部表5.建分区表6.建Bucket表7.创建表并创建索引字段ds8.复制一个空表9.显示所有表10.按正条件正则表达式显示表11.修改表结构12.表添加一列13.添加一列并增加列字段注释14.更改表名15.删除列16.增加删除分区17.重命名表18.修改列的名字类型位置注