数据采集
日志数据采集 内部的各类日志会被采集并发送到SLS日志服务系统中进行统一的存储和加工，日志数据主要包括： 审计日志：用于记录用户的所有的操作行为，例如DDL操作和DML操作等。查询详情日志：用于记录一条查询在执行过程中的详细信息，...
采集数据
本文为您介绍如何通过DataWorks采集日志数据至EMR引擎。前提条件开始本文的操作前，请准备好需要使用的环境。详情请参见准备环境。背景信息根据本次实验模拟的场景，您需要分别新建OSS数据源、RDS数据源，用于存储数据。同时需要新建私有...
采集数据
本文为您介绍如何通过DataWorks采集日志数据至MaxCompute。背景信息根据本次实验模拟的场景，您需要分别创建OSS数据源和RDS数据源，并准备好相应的数据表。说明 您可以直接使用本实验提供的数据源，也可以使用自己的数据源。因本实验提供的...
基于OSS+MaxCompute构建数据仓库
将物联网数据上传到OSS。具体操作，请参见上传文件。您可以使用任何数据集执行测试。本示例在OSS上准备了一批CSV数据，Endpoint为oss-cn-beijing-internal.aliyuncs.com，Bucket为oss-odps-test，数据文件的存放路径为 demo/vehicle.csv。...
数据分析
物联网数据分析接口的每秒请求数（QPS）最大限制为1，所以当业务服务中配置数据分析节点后，该服务接口的QPS最大限制为1。有关物联网数据分析接口使用的限制说明，请参见API调用相关限制。节点配置 在业务逻辑编辑页面的节点中，选择对应...
物联网设备数据上云存储
实现物联网设备系统的开发和管理、数据采集、数据上报、数据存储和分析的一体化方案， 构建智能物联网平台。架构参考“物联网平台+TSDB”方案的实现架构如下：物联网设备通过 IoT 套件设备连接管理。设备数据通过规则引擎的无缝路由传到 ...
数据采集2.0
注意事项数据采集功能会在实例应用创建完成后自动开通数据，目前主要指终端用户对搜索结果的行为反馈数据采集，目前主要指通过开放搜索SDK上报搜索行为数据（Server端），App端、Web暂不支持，敬请期待数据采集2.0相较于老的数据采集功能，...
数据采集概述
日志服务支持采集服务器与应用、开源软件、物联网、移动端、标准协议、阿里云产品等多种来源的数据。本文列举了日志服务所支持的数据来源。数据来源日志服务支持的数据来源如下： 类别来源接入方式更多应用程序输出Logtail查询分析程序日志...
数据分析
该组件接入了物联网数据分析，支持导入产品，以表格形式展示产品不同时间段的设备数据统计信息，包括更新时间、设备名称和设备属性统计值（最大值、最小值、平均值、累计值）。本文介绍数据分析组件的详细配置方法。步骤一：添加组件 创建...
实时数据采集
本文为您介绍如何使用智能制造平台AICS实时数据采集模块。创建通道登录工业数据中台IGate。在通道管理页面，单击右上角新增通道按钮。通道是测点数据的来源，如果不使用IGate主动采集则不需要添加通道，可使用默认提供的平台标准通道，用...
什么是物联网数据分析
物联网数据分析LA（Link Analytics）是阿里云为物联网开发者提供的设备智能分析服务，全链路覆盖了设备数据采集、管理（存储）、清洗、分析等环节，有效降低了数据分析门槛，实现了设备数据与业务数据的融合分析透视。物联网数据分析可与...
数据
数据功能包括会员分析、订单分析，帮助您分析会员属性、行为和订单数据。1 会员分析会员分析用来统计不同社交渠道下的会员注册量，会员注册分布，会员来源分布，会员等级分布，积分累计发放/消耗/未使用情况，会员的积分获取/使用情况，...
数据采集2.0 SDK
数据采集SDKSDK功能简介数据采集文档推送类。管理搜索应用的数据采集文档推送，包含单条推送文档、批量推送文档等。Java&SDK&版本说明PHP& SDK&相关下载Python&SDK&行为数据推送DemoGo&SDK&行为数据推送DemoC#SDK& 行为数据推送Demo类名：...
数据报表概述
您可以使用物联网数据服务的报表功能，根据不同数据来源，创建和管理工作簿。通过数据分析组件，为工作簿制作丰富的数据服务报表，以助您更好地分析和处理数据。数据报表功能支持以不同的数据维度创建工作簿，并为工作簿创建报表，通过报表...
推送采集数据
指的是 opensearch 应⽤名称dataCollectionName 指的是数据采集名称，默认为 opensearch 应⽤名称dataCollectionType 指的是数据采集类型，为 USER、ITEM_INFO、BEHAVIOR、INDUSTRY_SPECIFIC 四种类型之一以上省略了请求 Header 参数，省略...
采集公网数据
应用场景 公网数据采集包含移动端、外部服务器、网页和设备数据的采集，采集完成后需要进行实时计算、数据仓库等数据应用。方案1：前端服务器+Kafka 由于Kafka不提供RESTful协议，更多是在集群内使用，因此一般需要Nginx服务器做公网代理，...
新建数据采集接口
Tracking使用数据采集服务的流程如下：配置数据采集渠道（App、小程序、Web）接口，并获取AccessKey，具体操作请参见下文。获取Quick Tracking的SDK，并使用上一步中获得的AccessKey进行数据采集程序的开发与部署。SDK和程序开发规范，请...
数据智能概述
物联网数据服务提供数据智能功能，协助您更好的解读设备数据，了解设备运行状况。功能简介算法实例通过创建算法实例，来分析设备数据。使您能及时的掌控设备运行状态或者监测设备状况。算法模板物联网平台提供算法模板供您使用，您可以查看...
数据指标概述
物联网平台数据服务从预置指标和自定义指标维度管理数据指标，...域管理物联网数据服务默认提供了产品和设备两个指标域，以便您从不同视角分析指标数据。其中，设备是产品的子域。数据指标的应用数据指标可应用于以下功能：数据API数据可视化
服务器数据采集方案概述
针对这些数据，可以根据业务的需求和环境，选择对应的方案进行数据采集并传输到Elasticsearch服务。本文对服务器数据采集方案进行了汇总。相关文档 方案描述 阿里云Elasticsearch数据采集解决方案 本文提供Beats、Logstash、语言客户端和...
开启数据采集功能
CloudLens for ALB支持一键开启数据采集功能，用于采集ALB访问日志。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建应用型负载均衡实例。具体操作，请参见创建应用型负载均衡。已创建日志服务Project和Logstore。具体操作...
开启数据采集功能
CloudLens for PolarDB支持一键开启数据采集功能，用于采集PolarDB MySQL集群的审计日志、慢查询日志、错误日志和性能指标。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建PolarDB MySQL集群。具体操作，请参见购买按量...
数据采集常见问题
本文列举日志服务数据采集常见问题。Logtail基本问题Logtail采集日志失败的排查思路如何使用Logtail自动诊断工具Logtail机器组无心跳排查思路ECS经典网络切换为VPC后，如何更新Logtail配置Logtail服务的app_info.json文件中IP地址为空导致...
开启数据采集功能
EBS支持手动或自动化开启数据采集功能。手动开启采集功能针对单个或当前所有的云盘，自动化开启采集功能支持设置采集条件，并自动采集符合条件的云盘（包括未来创建的）的秒级监控数据。本文介绍开启数据采集功能的操作步骤及相关操作。...
开启数据采集功能
CLB支持一键开启数据采集功能，用于采集CLB访问日志、配置审计日志和云监控事件。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件已创建CLB实例。具体操作，请参见创建实例。已为CLB实例配置7层监听，即配置HTTP监听或HTTPS监听。...
采集HTTP数据
Logtail会根据您的采集配置定期请求指定的URL，将请求返回的Body内容作为数据源上传到日志服务。本文介绍如何通过日志服务控制台创建Logtail采集配置采集HTTP数据。前提条件已在服务器上安装Logtail。更多信息，请参见安装Logtail（Linux...
数据集成
物联网平台数据服务中的平台系统表、产品属性时序表、产品事件表和自定义存储表数据，可以集成到阿里云大数据开发治理平台（DataWorks）中构建数据仓库，以提升数据应用效率。本文介绍如何使用DataWorks的数据集成平台集成物联网平台中数据...
创建数据解析任务
物联网数据服务支持数据解析功能，对数据源数据进行预处理，用于更深层次地挖掘数据价值。本文介绍创建数据解析的具体步骤。前提条件已备份设备数据源或创建API数据源，更多信息，请参见配置数据源。背景信息数据解析功能说明，请参见使用...
通过DTS采集数据
查看数据采集结果。回到DataHub控制台，查看通过DTS创建的数据结构是否有缺失。在RDS数据库中插入一条数据，单击数据抽样，查看增量数据同步结果。注意 DataHub同步的是增量数据，您的数据库中必须插入、删除或更新一条或多条数据后，才会...
分析温度时序数据
物联网数据分析支持设置工作台主题样式功能，您可单击工作台右上角的设置按钮，修改主题为暗色主题。单击添加产品，在添加产品对话框中选择需要添加的产品并单击确认，如下图所示。选择设备优先，在左侧属性选择区域选择温度，右侧出现如下...
物联网平台数据接入
通过使用规则引擎数据流转功能，将物联网平台中的设备数据转发到表格存储（Tablestore）中存储。前提条件已将设备接⼊到物联网平台企业版实例。具体操作，请参见设备接入和上报数据。已开通表格存储服务，并创建表格存储实例和时序表。具体...
开发数据服务API
物联网数据分析的数据开发任务是使用标准的SQL语句对设备进行数据分析，而API服务可将数据开发任务封装成API，方便开发者调用。API服务既可以直接响应设备端请求，也可以用于服务端数据对接。创建数据分析任务登录数据分析控制台，单击分析...
CDH Hive数据抽样采集器
您可以通过DataWorks的数据抽样采集器功能，从CDH Hive表中随机抽取表的部分数据用于数据保护伞的敏感数据识别。如果您在数据保护伞中配置了脱敏规则，那么在数据地图表详情页面进行数据预览时，命中的敏感字段将会被脱敏。本文为您介绍...
数据出口
Link WAN支持通过阿里云物联网平台流转数据，也支持用户自建云服务流转数据。数据出口至物联网平台控制台，使用内部接口，物联网平台可关联操作Link WAN的节点配置。数据出口至自建云，使用的是消息队列MQ，透过MQTT订阅与消费数据。操作...
10分钟体验IoT数据上区块链
本文介绍了如何使用IoT区块链Hub实现物联网数据可信上链。1.配置物联网数据上链规则1.1 请使用阿里云账号登录请使用您的阿里云账号登录，访问IoT区块链Hub的控制台：https://iotsec.console.aliyun.com/说明 如果您无法登录，可以联系现场...
物联网卡问题
本文介绍物联网卡相关的常见问题。什么是物联网，什么是物联网卡？物联网（Internet of Things，缩写IoT）是指让所有能行使独立功能的普通物体实现互联互通的网络。它是一个抽象概念，跟互联网类似。物联网卡则是专门用于物联网设备的SIM卡...
采集主机监控数据
boot_time系统启动时间s1578461935.0system_load1系统平均负载，1分钟平均值不涉及0.58system_load5系统平均负载，5分钟平均值不涉及0.68system_load15系统平均负载，15分钟平均值不涉及0.60后续步骤查询分析采集到数据后，您可以在...
通过Metricbeat收集系统数据及Nginx服务数据
单击前往采集中心查看，返回Beats数据采集中心页面，在采集器管理区域中，查看启动成功的Metricbeat采集器。等待采集器状态变为已生效1/1后，单击右侧操作栏下的查看运行实例。在查看运行实例页面，查看采集器安装情况，当显示为心跳正常时...
通过Logtail采集Zabbix数据
日志服务支持将Zabbix中的监控数据采集到Logstore中。本文介绍将Zabbix数据采集到日志服务的操作步骤。前提条件已下载及安装Zabbix。具体操作，请参见下载与安装Zabbix。本教程中，将Zabbix安装在阿里云ECS上为例。已创建Project和Logstore...
测试数据通信
本文介绍如何测试DTU代替设备上报数据到物联网平台和接收物联网平台下发的数据。测试上报数据 打开串口调试工具。本示例中使用sscom 4.2测试版。说明 在本地电脑上使用串口调试工具模拟收发数据前，请务必确保DTU配置工具已经关闭。设置...
- 产品推荐
- 这些文档可能帮助您