# README

转发 AWS 流数据到 DataFlux, 目前支持 CloudWatch Logs, CloudWatch Event, S3 Event。

下载 AWS Lambda 函数代码包 dtforward.zip: https://github.com/CloudCare/dataflux-serverless-functions/releases/tag/v1.0.0

##Lambda函数安装:

  1. 进入 AWS Lambda 控制台,选择 创建函数

step 1

  1. 输入函数名, 例: my-function, 运行时选择 Go 1.X

step 2

  1. 创建完成后进入函数配置页面, 处理程序 设置为"dtforward", 点击 上传 按钮, 上传代码包 dtforward.zip, 完成后点击配置页面右上方的 保存 按钮。同时添加环境变量 DATAFLUX_DATAWAY_URL , 变量值为接收数据的dataway地址, 如果需要查看函数执行时的debug信息,可添加环境变量 DATAFLUX_DEBUG, 值为true。

step 3

保存后可点击右上方的 测试 来验证函数是否可以执行。在 配置测试事件 页面中选择事件模板 cloudwatch logs, 选择后会自动生成测试日志数据, 设置 事件名称 后保存。

step test

然后选择你配置的测试事件,点击 测试

step test


##配置函数触发器

  1. 进入函数配置页面, 点击 添加触发器

step 4

  1. 选择触发器, 目前支持 CloudWatch Logs, CloudWatch Events/EventBridge, S3, 根据选择的触发器做相应配置,比如对于 "CloudWatch Logs", 需要配置作为数据源的日志组。

step 5

配置完成后,发送到日志组的日志事件将使用日志收到的内容触发您的 lambda 函数,函数负责将日志发送到 DataFlux。

##采集指标:

###CloudWatch Logs
每条转发的日志都记录了日志组和日志流,DataFlux以 $log_<日志流名称> 作为指标集名称。

tags:

tag描述
LogGroup日志组名称
$app日志流名称

fields:

指标描述类型
$content日志内容string

###CloudWatch Event
指标集名称为 $keyevent

tags:

tag描述
DetailType事件的详细类型
AccountID账号名称
Region事件所在区域
$source事件源

fields:

指标描述类型
$title事件标题string

###S3 Event
指标集名称为 $keyevent

tags:

tag描述
Buckets3存储桶名称
Region事件所在区域
$source事件源

fields:

指标描述类型
$title事件标题string
Objects3存储对象名称string
ObjectSizes3存储对象的大小int
ObjectVersions3存储对象版本string
ObjectETags3存储对象的ETag值string
SourceIPAddress发起事件的IP地址string

# Functions

No description provided by the author

# Constants

No description provided by the author
No description provided by the author
No description provided by the author
No description provided by the author