-
Notifications
You must be signed in to change notification settings - Fork 255
[discard]Transformer
Sun Jianbo edited this page Apr 17, 2018
·
6 revisions
用于去掉某个字段的Transformer
可以在Parser后使用,去除数据中key指定的字段。
配置如下:
{
"type":"discard",
"key":"DiscardFieldKey"
}
discard transformer的应用场景就在于,当你的数据解析完后,有一些字段是不需要的,就可以用来做反选,去掉这些字段,节省传输和存储成本。
-
key
字段支持多级嵌套,多级间用.
符号连接,如abc.xyz
,表示 data["abc"]["xyz"]中的数据。 -
key
也支持写多个,用逗号分隔,比如field1,field2
表示删除field1和field2 2个key。
一份带有discard Transformer的完整配置类似如下:
{
"name":"test2.csv",
"reader":{
"log_path":"./tests/logdir",
"mode":"dir"
},
"parser":{
"name":"jsonps",
"type":"json"
},
"transforms":[{
"type":"discard",
"key":"DiscardFieldKey"
}],
"senders":[{
"name":"file_sender",
"sender_type":"file",
"file_send_path":"./test2/test2_csv_file.txt"
}]
}
快速开始 | Pandora | Readers | Parsers | Senders | Download | 七牛智能日志管理平台 | logkit-pro专业版