Flume source的type

AI-摘要
Geek GPT
AI初始化中...
介绍自己 🙈
生成本文简介 👋
推荐相关文章 📖
前往主页 🏠
前往爱发电购买
Flume source的type
曦exec source 在启动时运行给定的unix命令,并期望该进程在标准输出上连续生成数据。
spooling directory source (spooldir) 这个source允许你把要手机的文件放入磁盘上的某个指定目录。他会监视这个目录中产生的新文件,并在新文件处显示从新文件中解析出来。 与exec source不同,spooling directory source是可靠的, 即使flume重新启动或被kill,也不会丢失数据,同时作为这种可靠的代价,指定目录中的被手机的文件必须是不可变的、唯一命名的。flume会自动检测避免这种情况发生,如果发现问题,则会抛出异常;
taildir source 监控指定的一些文件,并在检测新的一行数据残生的时候几乎实时的读取他们,如果新的一行数据还没写完,taildir source 等到这行写完后读取
kafka source 就是一个apache kafka消费者, 他从kafka的topic中读取消息,如果运行了多个Kafka source 则可以把他们配置到同一个消费者组,以便每个source都读取一组唯一的topic分区
syslog sources 针对系统日志
http sources 发送get协议请求的
评论
匿名评论隐私政策
✅ 你无需删除空行,直接评论以获取最佳展示效果