HelloWorld 开发者社区
科技资讯
百度世界提出智能组织思路,关注 AI 从个人工具进入业务闭环
openKylin 全球生态推广会举行,推进本地化与社区合作
光船 1.1.0 尝鲜版二更新,探索 AI 会话与代码生成结合
Argus 0.5.0 发布:新增进程控制,完善原生 Windows 任务管理
MetaForge 2026.0.0 发布,整合数据库工作台与可视化分析
qData 1.6.7 发布:修复增量读取与 ETL 字段传递问题
Apple HomeView 在部分地区开售,整合家庭控制与视频通话
Cloudflare 推出 Spend Management Beta,为 Workers 增加支出限制
Cloudflare 开源 Kitesurf:面向 AI 智能体的轻量浏览器引擎
JeecgBoot 与敲敲云介绍分层方案,连接低代码开发与业务搭建
开源项目
全部项目推荐好文
OPPO自研ESA DataFlow架构与实践
_本文来自OPPO互联网基础技术团队,转载请注名作者。同时欢迎关注我们的公众号:OPPO_tech,与你分享OPPO前沿互联网技术及活动。_1.背景OPPO互联网业务每天产生海量的数据,如调用链跟踪系统ESATrace,每日采样的请求数据超过千亿级别,我们需要对这些数据进行归类
9. 安装Flume集群并采集数据
Flume简介<blockquoteFlume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能
大厂架构师倾心之作:Flume构建高可用、可扩展的海量日志采集系统
前言几乎任何规模的公司,每时每刻都在产生大量的数据,收集业务日志数据,供离线和在线的分析系统使用。处理这些日志需要特定的日志系统,一般而言,这些系统需要具有高可用性、高可靠性和可扩展性。Flume是一个分布式、可靠的和高可用的海量日志采集,聚合和传输的系统。支持在系统中定制各类数据发
好程序员大数据学习路线之Logstach与flume对比
好程序员大数据学习路线之Logstach与flume对比,没有集群的概念,logstach与flume都称为组logstash是用JRuby语言开发的组件的对比: logstach:inputfilteroutput flume:sourcechannelsink优劣对比:lo
大数据系列——Flume入门和认识
1.Flume简介Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统支持在日志系统中定制各类数据发送方,用于收集数据Flume提供对数据进行简单处理,并写到各种数据接收方2.FlumeOG与FlumeNGFlumeOG:
Flume浅度学习指南
flume简介cloudera公司开源的,贡献给Apache基金会http://flume.apache.org/(https://link.segmentfault.com/?enci6wdH28IuDgN6bL8UHlvaQ%3D%3D.ner7RkUbbyGbeY7N
Flume系列---2.简单示例
1.Flume简单案例1.1采集目录到HDFS采集需求:服务器的某特定目录下,会不断产生新的文件,每当有新文件出现,就需要把文件采集到HDFS中去根据需求,首先定义以下3大要素采集源,即source——监控文件目录:spooldir下沉目标,即sink—
Flume系列---1.安装
1.Flume安装部署1.1flume的安装非常简单上传安装包到数据源所在节点上然后解压tarzxvfapacheflume1.6.0bin.tar.gz然后进入flume的目录,修改conf下的flumeenv.sh,在里面配置JAVA
sparkStreaming整合flume
sparkStreaming整合flume需要把sparkstreamingflumesink_2.112.1.3.jar放到flume的lib目录下使用scalalibrary2.11.8.jar替换之前的scalalibrary2.10依赖的jar包9.1p
Flume + zookeeper + kafka收集Nginx日志
相关环境<table<thead<tr<th软件</th<th版本</th</tr</thead<tbody<tr<tdCentos</td<td3.10.0862.el7.x86_64</td</tr<tr<tdjdk</td<td1.8</
正在加载更多文章…
加载更多已加载文章中没有匹配内容,可继续加载更多。