文章
Flink on Yarn三部曲之三:提交Flink任务
欢迎访问我的GitHubhttps://github.com/zq2599/blog\_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;本文是《FlinkonYarn三部曲》系列的终篇,先简单回顾前面的内容:1.《FlinkonYarn三部曲之一:准备工作》
Flink on YARN部署快速入门指南
Apache Flink是一个高效、分布式、基于Java和Scala(主要是由Java实现)实现的通用大数据分析引擎,它具有分布式MapReduce一类平台的高效性、灵活性和扩展性以及并行数据库查询优化方案,它支持批量和基于流的数据分析,且提供了基于Java和Scala的API。 从Flink官方文档可以知道,目前Flink支持三大部署模式:Loca
FastDFS和HDFS性能对比测试
FastDFS以架构简洁和性能良好著称。 今天无意中在网上看到一篇文章:《HDFS和FastDFS的上传、下载效率对比测试》,文章链接:https://blog.csdn.net/a519781181/article/details/79125379/ 我觉得这个性能对比测试结果基本符合大家的认知及预期。FastDFS适合为中
Elasticsearch、MongoDB和Hadoop比较
IT界在过去几年中出现了一个有趣的现象。很多新的技术出现并立即拥抱了“大数据”。稍微老一点的技术也会将大数据添进自己的特性,避免落大部队太远,我们看到了不同技术之间的边际的模糊化。假如你有诸如Elasticsearch或者Solr这样的搜索引擎,它们存储着JSON文档,MongoDB存着JSON文档,或者一堆JSON文档存放在一个Hadoop集群的HDFS中
ElasticSearch 映射到 hdfs的快照
一、下载:https://artifacts.elastic.co/downloads/elasticsearchplugins/repositoryhdfs/repositoryhdfs5.4.0.zip二、安装./bin/elasticsearchplugininstallfile:///opt/elasticsearch5.
EMC升级的ViPR进击在大数据
EMC发布了一个更新的ViPR,该公司的软件定义的存储管理平台,使企业可选用,从数据方面看,目前驻留在他们的存储系统,没有它转移到专门的系统上。在公开的的文章中,EMC公司的高级软件事业部副总裁ManuvirDas宣布,EMC“加强的ViPR的一个Hadoop分布式文件系统(HDFS)数据服务(https://www.osc
DevOps云翼日志服务实践
!(https://pic4.zhimg.com/80/v230a89aca97cfb2745e3004e4d7780d9b_hd.jpg)10月30日,全球权威数据调研机构IDC正式发布《IDCMarketScape:中国DevOps云市场2019,厂商评估》报告。京东云凭借丰富的场景和实践能力,以及高质量的服务交付和平台稳定性,取得优异的
Apache Hadoop 入门教程
原文同步至http://waylau.com/abouthadoop/(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwaylau.com%2Fabouthadoop%2F)ApacheHadoop是一个由Apache基金会所开发的分布式系统基础架构。可以让用户在不了解
10 使用 OpenCV、Kafka 和 Spark 技术进行视频流分析
问题引起基于分布式计算框架Spark的室内防盗预警系统首先用摄像头录一段视频,存在电脑里,下载一个ffmpeg的软件对视频进行处理,处理成一张张图片,然后通过hadoop里边的一个文件系统叫做hdfs进行储存,之后进行分析。用spark将hdfs中存储的图片进行读取,调用opencv的人形识别算法将图片中有人形的图片识别出来,然后就代表屋子里进人了,
Using Kafka with Flume
这个文档是 ClouderaDistributionofApacheKafka 1.3.x.其他版本的文档在ClouderaDocumentation(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.cloudera.com%2Fcontent%2Fsup
已加载文章中没有匹配内容,试试其他关键词或清空搜索。