HelloWorld 开发者社区

科技资讯

全部资讯

开源项目

全部项目

推荐好文

鹰眼:海量级分布式日志系统上云的架构和实践

<blockquote​导语 |鹰眼是由腾讯PCG技术运营部负责的海量级分布式实时监控和日志分析系统,为响应公司战略要求,将原先的业务迁移上云,最终产生了可喜的变化。本文将介绍分布式日志系统(鹰眼)的整体上云方案,希望与大家一同交流。</blockquote一、鹰眼平台介绍

Scala核心编程-Scala概述

whyisScala语言?Spark新一代内存级大数据计算框架,是大数据的重要内容Spark就是使用Scala编写的。因此为了更好的学习Spark,需要掌握Scala这门语言Scala是ScalableLanguage的简写,是一门多范式(面向对象,函数式)的

hive 变量和参数

Hive中变量和属性命名空间:hivevar:用户自定义变量(Hive0.8及之后的版本)。可读可写。hiveconf:Hive相关的配置属性。可读可写。system:Java定义的配置属性。可读可写。env:Shell环境定义的环境变量。只可读。<blockquo

腾讯云大数据:神盾首创非对称联邦学习,深度保障数据隐私

<blockquote导语:在过去的几年中,我们见证了大数据及人工智能技术的飞速发展,许多机构却依旧苦于数据数量少、质量低等难题而无法将前沿理论商业化落地。助力像石油般宝贵的数据突破隐私保护的条框限制并实现其价值的流通,对相关产业的发展起着至关重要的作用。在上一篇文章中,我们简要介绍了腾讯“神盾

技本功|Hive优化之Spark执行引擎参数调优(二)

Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的的一个点,因此掌握一些Hive调优是必不可少的一项技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身参数和HiveSQL的执行等因素。

数据之旅-开篇

开篇2020年已经过去大半,从13年毕业到现在,不知不觉已经工作了7年的时间。在这些年的时间里做过WEB开发、大数据相关等工作,去过传统IT企业也去过互联网公司。新的一年总要有些进步与改变,那就开始写总结吧,做些有意义的事情。算是给自己职业生涯做一次回顾,分享一些技术与想法,如果有能帮

三网运营商大数据实时截流网站访客

现在很多行业和企业都在网上,手机APP和搜索引擎做竞价引流推广,目的是为自己的企业和业务实时引流获客。但是随着众多资本的介入,和竞价排名的恶意竞争和恶意点击的出现,很多企业做的竞价推广并不尽如人意。因为无论是网站推广还是竞价排名,只有客户点击了网站,并且主动留下了个人信息,相关企业才可以获取他的

正在加载更多文章…

加载更多

已加载文章中没有匹配内容,可继续加载更多。