-
ResourceManager中的Resource Estimator框架介绍与算法剖析
本文首先介绍了Hadoop中的ResourceManager中的estimator service的框架与运行流程,然后对其中用到的资源估算算法进行了原理剖析。
宋超 2023-01-03457 0 0 -
Greenplum的HA实践
GP集群的 Primary MasterA节点部署一个备份节点,即Slava Master B节点。
洛杉矶 2023-01-03453 0 0 -
应用AI芯片加速 Hadoop 3.0 纠删码的计算性能
在保证可靠性的前提下如何提高存储利用率已成为当前 DFS 应用的主要问题之一。
ethanzhang 2023-01-03466 0 0 -
HDFS 线程参数DataXceiver 引发的故障
腾讯云大数据团队服务的某个大客户,hadoop集群超过300台服务器。因为大数据平台承载的业务程序非常多(每天超过5万次任务运行在yarn)、datanode的...
mikealzhou 2023-01-03486 0 0 -
云智能时代,如何规划云服务?
本文作者楼炜,现任云星数据副总裁,业内资深的云计算专家、TVP(腾讯云最具价值专家), 13年云计算经验,9年+ IaaS、PaaS经验,全球云计算大会最佳企业...
楼炜 2023-01-03451 0 0 -
曝光去重设计与实践
导语:推荐系统中个性化推荐最为复杂,个性化推荐涉计到很多基础技术:用户画像,用户曝光记录,推荐算法策略等等,其中用户画像和用户曝光记录的设计好坏直接影响推荐系统...
alieliu 2023-01-03473 0 0 -
位图数据结构及其在-Java和-Redis中的应用
什么是位图?BitMap,大家直译为位图. 我的理解是:位图是内存中连续的二进制位(bit),可以用作对大量整形做去重和统计.
呼延十 2023-01-03444 0 0 -
腾讯基于 Flink 的实时流计算平台演进之路
大家好,我是来自腾讯大数据团队的杨华(vinoyang),很高兴能够参加这次北京的 QCon,有机会跟大家分享一下腾讯实时流计算平台的演进与这个过程中我们的一些...
王知无-import_bigdata 2023-01-03453 0 0 -
VLDB 2019 | 揭秘腾讯TDSQL全时态数据库系统
【编者按:全时态数据为数据安全、数据重演、数据挖掘和AI技术的施展提供了物理基础。这篇入选VLDB 2019的论文介绍,基于腾讯云TDSQL扩展而来的全时态数据...
分布式数据库TDSQL 2023-01-03463 0 0 -
海量数据的存储与访问瓶颈解决方案-数据切分
在当今这个时代,人们对互联网的依赖程度非常高,也因此产生了大量的数据,企业视这些数据为瑰宝。而这些被视为瑰宝的数据为我们的系统带来了很大的烦恼。这些海量数据的存...
小忽悠 2023-01-03446 0 0