包含"存储"标签的文章
-
MariaDB之Spider存储引擎实践详解
在上面的例子中,我们研究了如何使用Spider表将具有相似内容和相同结构的表合并到一个视图中,这在实际场合中有价值的应用,比如有一个多实例的应用程序,如某个由多个部门使用的ERP应用,如果要从报表服务器做跨部门报告,则可以使用此模型访问该应用程序的全部实例,...。...
-
不容错过的MySQL和MariaDB七项功能
.com快译,在过去这几年,开源关系数据库管理系统MySQL和MariaDB经历了巨大的变化,新增和改进功能、修复长期存在的问题以及全面提升性能,由于变化很大,很容易错过MySQL和MariaDB在此期间添加的一些优秀功能,本文将介绍添加到MySQL、MariaDB或两者的七项最主要的新功能以及为什...
-
Kafka放弃Zookeeper后如何存储主题与消费组呢
由于笔者公司目前使用的kafka版本是2.2.1,故当下关于kafka的内核研究目前主要是基于该版本,当然该专栏还会继续关注Kafka3.0,我在使用kafka时发现客户端可以不依赖Zookeeper的情况下完成消息发送、消息消费,众所周知早期的Kafka,所有的元信息,topic、消费组、集群,等...
-
你真的懂吗 为啥集群小文件治理那么重要
小文件是Hadoop集群运维中的常见挑战,尤其对于大规模运行的集群来说可谓至关重要,如果处理不好,可能会导致许多并发症,Hadoop集群本质是为了TB,PB规模的数据存储和计算应运而生的,为啥大数据开发都说小文件的治理重要,说HDFS存储小文件效率低下,比如增加namenode负载等,降低访问效率等...
-
大数据Hadoop之
Hudi,HadoopUpsertsDeletesandIncrementals,,简称Hudi,是一个流式数据湖平台,支持对海量数据快速更新,内置表格式,支持事务的存储层、一系列表服务、数据服务,开箱即用的摄取工具,以及完善的运维监控工具,它可以以极低的延迟将数据快速存储到HDFS或云存储,...
-
当我们说大数据Hadoop 究竟在说什么
前言提到大数据,大抵逃不过两个问题,一个是海量的数据该如何存储,另外一个就是那么多数据该如何进行查询计算呢,好在这些问题前人都有了解决方案,而Hadoop就是其中的佼佼者,是目前市面上最流行的一个大数据软件,那它包括哪些内容呢,有什么特点呢,Hadoop介绍提到Hadoop,大家的理解是什么,狭义...
-
Linux下如何快速安装Hadoop
大家都对大数据感兴趣,但是大家都没有想去如何实践到地方,如何落实去学习Hadoop,我们学习任何一门技术的时候,都不用想,上来肯定是去安装,然后去实践,不得不说,现在你去网上搜索,如何安装Hadoop,那很多出来的都是从Unbutu系统下如何安装,很多也都讲解的不是很清楚,阿粉也比较想学习,所以就准...
-
随着云计算等颠覆性技术的出现Hadoop将会过时
Hadoop是一个开源软件框架,它在近十年前开始流行,ApacheHadoop在当时是一项突破性的创新,企业在处理大量数据时遇到了存储问题,它通过提供Hadoop分布式文件系统,HDFS,进行存储和MapReduce进行数据分析和处理,重新定义了企业处理、分析和存储数据的方式,据公关通讯社报道,到2...
-
早就有了! Server 其实 的计算列 SQL PostgreSQL
如果当年这样传小纸条,我可能早就有对象了,最近,微博上有人提出一个话题&,mdash,&,mdash,聊聊你学生时代收到过的纸条,瞬间激起网友们一波波的回忆杀,有讲老师坏话的,有问考试答案的,[[251752]]还有偷偷塞情书给暗恋同学的,网友们直呼太有共鸣,纷纷祭出压箱...
-
PL 这些
Postgres提供了用CURSOR指向SELECT语句结果集的功能,使用CURSOR的原因之一是,通过在单个事务中一次批量获取几行,来避免在处理大型结果集时出现内存耗尽,请参阅游标操作,CLOSE操作是一个重要的操作,它会关闭游标和释放资源,并回收游标变量,尽管它会在事务关闭时自动关闭,但一条黄金...
-
snappy gzip还是lz4 大数据存储压缩算法调研
评价压缩算法时,通常需要考虑以下两个主要方面压缩比和压缩,解压缩吞吐量,压缩比压缩比是衡量压缩算法效率的重要指标之一,它表示压缩后的数据大小与原始数据大小之间的比率,一般来说,压缩比越高,表示压缩算法越有效,可以更好地减小数据存储空间或网络传输带宽的占用,评价压缩算法的压缩比时,需要考虑以下几点数据...
-
Doris入门 下一代实时数据仓库 Apache
1ApacheDorisApacheDoris是一个开源的实时数据仓库,可以从各种数据源收集数据,包括关系型数据库,MySQL、PostgreSQL、SQLServer、Oracle等,、日志和来自物联网设备的时间序列数据,ApacheDoris支持报表、即席分析、联合查询和日志分析等功能,因此可以...
-
SpringBoot 支持私有化部署! 轻松构建对象存储服务 MinIO
当出现这个场景,很容易第一时间想到将文件采用云存储服务来解决,所谓云存储服务,简单的说,就是将访问很频繁的文件资源服务,由本地改成云厂商提供的文件存储服务,比如阿里云OSS、七牛云、腾讯云、百度云等等,迁移之后,网站的访问压力会得到极大的释放,服务也会变得更加稳定,但是,这些云存储服务大部分都是收费...
-
专用备份方案 群晖专注提升企业运营产能 高效存储 聚焦智慧办公
群晖科技Synology2024数据全场景应用大会正式召开,现场与众多企业技术和运维管理者、集成方案商,以及群晖合作伙伴们,共同领略群晖为企业业务效能和产能,构建存储平台,洞见数据未来,Synology群晖科技在企业数据领域积累多年经验,群晖观察到,企业现今所面临的数字化转型、AI技术发展和应用、新...
-
互联网海量数据如何存储Kafka
对于大部分互联网公司来说,数据量最大的几类数据是,点击流数据、监控数据和日志数据,这里面,点击流,指的是在App、小程序和Web页面上的埋点数据,这些埋点数据记录用户的行为,比如你打开了哪个页面,点击了哪个按钮,在哪个商品上停留了多久等等这些,当然你不用太担心自己的隐私问题,记录的这些行为数据不是为...