头条

  • Iceberg 数据湖访问 Presto Alluxio 加速

      ​Presto是一个里程碑式的产品,它能够让我们很简单的不需要数据的导入和导出,就可以使用标准的SQL来查询数据湖仓上的数据,早先是数据仓库&gt,Presto中有一个概念叫做交互式的查询,即在几秒种最多几分钟返回一个结果,现实中很多人用Presto来做秒级查询,即subsecond的查询,...

    2024-11-15 641
  • 用于大数据分析的大规模可扩展存储 什么是数据湖

      ​译者,李睿审校,孙淑娟2011年,时任商业智能开发商Pentaho公司首席技术官的JamesDixon创造了,数据湖,这一术语,他将数据湖与当时流行的数据集市的典型信息孤岛进行了对比,如果将数据集市视为销售瓶装水的商店,经过清洁和包装处理以便于饮用,,那么数据湖就是处于更自然状态的大片水体,数据湖...

    2024-11-15 325
  • 有了数据湖 数据仓库究竟能不能被取代 他们又有什么样的区别呢

      数据湖是近两年中比较新的技术在大数据领域中,对于一个真正的数据湖应该是什么样子,现在对数据湖认知还是处在探索的阶段,像现在代表的开源产品有iceberg、hudi、DeltaLake,那对于数据湖应该是什么样子,先来看数据湖的作者AWS来说明数据湖是什么东西,比如下图,不懂数据的人也许会觉得数据湖很...

    2024-11-15 491
  • 为余势负天工背 云原生内存数据库Tair助力用户体验优化

      作为双11大促承载流量洪峰的利器,Tair支撑了电商交易核心体验场景,不仅在数十亿QPS的峰值下保持着亚毫秒级别的顺滑延迟,同时在电商交易核心体验场景上也做出了技术创新,一、前言2021年双十一,是天猫的第十三次双十一,也是Tair的第十三次双十一,每个参与备战的Tair同学各有不同,有的同学是第一...

    2024-11-15 338
  • 它到底比Redis强在哪里 大厂都在用EhCache

      因为工作恰好用到该技术,就钻研并写成文章带大家领略了EhCache的基本知识、技术架构、使用场景、API使用以及基于SpringBoot的集成,整体而言,算是入门级别的,大家可以在此基础上进一步学习扩展,至于EhCache对分布式的支持部分,本文并未涉及,主要原因是使用起来并没那么好用,如果感兴趣的...

    2024-11-15 248
  • 云硬盘 一文看懂云平台存储相关云服务 如何使用

      随着云计算技术的逐渐成熟和快速发展,特别是数字化转型的持续推进,企业的云化速度大幅提升,同时在各类业务分布式改造和业务场景化的推动下,业务逐渐扁平化、耦合化及云化,在此背景下企业通过自建或采购的形式来建设和部署云平台,以企业内部各业务系统的实际情况为出发点,结合架构及业务部门的规划意见,按计划和步骤...

    2024-11-15 848
  • 中如何防止缓存击穿 Singleflight Go 泛型版

      并发是Go的优势,但并发也需要很好的进行控制,标准库中有sync包,经常使用的功能有sync.Mutex、sync.WaitGroup等,其实,除了标准库,还有一个官方的扩展库,也叫sync,其中有一个子包,sync,singleflight,专门做并发控制,比如防止缓存击穿,...。...

    2024-11-15 695
  • 面向DevSecOps的开源持续安全测试方案

      既是一个非常有前途的持续安全测试方案,也是为数不多的此类开源项目之一,通过将其集成到中,并根据代码库相关事件触发扫描,它不但提供了在中执行安全测试的能力,而且提供了许多开源扫描器的集成,因此覆盖了持续安全测试的大部分方面,同时,它也可以被用作一体化的扫描服务,针对代码库和已部署的应用定期执行自动化的...

    2024-11-15 549
  • 平台工程如何应对DevOps挑战

      DevOps的未来在于拥抱平台工程,而不是传统的孤立实践,为了在当今瞬息万变的环境中保持竞争力,组织必须采用平台工程作为DevOps旅程的下一步,它将在未来塑造团队协作、和简化软件交付的方式,...。...

    2024-11-15 664
  • 推荐一款非常实用的远程同步工具 运维

      Rsync是远程同步的缩写,它可以在服务器、客户端或任何其他能够运行Rsync的计算机之间同步数据,Rsync可以周期性地同步文件,也可以根据用户指定的触发条件同步文件,...。...

    2024-11-15 729
  • Cmdlet PowerShell 参数详解 CmdletPowerShell 系列之 PowerShell

      今天给大家讲解PowerShellCmdlet参数相关的知识,希望对大家学习PowerShell能有所帮助!Cmdlet参数是进行执行操作、获取数据中的属性定义,然后根据属性定义获取对应属性的结果和执行对应的操作,根据类型的使用场景主要划分下面四种参数类型,使用频率最高,主要用于特定属性的定义,强制...

    2024-11-15 714
  • 将AI集成到DevOps 以增强工作流自动化

      如果有人跟你说,软件开发和运营团队可以毫不费力地协同工作、简化流程,并能提高工作效率,你一定会想到那是DevOps,现如今,人们则期望它能够利用人工智能,AI,的力量,彻底改变每个冲刺、且能更轻松地协助教育新入行的DevOps专业人员,从深层次来看,无论是自动化日常任务、优化资源分配,还是预测潜在问...

    2024-11-15 692
  • 安全运营红蓝对抗探索与实践

      一、红蓝对抗起源红蓝对抗作为一个军事概念,近年来被广泛应用到网络信息安全领域,蓝军采用模拟真实网络攻击来评估企业的现有防守体系的安全能力,而红军则会对发现的问题进行相应的优化整改,通过这种周期性的红蓝对抗攻防演习,企业可以持续性地提高在攻击防护、威胁检测、应急响应等能力,G行正是借用这一模拟实战、攻...

    2024-11-15 778
  • 一篇了解自治组件的运维监控方法

      常见的监控方法Prometheus和Grafana是两个流行的开源监控工具,它们经常一起使用来实现系统和应用程序的监控、可视化和告警,PrometheusPrometheus是一个开源的系统监控和警报工具包,它最初由SoundCloud开发,用于监控其容器化架构中的服务,Prometheus提供了多...

    2024-11-15 882
  • 被KPI扭曲的运维

      4月29号的文章发了之后,很多朋友给我留言讨论,有些人觉得我所说的以业务降级来避免更大的故障的方法只是事后诸葛亮,因为只有当初知道后果才能如此果决地行动,在实际运维工作中恐怕很难做到,因为无论故障多大,停止服务都是十分严重的事故,会让运维部门承受难以承受的后果,实际上这些顾虑都是真实的,从这些顾虑中...

    2024-11-15 110

联系我们

QQ号:***

微信号:***

工作日:9:30-18:30,节假日休息