包含"分布式"标签的文章

  • 高可用 我们一起聊聊复杂度来源

      高可用性定义为系统持续不间断地执行其功能的能力,是衡量系统可用性的重要指标之一,这一概念的核心在于实现,无中断,运行,但这正是其实现过程中的主要挑战,由于无论硬件还是软件都难以避免出现故障——硬件可能会遭遇故障和老化,软件可能存在bug且随着时间推移变得更加复杂和庞大,此外,外部因素如断电、自然灾害...

    2024-11-15 1000
  • 真香! TCC 解决分布式事务 Seata

      今天这篇文章介绍一下Seata如何实现TCC事务模式,文章目录如下,什么是TCC模式,TCC,TryConfirmCancel,方案是一种应用层面侵入业务的两阶段提交,是目前最火的一种柔性事务方案,其核心思想是,针对每个操作,都要注册一个与其对应的确认和补偿,撤销,操作,TCC分为两个阶段,分别如下...

    2024-11-15 670
  • 你知道吗 Git是如何工作的

      Git,作为当今世界上最流行的分布式版本控制系统,已经被无数的开发者和团队所采纳,用于管理他们的代码和项目,但是,对于许多初学者来说,Git的内部工作原理可能仍然是一个谜,在本文中,我们将深入探讨Git的工作方式,帮助读者更好地理解这一强大工具的核心机制,一、Git的基本概念首先,我们需要了解Git...

    2024-11-15 139
  • PaaS

      生产,部署高可用k8s集群,kubeadmkubeadm是官方提供的开源工具,是一个开源项目,用于快速搭建kubernetes集群,目前是比较方便和推荐使用的,kubeadminit以及kubeadmjoin这两个命令可以快速创建kubernetes集群,Kubeadm初始化k8s,所有的组件都是以...

    2024-11-15 281
  • 十分钟了解分布式系统中生成唯一ID

      分布式系统中生成唯一ID在后台开发是经常遇到的架构设计,当然方案有很多,比如通过redis或者数据库实现自增,但是如果依赖redis或者数据库,会导致单点问题,在架构上反而需要考虑点更多,那怎么解决呢,首先分布式唯一ID需要支持如下,方案,单机生成方式UUID,UniversallyUniqueId...

    2024-11-15 579
  • 白话ZeRO 优雅谈大模型 上

      并行策略正如和分布式一样,如何利用多设备和多硬件也是很重要的一个环节,大模型训练也是如此,如今训练大模型离不开各种分布式并行策略,常用的并行策略包括,下图为其中一种算法,将所有的梯度分为五份,然后按照圆圈的方式传播,而不是广播数据,累加,直到每个GPU都完成一个部分的累加,然后再批量同步数据,经过五...

    2024-11-14 124
  • 虚拟化

      VMware以平台工程能力加速现代应用开发与交付,赋能企业业务创新谈到平台工程,VMwareTanzu,业务,大中化区总经理邓惠钧认为,随着多云、跨云、云原生等时代的到来,过去的应用开发模式显然已经无法满足业务创新和发展的需求,平台工程的出现,不但具备更加灵活、敏捷的开发方式,而且还能够克服应用开发...

    2024-11-14 299
  • 云计算

      阿里云100万核算力支撑天猫双11,弹性计算规模刷新纪录继天猫双11全面上云后,今年,阿里云首度在公共云上为天猫双11提供超100万核CPU资源支撑,弹性规模刷新纪录,记者了解到,依托于不断迭代更新的云计算全栈技术,云基础设施处理器CIPU首次大规模应用于天猫双11,不但保障了用户丝滑体验,还将双1...

    2024-11-14 413
  • 这十种分布式ID 太绝了!

      在分布式系统中,唯一标识符,ID,的生成是一个至关重要的问题,随着数据量的增长和系统的扩展,如何生成全局唯一且有序的ID,成为了一个技术挑战,今天,我们就来聊聊那些令人拍案叫绝的分布式ID生成方案,这是最常见的一种生成ID的方式,利用数据库本身的自增特性,每次插入新记录时自动生成一个唯一的ID,这种...

    2024-11-14 506
  • 全栈 会机器学习就够了 下一代数据科学家群体走向 !

      数据科学一直是个引人注目的领域,尤其是对于那些有计算机科学、统计、业务分析、工程管理、物理、数学等学科背景的年轻人,但雾里看花始终看不清晰,人们总是认为数据科学背后有许多神秘的地方,觉得它不仅仅是机器学习和统计,多年来,我与许多专业人士讨论过该如何进入数据科学领域,为什么总有关于数据科学的炒作?能够...

    2024-11-14 730
  • 原理! 分布式追踪系统 一口气说出

      在微服务架构中,一次请求往往涉及到多个模块,多个中间件,多台机器的相互协作才能完成,图片来自Pexels这一系列调用请求中,有些是串行的,有些是并行的,那么如何确定这个请求背后调用了哪些应用,哪些模块,哪些节点及调用的先后顺序?如何定位每个模块的性能问题?本文将为你揭晓答案,本文将会从以下几个方面来...

    2024-11-14 510
  • 一口气说出六种实现延时消息的方案

      前言延时消息,定时消息,指的在分布式异步消息场景下,生产端发送一条消息,希望在指定延时或者指定时间点被消费端消费到,而不是立刻被消费,延时消息适用的业务场景非常的广泛,在分布式系统环境下,延时消息的功能一般会在下沉到中间件层,通常是MQ中内置这个功能或者内聚成一个公共基础服务,本文旨在探讨常见延时消...

    2024-11-14 605
  • WebSocket 通过消息队列实现分布式

      简单的概括一下,如果我们的项目是分布式环境,登录的用户被Nginx的反向代理分配到多个不同服务器,那么在其中一个服务器建立了WebSocket连接的用户如何给在另外一个服务器上建立了WebSocket连接的用户发送消息呢,...。...

    2024-11-14 186

联系我们

QQ号:***

微信号:***

工作日:9:30-18:30,节假日休息