包含"数据"标签的文章
-
从来不是侥幸!Oracle为何独得印度政府青睐
作者,Mohit编译,小欧出品,技术栈,微信号,blog51cto,今年8月,印度教育部宣布选择Oracle云基础设施,OCI,来改造免费教育技术平台DIKSHA,小微企业信用保证基金信托,CGTMSE,在2021年迁移到Oracle后,已惠及约1200万借款人,其中包括21%的女性创业者和92%的...
-
盘点Flink支持的增量连接组件
FlinkCDC,Change>,特性SourceCDC技术PipelineCDC技术原理直接从数据库日志中捕获变更通过数据管道系统传输数据变更延迟较低的延迟,适合实时性强的场景稍高,但可以通过优化减少吞吐量高,受限于数据库和网络较高,特别是在使用高效的数据管道系统时资源消耗对数据库性能...
-
组元数据管理器是个什么东西 GroupMetadataManager
今天我们一起来深入剖析Kafka中GroupMetadataManager这个类的源码,对于使用Kafka的开发者来说,GroupMetadataManager可能并不如KafkaController和GroupCoordinator那样知名,但它却是消费者组管理中不可或缺的重要部分,它主要负责对消...
-
2024前端数据可视化常用工具大盘点
本文来盘点前端数据可视化的各种常用工具库!图表ECharts是一个基于JavaScript的开源数据可视化库,它由百度开源,现在由Apache基金会维护,ECharts提供了丰富的图表类型、灵活的配置选项和强大的交互功能,使得开发者能够轻松构建出美观且功能强大的数据可视化应用,AntV是蚂蚁集团旗下...
-
Vaex助力高效处理大规模数据集
Vaex实现了惰性计算的范式,这使它可以高效地处理可能无法全部载入内存的大型数据集,Vaex不是将整个数据集加载到内存中,而是进行惰性计算,仅在需要时评估表达式,这种方法最大程度地减少了内存使用量,并且能够无缝处理大于内存的数据集,查看下面的示例,...。...
-
个个都创意十足! 用过的20个高颜值登录页
在项目中集成第三方登录后,我们需要将第三方平台的账号与我们自己的账号体系关联,例如,当用户选择使用微信登录时,还需绑定一个手机号,这个手机号的绑定操作实际上是将微信账号与我们系统中的账号进行关联,本文将详细介绍如何在选择使用Gitee进行登录时,将其与系统用户表sys,user进行绑定,...。...
-
感知 从人脑和蛙眼得到的启示 自动驾驶 的革新
需要处理的图像像素过多与芯片算力不足的矛盾,已经成为了当前制约自动驾驶发展的瓶颈之一,为了解决上述问题,事件相机与脉冲神经网络的结合或许会是一个可行的解决方案,卷积神经网络是目前图像目标检测算法的重要手段,以ResNet,152为例,一个152层的卷积神经网络,处理一张224*224大小的图像...
-
自动驾驶4WS车辆路径跟踪最优控制算法仿真
1引言车辆智能化是汽车行业新的发展方向,其中自动驾驶是为了实现高度智能化的交通系统,对于自动驾驶车辆,为了增加其主动安全性,越来越多的车辆采用四轮转向系统,所以在转向时对规划路径进行精确跟踪与四轮的协同控制是自动驾驶领域亟待解决的新的问题,对于有四轮转向,4WS,功能的自动驾驶特种车辆和高级乘...
-
一文读懂Hive底层数据存储格式
本文讲解Hive的数据存储,是Hive操作数据的基础,选择一个合适的底层数据存储文件格式,即使在不改变当前HiveSQL的情况下,性能也能得到数量级的提升,这种优化方式对学过MySQL等关系型数据库的小伙伴并不陌生,选择不同的数据存储引擎,代表着不同的数据组织方式,对于数据库的表现会有不同的影响,H...
-
基于改进字典的大数据多维分析加速实践
OLAP场景是大数据应用中非常重要的一环,能够快速、灵活地满足业务各种分析需求,提供复杂的分析操作和决策支持,B站主流湖仓使用Iceberg存储,通过建表优化可以实现常规千万级的指标统计秒级查询,这样就能快速搭建可视化报表,但当数据量达到亿级、需要交叉分析维度复杂多表情况下,想要支持秒级就变得困难,...
-
大厂都要求的 该如何实现 你学会了吗 数据分析闭环
经常有同学问,总听说要实现数据分析闭环,看到数据分析结果,,可到底该咋实现,为什么自己平时工作中,经常是发了数据给业务就石沉大海,这样咋胜任大厂的要求,今天系统讲解一下,什么是数据闭环完整的数据闭环,应该是,用数据监控业务→发现业务中的问题→分析问题原因→选择解决方案→继续监控业务走势,这样一条完整...
-
为什么 Grafana 的数据对不上 你知道吗 Free node Top
前面可以看到top看到的内存使用量大约为130Gi,而Grafana看到的内存使用量大约是77Gi,相差53Gi内存存储的就是一些不能立即被回收的缓存,但由于这两种方式的数据源不同,无法对53Gi进行更详细的分析,...。...
-
数据分析如何实现闭环 大厂必考
在、晋升述职、面试中,我们经常听到这种要求,业务有没有采纳过你的数据分析建议,你做的数据分析,有没有落地效果,你有没有实现闭环,形成方法论,其实,这些说的都是同一件事,做数据分析,不能光自己搓代码,要有落地应用,形成所谓的,闭环,可到底该怎么实现这种效果,很多同学并没有清晰的想法,也因此难以通过面试...
-
为什么你做的数据异动分析 总被人Diss
数据异动分析,是平时工作中做得最多,也是最经常被吐槽的部分,不光领导&,业务部门吐槽,做分析的人自己也在吐槽,问题一,神经过敏,涨1%就要,深入分析,,跌1%又要,深入分析,,把分析师折腾得苦不堪言,经常分析涨1%的报告还没交,丫又跌了1%,每天在数字波动间疲于奔命,问题二,盲目乱拆,...
-
混合云 改善客户体验的五种方式
在制定组织的云策略时,需要考虑专家对混合云优势的见解,还记得手机服务供应商拥有你的手机号码的时候吗?如果你想切换到另一个提供商,你必须更改你的号码,并确保所有联系人都得到新号码,如今的云计算技术也有类似的情况,是应该把赌注押在一个云提供商身上,让一切都留在内部,还是追求混合云策略,避免陷入困境?专...