包含"大数据"标签的文章
-
从沉睡数据中激发潜能与创新 解锁大数据
在今天的数据驱动时代,企业试图在海量数据中寻找潜藏的价值,数据中台已广泛被企业采纳,用以管理和分析庞大的数据集,然而,一个棘手的问题仍悬而未决——大量数据仍静默无声,如何有效地激活这些沉睡的数据资产,在此背景下,数据飞轮的概念显得尤为重要,因为它不仅提供了一种思考框架,还为企业如何利用数据增强自身竞...
-
互联网海量数据如何存储Kafka
对于大部分互联网公司来说,数据量最大的几类数据是,点击流数据、监控数据和日志数据,这里面,点击流,指的是在App、小程序和Web页面上的埋点数据,这些埋点数据记录用户的行为,比如你打开了哪个页面,点击了哪个按钮,在哪个商品上停留了多久等等这些,当然你不用太担心自己的隐私问题,记录的这些行为数据不是为...
-
货拉拉大数据元数据管理体系演进和实践
一、元数据管理平台介绍首先来介绍一下货拉拉大数据体系的整体架构,这一体系自底向上构建,其中基础层与接入层,这两层主要承载着最基础的存储能力、计算能力以及数据接入功能,向上是平台和数仓层,这里集成了数据研发平台、数据治理平台,以及数据资产管理,再向上是服务层,这层面向多样化服务场景,开发的大数据一系列...
-
盘点2024年生成式AI带来的五大新型安全威胁
有网络安全专家表示,虽然企业组织并不总是能够准确指出生成式AI在网络攻击中发挥的作用,但可以假设它在网络钓鱼和社会工程攻击中已经变得无处不在了,随着OpenAIChatGPT等工具的出现以及对攻击者用户的突显,,你可以假设复杂性和准确性都有所提高,以及网络钓鱼和社会工程中语言学发生的变化,,托管检测...
-
云上大数据架构是什么
构建大数据解决方案时应使用哪个云提供商,下图展示了AWS、GoogleCloud和MicrosoftAzure的详细比较,解决方案的共同部分,构建大数据解决方案时应使用哪个云提供商,下图展示了AWS、GoogleCloud和MicrosoftAzure的详细比较,01结构化或非结构化数据的数据摄取摄...
-
算法在 画像平台建设中的应用 58
首先和大家分享下58画像平台的建设背景,传统的思路来看,建设用户画像平台依赖数仓建模能力,整合多业务线数据,构建准确的用户画像;还需要数据挖掘,理解用户行为、兴趣和需求,提供算法侧的能力;最后,还需具备数据平台能力,高效存储、查询和共享用户画像数据,提供画像服务,业务自建画像平台和中台类型画像平台主...
-
2021年十大科技趋势
架构、云计算一、化繁为简,走在,极简,路上的微服务2020年,微服务领域出现了一个新词汇,宏服务,宏服务其实并不是一个全新的架构,而是一种在单体和微服务间取得平衡的理念,目前,微服务的发展增加了系统的复杂性,微服务日趋细化、复用率达到顶峰,服务之间的关系变得愈加复杂,维护成本增加,在这种情况下,技术...
-
大数据面试 分层设计思想
这个最小化部署方案使用了较少的工具和框架,但仍然涵盖了ODS,DWD,DWS,ADS数据仓库架构的基本功能,通过这种方式,我们可以快速构建一个简单的数据仓库,并根据需求逐步扩展和优化,...。...
-
Essbase的技术功能 Hyperion
在企业绩效管理领域,EPM,中,数据分析和数据报告是企业做出明智的商业决策的重要支撑,HyperionEssbase是一个多维数据库管理系统,在为企业提供分析、处理数据的能力方面处于领先地位,我们将深入了解HyperionEssbase的技术功能,并探讨它如何使企业释放出有价值的观点,多维度分析Hy...
-
推荐 八个炫酷的数据可视化大屏项目!
大家好,我是CUGGZ,今天来推荐8个炫酷的数据可视化大屏项目!GoView是一个高效的拖拽式低代码数据可视化开发平台,将图表或页面元素封装为基础组件,无需编写代码即可制作数据大屏,https,gitee.com,MTrun,go,view,vue,big,screen一个基于Vue、Datav、E...
-
数据可信度提高 数据质量 Snowflake
Snowflake是一种边缘云上的数据存储和分析平台,它为需要处理大量结构化或非结构化数据的用户提供便捷、灵活、安全以及高性价比的解决方案,为了让它可以高效应对现代化数据环境,数据团队必须高度重视数据可信度,以此确保可以有效利用现代化数据环境的诸多特征,比如可伸缩性、高可用性、最优性能,那些将数据可...
-
手把手教你用 实现四种可视化图表 BI Power
一、折线图主要用于连接各个单独的数据点,它能够简洁、清晰地展现在一段时间内的数据变化趋势,步骤1,步骤2,如果还要进一步美化视觉对象,在可视化窗格的,格式,选项卡中,可以设置视觉对象的X轴、Y轴、数据颜色、数据标签、标题等元素的格式,二、切片器使用切片器可以筛选其他对象中的日期、数值或其他类型的数据...
-
基于改进字典的大数据多维分析加速实践
OLAP场景是大数据应用中非常重要的一环,能够快速、灵活地满足业务各种分析需求,提供复杂的分析操作和决策支持,B站主流湖仓使用Iceberg存储,通过建表优化可以实现常规千万级的指标统计秒级查询,这样就能快速搭建可视化报表,但当数据量达到亿级、需要交叉分析维度复杂多表情况下,想要支持秒级就变得困难,...
-
大模型的泡沫什么时候破灭
作者,沈旸出品,技术栈,微信号,blog51cto,对于技术泡沫,大家可能最熟悉的就是Gartner的技术成熟度曲线图,过去几年确实出现了许多备受关注的技术,例如云计算、大数据、区块链和元宇宙,新技术让人激动,但很多企业在跟进这些技术时往往犹豫不决,担心不下注未来会被淘汰,也担心投入巨大但方向错误,...
-
数据分析
我们一起聊聊如何做一个优秀的数据分析项目,纵观整个过程,我们能看到,做好项目的过程,就是把数据方法应用于企业实践的过程,数据本身有统计学、数学、编程、数据库等专业知识,但其中相当部分,比如数仓、ETL,是为保障数据本身的正常运行;相当部分,比如语义判断、图像识别,是用于工业应用,不用考虑业务理解和配...