itpub技术论坛-凯发k8国际手机app下载

大数据

  在当前数智化转型时代,金融领域正迎来前所未有的机遇与挑战。政府工作报告中明确提出要“大力发展科技金融、绿色金融、普惠金融、养老金融、数字金融”,这不仅是时代的呼唤,更是金融业未来发展的必由之路。

数据挖掘
2024-05-23 17:07

随着像亚马逊、meta(原facebook)和谷歌这样的技术公司不断发展和融入我们的生活,它们正在利用大数据技术来监控销售、提高供应链效率和客户满意度,并预测未来的商业成果。目前,大数据的数量非常庞大,idc预测,全球数据总量到2025年将从2019年的33zb增长到175zb,复合年增长率为61%。

数据分析
2024-05-22 16:59

亲爱的社区小伙伴们,apache doris 2.1.3 版本已于 2024 年 5 月 20 日正式发布。该版本在功能特性上对数据湖、物化视图、负载管理等方面进行了多项更新,进一步简化湖仓一体架构、加速了查询性能;同时提交了若干改进项以及问题修复,进一步提升了系统的性能及稳定性,欢迎大家下载体验。凯发k8国际手机app下载官网下载: https://doris.apache.org/download/github 下载:

数据分析
2024-05-22 15:24

那么这一次,咱就用 doris 的 variant type 针对同一份需求数据,对比 ck 的 json type,看在功能的使用上,两者的差异如何。

数据分析
2024-05-22 09:50

在大数据时代,elasticsearch 作为一款强大的搜索和分析引擎,被广泛应用于各种场景。无论是实时日志分析、全文搜索还是复杂数据的实时处理,elasticsearch 都能胜任。

数据挖掘
2024-05-21 10:10

那这一次,我决定换一种更省事的升级方式,用上次我部署过的 doris manager,虽然部署之后就几乎没有用过,但希望在这次集群升级中,能发挥出它的价值。 下面,是记录我用 doris manager 将 doris 集群从2.0.2升级到2.1.2的完整过程。

数据分析
2024-05-17 09:52

​产品经理要避免成为需求传声筒,就需要具备需求挖掘、需求转化、需求抽象的能力,很多产品新人经常会被问到如何做需求抽象,那么产品需求抽象究竟指的是什么呢?

数据分析
2024-05-16 14:50

从功能介绍来说,无论是 ck 还是 doris,它们的目标都是在解决,对于一个「值类型不确定」的列,怎么样用一种比较合理的方式,把它作为一个数据库字段,给存储起来,以便后续的检索。

数据分析
2024-05-16 10:22

本文是基于实战问题的思路探讨。要说明的是:ngram 的本质是空间换时间,可能会导致写入的延时以及存储的成倍增长,选型一定要慎重。只有高精准检索要求的场景才考虑 ngram 分词。 普通业务场景实际是容许一些数据明明存在但就是无法召回的情况的,现在主流搜索引擎google、bing、baidu等都肯定无法召回全部数据的。所以,还得结合业务场景进行探讨。

数据分析
2024-05-14 09:43

kafka是非常重要的消息中间件,是构建高并发的基石,也是大厂重点考察内容,下面我就全面来详解kafka

数据分析
2024-05-14 09:32

kafka是非常重要的消息中间件,是构建高并发的基石,也是大厂重点考察内容,下面我就全面来详解kafka

数据分析
2024-05-13 11:17

那么今天这篇文章,咱就针对上次测试cdc 3.0.0时,遇到的3大槽点进行一一验证。 槽点1:不能以 on yarn 的集群方式运行; 槽点2:说好的可以兼容 flink 1.15,但实测不行; 槽点3:用本地模式运行时,只能同步历史数据,增量变化数据感知不到。

数据分析
2024-05-10 09:19

作者:武基鹏,无锡锡商银行 大数据技术经理编辑整理:selectdb 技术团队导读:为实现数据资产的价值转化以及全面数字化、智能化的风险管理,无锡锡商银行大数据平台经历从 hive 离线数据仓库到 apache doris 实时数据仓库的演进,目前已接入数百张实时表、上百数据服务接口 ,接口 qps 达到数百万级别,解决了离线数据仓库时效性不足、成本高昂、效率低下等问题,查询提速超 10 倍,为用

数据分析
2024-05-08 14:51

大模型应用领域的迅猛发展,也推动着基础技术领域持续探索和进步。文件存储服务在 ai 基础设施中成为不可或缺的重要部分。

数据分析
2024-05-08 09:39

使用消息队列可以帮助我们实现系统解耦、流量管控等功能。但使用过程中可能会遇到各种各样的问题,比如系统资源使用率高、集群节点宕机等,进而影响我们生产业务正常开展。为了不让消息队列失控,增加监控是非常必要的。今天来聊一聊 kafka 有哪些重要的监控指标。

数据分析
2024-04-30 09:12

如果说前两篇文章,分别用 clickhouse(下称ck) 跟 doris 来处理 schema-free 的 json 数据,从实测的情况来看,多少有点赶鸭子上架的味道。

数据分析
2024-04-30 09:08

spark 是一个快速、通用、可扩展的大数据计算引擎,本文从引擎侧和 spark 本身两个方面来阐述spark 在袋鼠云数栈的深度探索与实践。

hadoop
2024-04-26 14:23

带着这些对 ck 的不满跟遗憾,这一次,我们把目光挪向 doris,看它在面对相同场景时,能不能给我们带来更多的惊喜呢?

数据分析
2024-04-26 09:40

clickhouse(ck)、doris、elasticsearch,都支持对 json 数据的存储和查询。由于这3种数据库,在理论上都能满足当前的这个需求,那我就准备做一个系列性的测评,在摸清楚它们3,各自如何搞定这个问题的同时,也能找出最符合你胃口的方案。

数据分析
2024-04-25 09:45

在大数据时代,数据分析的重要性毋庸置疑。但依然有很多人掌握了数据分析工具和技能,却做不好数据分析。

数据分析
2024-04-24 10:14

通过彼此的 checkpoint 来恢复数据,从最终的恢复效果来看,在没有采取其他任何辅助措施的情况下,flink 跟 spark 都不能实现数据的「精确一次性」。

数据分析
2024-04-24 09:28

apache kafka的架构和功能使其成为需要处理1亿或更多用户的应用程序的绝佳选择。通过有效管理高容量数据流,确保可靠性和可扩展性,并支持解耦的事件驱动架构,kafka使应用程序能够扩展以满足庞大用户基础的需求。然而,在这种规模上利用kafka也需要仔细的规划、监控和管理,以解决相关挑战并确保系统的弹性和性能。

数据分析
2024-04-23 10:21

作者 | selectdb 技术团队作为广受认可的分布式数据库,oceanbase 已在众多企业关键业务系统中得到广泛应用。在 apache doris 社区,有众多用户选择基于 oceanbase 与 apache doris 以构建强大的数据处理与分析链路,本文将详细介绍如何便捷高效将数据从 oceanbase  迁移/同步至 apache doris 。实用指南00 环境准备使用

数据分析
2024-04-22 11:19
推荐专题
推荐小栈
精选课程
24小时热点
精选文章
联系凯发k8国际手机app下载

商务合作:

tel: 86-15801238530

email:sales@itpub.net

媒体合作:

email:edit@it168.com

关注公众号获取更多技术文章

网站地图