OceanBase CEO 杨冰:2.8万字总结金融核心系统数据库升级路径与...

其中大部分涉及核心系统数据库升级,尤其以头部银行、头部保险公司为代表的金融机构开始涉足“无人区”,率先进行核心系统数据库的分布式升级,并取得了不错的成绩。以某国有大行为例,国内首个贷记卡核心系统“大机下移”分布式已经稳定运行一年有余,目前已有ECIF、对公网银等几十套系统数据库升级至OceanBase,传统核心也...

为什么又造了个新词 Data Warebase:我看到了 AI 时代数据平台应当...

除了单个产品的稳定性问题,这种架构往往需要数据同步,这会进一步影响系统的稳定性:如果存储某一份数据的产品(比如说HBase)恰巧不能高效地支持某种查询需求(比如说关键词搜索或语义搜索),就需要通过同步任务把数据从一个产品同步到另一个产品,然后使用目标产品完成相应的查询。数据同步往往是整个数据系统中最脆弱的环节...

云原生数据库 TDSQL-C 高可用,一键实现多可用区部署

可以根据实际需要,开启或关闭自动暂停设置,开启时数据库在所设定时间内没有连接和CPU使用时,会自动暂停集群,暂停后计算不计费,存储仅按实际使用量计费;关闭时,数据库会保持持续运行,在没有连接和CPU使用时,按用户配置的最小CCU算力进行计费,适用于业务有心跳连接的应用场景。云原生数据库高可用:Region(区...

如何设计真正的实时数据湖?

面对一个数据库,可靠性可以99.9999%,即每年停机5分钟,但是,如果湖仓连接50个数据库,就是50个每年停机5分钟,几乎是每周都有链路不好使。那么,湖仓数据链路的启停、初始化、恢复、碎片补偿,就是必要准备的技术方案。对于源端库宕机、链路中断、目标库空间不足,就变成了常规事项,比传统业务数据库管理,差异蛮大。2...

这些年背过的面试题——个人项目篇

在秒杀系统中,Redis中的数据主要是给秒杀接口服务使用,以便将配置从管理后台同步到Redis缓存中。KV存储方面,秒杀系统中主要是用Redis缓存活动配置,用etcd存储集群信息。关系型数据库中,MySQL技术成熟且稳定可靠,秒杀系统用它存储活动配置数据很合适。主要原因还是秒杀活动信息和库存数据都缓存在Redis中,...

数据集成产品的技术演进与实际应用-FastData DCT

DCT(DataCollectionTransform,简称DCT)支持关系型数据库、NoSQL、数据仓库(OLAP)、数据湖(lceberg、Hudi)等数据源,可用于公有云之间、公有云与私有云之间的数据入湖入仓的结构迁移,存量数据同步和实时数据捕获同步(www.e993.com)2024年11月20日。为企业实现数据流通,提供简单、安全和稳健的数据传输保障。

【金猿案例展】河北银行——基于“湖仓一体”数据平台建设

结合监管要求,河北银行综合考量行内数字化转型对数据能力建设需要,选择引入南大通用GBase8aMPP数据库,建设新一代“湖仓一体”数据平台,以应对原数据仓库技术支持难以为继,且数据能力方面存在的不足。数据支持河北银行湖仓一体技术平台以Hadoop平台为主存储,以南大通用GBase8a分布式数据库为计算引擎,集两者优势合...

由浅入深,信创落地全面提速|爱分析报告

图2:企业对搜索型数据库的核心需求与解决方案示意图适应企业一到多个内容检索场景。企业不同场景下对搜索型数据库的功能需求不同,如员工查询公司规定流程或是对专业知识进行检索的场景,需要搜索型数据库具备全文检索功能;电商平台对销售额、用户行为、热门商品进行分析场景下,需要搜索型数据库具备聚合分析来计算总销售...

亿速云「云数据库MySQL」采用的双节点互备同步高可用架构,进一步...

“双节点高可用版”则采用了「一主一从」的双节点互备同步高可用架构,当默认的数据库实例主节点出现故障不可用或连接异常时,可实现秒级探测,并快速自动切换至另一可用节点,以此满足和保证数据库服务的高可用性。2、存储类型:基于企业级本地SSD盘存储

17条避坑指南,获赞5K+,这是一份来自谷歌工程师的数据库经验贴

MartinKleppmann的hermitage项目总结了不同的并发异常,并说明了一个数据库在不同的隔离层级上能否处理这样的异常:httpsgithub/ept/hermitage。Kleppmann的研究表明数据库设计者会以不同的方式解释隔离层级。当你无法搞定锁时,就使用乐观锁