- 综合排序
- 最热优先
- 最新优先
- 来自专栏ops技术分享
Mysql实例 数据库优化--数据库架构扩展
五.数据库架构扩展 随着业务量越来越大，单台数据库服务器性能已无法满足业务需求，该考虑增加服务器扩展架构了。 增加缓存 给数据库增加缓存系统，把热数据缓存到内存中，如果缓存中有请求的数据就不再去请求MySQL，减少数据库负载。缓存实现有本地缓存和分布式缓存，本地缓存是将数据缓存到本地服务器内存中或者文件中。 主从复制与读写分离 在生产环境中，业务系统通常读多写少，可部署一主多从架构，主数据库负责写操作，并做双机热备，多台从数据库做负载均衡，负责读操作。 在这种MySQL主从复制拓扑架构中，分散单台负载，大大提高数据库并发能力。如果一台从服务器能处理1500 QPS，那么3台就能处理4500 QPS，而且容易横向扩展。 如果业务量很大，还可将分离后的数据库做主从复制架构，进一步避免单库压力过大。
2.7K20发布于 2021-06-16 - 来自专栏JAVA开发专栏
架构设计---数据库的存储优化
前言： 互联网系统架构中，承受着最大出力压力，最难以被伸缩的，就是数据存储部分，原因主要有两方面，一方面，数据存储需要使用硬盘，而硬盘的处理速度要比其他几种计算资源都要慢，比如说CPU、内存等；数据是一个公司最重要的资产 目前用来改善数据存储能力的主要手段：数据库的主从复制、数据库分片和NoSql数据库。 命令的时候，这个命令会同时在主数据库和从数据库中执行，从而实现了主数据库向从数据库的复制处理，使得从数据库与主数据库保持一致。 编辑 通过主从数据库复制的方式，我们可以实现数据库读写的分离，写操作访问主数据库，读操作访问从数据库，使数据库具有更强大的访问负载能力，支撑更多的用户访问。 编辑 小结： 架构是一门关于权衡的艺术，这一点在数据存储架构上表现的最明显了，由于数据存储的挑战性和复杂性，无论你选择何种技术方案，都会带来一些新的问题和挑战，数据存储架构没有一下子就能处理的解决方案，
54730编辑于 2023-07-15 - 来自专栏以Java架构赢天下
MySQL性能管理及架构设计（二）：数据库结构优化、高可用架构设计、数据库索引优化
一、数据库结构优化（非常重要） 1.1 数据库结构优化目的 1. 减少数据冗余：（数据冗余是指在数据库中存在相同的数据，或者某些数据可以由其他数据计算得到），注意，尽量减少不代表完全避免数据冗余； 2. 尽量避免数据维护中出现更新，插入和删除异常： ? 总结：要避免异常，需要对数据库结构进行范式化设计。 3. 节约数据存储空间。 4. 提高查询效率。 数据范式可以帮助我们设计； 物理设计：表结构设计，存储引擎与列的数据类型； 维护优化：****索引优化、存储结构优化。 1.3 数据库范式设计与反范式化 1.4 物理设计 ? ? ? 二、高可用架构设计 ? ? 2.1 读写分离 ? 三、数据库索引优化（非常重要） 3.1 两种主要数据结构：B-tree和Hash 3.1.1 B-tree结构 ? B-tree索引的限制： ?
1.1K10发布于 2019-06-19 面向企业的YashanDB数据库架构优化技巧
在现代企业信息系统中，数据库性能直接关系到业务响应速度和用户体验，尤其面对海量数据和复杂查询，如何有效优化数据库以提升查询速度和系统稳定性成为关注焦点。 YashanDB作为一款高性能、高可用的企业级数据库，引入多种创新架构与技术，本文将围绕其核心架构要素，深入探讨优化数据库性能的实用技巧，助力企业实现系统效能最大化。 开启审计和安全管理功能，加强数据库的安全防护，规避风险。结论YashanDB数据库通过多种创新技术架构设计，充分满足企业级应用在性能、高可用、扩展性和安全性方面的复杂需求。 未来，随着数据规模不断扩大和业务复杂度提升，基于YashanDB的架构优化技术将成为企业数据库系统提升核心竞争力的关键。 持续关注和深入掌握数据库底层架构和性能调优策略，将助力企业构建更高效、可靠的数据服务平台。
22610编辑于 2025-09-30- 来自专栏友儿
数据库结构优化、高可用架构设计、数据库索引
一、数据库结构优化 1.1 数据库结构优化目的 1、减少数据冗余：（数据冗余是指在数据库中存在相同的数据，或者某些数据可以由其他数据计算得到），注意，尽量减少不代表完全避免数据冗余； 2、尽量避免数据维护中出现更新 ，插入和删除异常： 总结：要避免异常，需要对数据库结构进行范式化设计。 数据范式可以帮助我们设计； 3、物理设计：表结构设计，存储引擎与列的数据类型； 4、维护优化：索引优化、存储结构优化。 1.3 数据库范式设计与反范式化 传送门：数据库逻辑设计之三大范式通俗理解，一看就懂，书上说的太晦涩 相关传送门：MySQL中字段类型与合理的选择字段类型；int(11)最大长度是多少？ ，varchar最大长度是多少 二、高可用架构设计 2.1 读写分离 MaxScale：实现MySQL读写分离与负载均衡的中间件利器 三、数据库索引优化 3.1 两种主要数据结构：B-tree和Hash
81030编辑于 2022-09-11 深度剖析YashanDB数据库架构及性能优化技巧
在现代信息系统中，如何优化数据库查询速度直接影响系统的响应时效和用户体验。 YashanDB作为一个支持多种部署形态和多样存储架构的高性能关系型数据库，其架构设计与性能优化技术的合理运用是提升查询效率的关键。 YashanDB数据库架构核心技术解析部署形态与实例架构YashanDB支持单机主备、分布式集群和共享集群三种部署形态。单机主备通过主备复制保证数据同步及高可用性，适合多数应用场景。 结论本文系统介绍了YashanDB数据库的体系架构，包括其部署形态、存储引擎、SQL执行引擎、事务管理、高可用方案与内存多线程架构。 建议数据库管理员及开发人员根据系统实际运行情况，将本文所述架构原理及优化技巧结合具体应用环境，科学规划与调优，以实现YashanDB数据库的高效性能与稳定运行。
28110编辑于 2025-08-12YashanDB数据库引擎架构设计与优化技巧
随着数据量的不断增长和应用需求的日益复杂，数据库系统面临着性能瓶颈和数据一致性维护等普遍挑战。高效的数据存储机制、强大的事务支持以及灵活的部署架构成为数据库技术发展的核心议题。 本指南面向拥有一定数据库基础的开发人员及DBA，深入解析YashanDB数据库引擎的架构设计及关键优化策略，以期提升数据库系统应用效能和稳定性。 结论YashanDB数据库通过丰富且灵活的架构设计与先进的优化技术，实现了面向多样化业务场景的高性能、高可用及强一致性保障。 未来，随着数据规模的持续增长和业务复杂性的不断提升，基于分布式与共享集群的架构优化、多版本并发控制的精细化调优、高效存储引擎的持续创新将成为数据库系统的核心竞争力。 掌握YashanDB的架构设计原理及优化实践，有助于技术人员在实际环境中提升数据处理效率和系统稳定性，促进数据库技术的持续进步与应用扩展。
30010编辑于 2025-09-01GBase 数据库的存储架构与性能优化技术
一、引言随着大数据时代的到来，数据库系统的存储架构逐渐成为性能优化的核心领域。 GBase 系列数据库（如 GBase8a、GBase8s 和 GBase8c）在存储架构设计上具有高度灵活性和可扩展性，能够满足多种数据密集型应用场景的需求。 本文将深入分析 GBase 的存储架构特点，并探讨如何利用其特性对数据库性能进行优化。二、GBase 数据库存储架构概述1. 四、SQL 优化与存储架构结合GBase 的存储架构在 SQL 查询优化中扮演重要角色。以下是一些典型的优化技巧：1. 避免全表扫描全表扫描会消耗大量 I/O 资源。 通过合理配置存储模式、利用分区与压缩技术，以及优化 SQL 查询，开发者可以显著提升数据库的性能与可用性。在实践中，结合业务需求和存储特性，将 GBase 的强大能力最大化，是每位数据库从业者的目标。
73710编辑于 2024-12-03深入理解YashanDB数据库架构与性能优化
现代数据库需要在支持高并发访问的同时保证数据一致性和持久性，这对底层架构设计与执行效率提出了极高要求。 本文基于行业技术标准，结合YashanDB的架构特性和优化手段，系统性解析其核心技术实现和性能提升机制，为数据库管理员和开发人员提供具体可行的技术参考。 整体架构保障多用户、多事务环境下数据库的高效稳定运行。 性能优化建议合理选择部署形态。根据业务吞吐需求和扩展能力，选用单机、分布式或共享集群部署，充分利用对应的架构优势，提升系统伸缩性和稳定性。优化存储结构。 针对特定复杂查询，手工介入优化计划，提高执行效率。结论随着数据规模和业务复杂度的不断提升，数据库系统在架构设计与性能优化方面的挑战日益严峻。
24610编辑于 2025-09-18- 来自专栏BeJavaGod
【DB优化1】高并发数据库读写分离架构
在微服务开发中，随着业务量数据量的提升，数据库必定遭遇高并发等风险。 此时，我们需要进行一定的优化。 根据“二八原则”，80%都是读请求，甚至更多，20%都是写请求，甚至更少。所以绝大多数的业务场景之下都是高并发读。假设我们现在的目的是，要提高并发读的性能以及高可用读。 那么这个时候我们可以将单数据库优化为如下： 从图中可以看到，用户的请求并不是全部都到达一个单库，而是会被分流，这是一个非常典型的读写分离架构。 像这样的一个主从架构可以保证高性能读以及高并发读，如果读库集群再次达到瓶颈则可以继续进行水平扩展。 ---- 后续老师也会推出更多的技术课程、实战课程以及架构课程，大家可以多多关注老师~ 关注我，不定时更新技术架构、项目管理、企业管理等各种信息资讯，让你积累更多有价值的竞争资本~
58820编辑于 2022-04-18 - 来自专栏大数据与微服务架构
架构性能优化
优化思路： 1、了解现状，发现问题 2、确定清晰的优化目标，分析现状与目标的差距并确认执行路线。 3、对系统进行拆分，分别对逻辑层（Web层、业务层、持久化层）和物理层（客户端、网络、应用服务器、数据库服务器）进行优化。 4、利用工具对系统进行监控和测试，并对监控结果进行分析 5、科学的对系统进行优化，需遵循一定的程序：监控/性能测试 -> 分析瓶颈 罗列瓶颈的原因 验证瓶颈因素 修改系统 确认是否达到优化目标。 ，减少短期生存的对象 提高内存性能：减少长期生存的对象 提高I/O性能：重新设计应用，减少I/O的交互 缓存为王：适度缓存，做到最大化发挥数据库缓存、应用端缓存、客户端缓存的作用。 分层优化： 客户端优化 服务器优化 JVM优化 数据库优化 负载均衡优化
68210发布于 2020-04-11 【Transformer架构优化】
一、当前Transformer架构优化的主要方向 Transformer架构的优化主要集中在注意力机制的计算效率上，目前主流分为线性注意力（Linear Attention）和稀疏注意力（Sparse O(N) 状态空间模型+硬件优化 超长序列 典型示例： 标准Attention：BERT-base的512token处理 线性Attention：Performer处理10万token基因组数据 稀疏 不同场景下的选型建议 长序列建模场景： 优先方案：线性Attention（如Cosformer）或SSM架构（如Mamba） 考量因素： 线性Attention需注意近似误差 SSM架构对硬件加速要求较高 优化方向： 选择性状态更新 硬件感知设计 内存压缩技术 部署案例： 移动端AI应用 边缘计算设备 实时推理系统 3. 混合架构实践建议 对于复杂场景可考虑： 分层处理：底层用SSM，高层用稀疏Attention 动态切换：根据序列长度自动选择计算模式 知识蒸馏：用大模型指导轻量架构
42410编辑于 2025-12-18- 来自专栏服务器运维日常
数据库性能优化：从查询到架构的全面提升
因此探寻有效途径以提升数据库性能，是确保整个软件系统高效运转的关键。本文将探讨从索引优化、架构重构、连接池管理、数据缓存等角度，深入提升数据库性能的方法。 关于数据表索引的类型、创建方法、区别、如何选择合适的索引、索引的使用方法、分析策略、优化技巧及维护要点，可查看相关文章：【MySQL数据表索引选择与优化方法】覆盖索引是数据库索引的一种类型，它存储了执行查询所需的所有数据 关于覆盖索引的使用，可查看相关文章：【数据表索引应用之覆盖索引】分库分表的架构设计在业务量迅猛增加的情况下，数据库经常面临性能的极致挑战。 这种方法能有效减少对数据库的频繁读取，从而减轻数据库的运行负担。缓存优化主要可以从三个层面进行：数据库自身的缓存机制、应用层面的缓存系统以及程序开发过程中的缓存策略。 相关具体测试可查看文章：【数据表索引性能优化测试：5000万条数据的实测分析】总结通过运用索引技术、数据库的分库分表策略、数据库连接池以及缓存机制等手段，能够显著提高数据库系统的性能，进而优化整个应用系统的运行效率
63721编辑于 2024-08-13 - 来自专栏Java帮帮-微信公众号-技术文章全总结
【数据库】数据库优化（SQL优化）
【数据库】数据库优化（SQL优化） sql语句优化 1.查询的模糊匹配 尽量避免在一个复杂查询里面使用 LIKE '%parm1%'—— 红色标识位置的百分号会导致相关列的索引无法使用，最好不要用。 例子 SELECT * FROM ORDERS WHERE CUSTOMER_NAME NOT IN (SELECT CUSTOMER_NAME FROM CUSTOMER) 优化 SELECT 11.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 select num from a where exists(select 1 from b where num=a.num) 23.并不是所有索引对查询都有效，SQL是根据表中数据来进行查询优化的
6.2K40发布于 2018-03-15 - 来自专栏全栈程序员必看
数据库优化 – SQL优化
前面一篇文章从实例的角度进行数据库优化，通过配置一些参数让数据库性能达到最优。但是一些“不好”的SQL也会导致数据库查询变慢，影响业务流程。本文从SQL角度进行数据库优化，提升SQL运行效率。 获取问题SQL 不同数据库有不同的获取方法，以下为目前主流数据库的慢查询SQL获取工具 MySQL 慢查询日志 测试工具loadrunner Percona公司的ptquery等工具 Oracle AWR报告 测试工具loadrunner等 相关内部视图如v、session_wait等 GRID CONTROL监控工具 达梦数据库 AWR报告 执行计划 完成SQL优化一定要先读执行计划，执行计划会告诉你哪些地方效率低，哪里可以需要优化。 接下来我们用一段实际优化案例来说明SQL优化的过程及优化技巧。
4.1K10编辑于 2022-10-04 - 来自专栏JAVA杂谈
数据库优化 - SQL优化
是时候 关注 我们一波了 前面一篇文章从实例的角度进行数据库优化，通过配置一些参数让数据库性能达到最优。但是一些“不好”的SQL也会导致数据库查询变慢，影响业务流程。 本文从SQL角度进行数据库优化，提升SQL运行效率。 获取问题SQL 不同数据库有不同的获取方法，以下为目前主流数据库的慢查询SQL获取工具 MySQL 慢查询日志 测试工具loadrunner Percona公司的ptquery等工具 Oracle AWR （每个数据库的执行计划都不一样，需要自行了解） explain sql ? 每个被独立执行的操作标识，标识对象被操作的顺序，id值越大，先被执行，如果相同，执行顺序从上到下 接下来我们用一段实际优化案例来说明SQL优化的过程及优化技巧。
2.3K20发布于 2019-11-06 - 来自专栏JAVA杂谈
数据库优化 - 实例优化
从网上去搜数据库优化基本都是从SQL层次进行优化的，很少有提及到数据库本身的实例优化。 有时候设计不合理怎么调整参数都不行 不断调整操作系统参数就可以最终实现优化 同上 数据库性能由应用、数据库架构决定，与应用开发关系不大 恰恰相反，应用开发的关系很大 必须要做读写分离，必须要弄分库分表 数据库在架构设计中都会采用如下两个优化手法： 先将事务写到日志文件RedoLog（WAL），将随机写优化成顺序写 加一层缓存结构Buffer，将每次写优化成批量写 所以日志跟缓存对数据库实例尤其重要。 数据库参数优化 主流数据库架构都有如下的共同点： 数据缓存 SQL解析区 排序内存 REDO及UNDO 锁、LATCH、MUTEX 监听及连接 文件读写性能 接下来我们根据不同的数据库调整参数以使数据库达到最佳性能 ，有换磁盘阵列升级硬件，有改写SQL脚本添加索引，还有数据库参数调整优化性能，甚至还可以调整数据库架构。
2K30发布于 2019-10-30 YashanDB数据库的架构设计与性能优化最佳实践
数据库架构设计的合理性直接影响系统的稳定运行和性能表现，而性能优化则是数据库高效服务的核心保障。 本文面向数据库开发人员和DBA等具备基础数据库知识的技术人员，深入探讨YashanDB数据库的系统架构设计及其性能优化策略，以期促进对复杂业务场景下数据库设计与优化方案的理解。 后续内容将覆盖部署架构选择、多版本并发控制、存储引擎机制、SQL执行优化、事务管理及高可用方案，助力提升数据库整体性能和可靠性。 结论本文详细介绍了YashanDB数据库的部署架构设计、存储引擎机制、SQL执行优化、事务管理及高可用保障机制等技术要点。 建议数据库运维和开发人员根据该架构特性及优化最佳实践，结合自身业务需求和负载特征，科学配置数据库服务，持续优化执行计划，有效利用事务隔离和多版本并发控制能力，保障数据一致性和并发处理性能，最终实现业务系统的高效运行和稳定可靠
29210编辑于 2025-08-24- 来自专栏架构师之路
12306系统架构优化
12306系统架构优化 coolshell陈皓优化方案 原文：http://coolshell.cn/articles/6470.html 一、业务复杂度比对 （1）qq业务模型：只访问自己的数据 （2 结论：高并发下数据一致性是12306的痛点 三、前端优化 （1）负载均衡：DNS+CDN； （2）减少页面链接数：减少浏览器http并发连接，合并js，合并css，合并图标 （3）减少页面大小：带宽有限 ，压缩，分离图片服务 （4）页面静态化：同一时间查询相同车次的结果页面都是一样的，甚至可将静态化的文件放入/dev/shm下 （5）查询优化：票务结果显示“有/无”，而非具体数字，能大大简化逻辑 （6） 前端缓存：直接缓存动态页面 四、后端优化 （1）数据冗余：一个数据可以冗余存在多个表里，代价是一致性 （2）数据镜像：replication，仍然有一致性问题 （3）数据分区：分库，分表，分字段 （4） 2.3）缓存有票/无票状态 （3）前端缓存+防刷 （4）IO优化，几百万的订单而已 三、总结 缓存（查询结果静态化）是整个优化方案的核心 这个手段极其适用于符合这两个要求的场景： （1）查询频率远大于更新频率
2.8K40发布于 2018-02-28 - 来自专栏小手冰凉
LAMP 架构深度优化
##############基于LAMP（LNMP）问架构深度优化---配置文文件################# 3、修改配置文件参数实现隐藏版本号 a、nginx隐藏版本号 syntax server_tokens 0 physical id : 1 physical id : 1 [root@LNMP application]# 可以按照physical数量设置，或者将目前数量*2 5、事件处理模型优化 详细查阅:http://nginx.org/en/docs/ngx_core_module.html 8、优化服务器名字的hash表大小 确切名字和通配符名字存储在哈希表中。 哈希表的尺寸在配置阶段进行了优化，可以以最小的CPU缓存命中失败来找到名字。 这就是对业务进行分离，在比较好的网站业务架构中，应该把资源文件，包括用户上传的图片，附件等的服务和程序 大多数公司的不安全的授权如下： 1）chmod -R 777 /sitedir（最不安全）
1K30发布于 2019-09-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号