网站权限设置网络科技公司 网站建设

网站权限设置,网络科技公司 网站建设,河北省招标投标网官网,如何制作精美的ppt上述阿里巴巴的这个设计规范是为了解决在分布式数据库和大数据量场景下#xff0c;JOIN操作容易引发的性能问题而制定的。 一、禁止三表以上JOIN的原因 1. 执行计划复杂度爆炸 3个表JOIN有6种可能的连接顺序4个表JOIN有24种可能的连接顺序随着表数量增加#xff0c;优化器需要…上述阿里巴巴的这个设计规范是为了解决在分布式数据库和大数据量场景下JOIN操作容易引发的性能问题而制定的。一、禁止三表以上JOIN的原因1.执行计划复杂度爆炸3个表JOIN有6种可能的连接顺序4个表JOIN有24种可能的连接顺序随着表数量增加优化器需要评估的可能性呈阶乘级增长2.网络传输成本高在分布式数据库如MySQL分库分表、ClickHouse等中JOIN需要跨节点/分片传输数据多表JOIN可能导致数据在节点间多次传输3.内存消耗大需要为每个中间结果集分配内存可能产生巨大的临时表替代方案-- 不推荐的复杂JOINSELECT*FROMAJOINBONA.idB.a_idJOINCONB.idC.b_idJOINDONC.idD.c_id;-- 推荐分多次查询应用层组合-- 1. 先查主表-- 2. 用IN查询关联数据-- 3. 在应用层组装结果二、数据类型必须绝对一致1.隐式类型转换问题-- 问题示例varchar与int直接JOINSELECT*FROMusers uJOINorders oONu.ido.user_id-- 如果users.id是intorders.user_id是varchar-- 会发生全表扫描2.性能影响类型不匹配导致无法使用索引需要逐行进行类型转换可能导致错误的执行计划选择3.数据一致性问题可能导致精度丢失隐式转换可能产生意外结果三、关联字段必须有索引1.无索引的灾难性后果-- 假设user_id没有索引SELECT*FROMordersJOINusersONorders.user_idusers.id-- 复杂度O(n²) 全表扫描2.索引选择策略-- 确保关联字段有合适索引ALTERTABLEordersADDINDEXidx_user_id(user_id);ALTERTABLEusersADDINDEXidx_id(id);3.复合索引的利用-- 如果查询包含WHERE和JOINSELECT*FROMorders oJOINusers uONo.user_idu.idWHEREo.statuspaidANDo.created_at2024-01-01;-- 最佳索引ALTERTABLEordersADDINDEXidx_user_status_date(user_id,status,created_at);四、实际场景中的优化方案方案1分步查询 应用层组合# 应用层处理复杂关联defget_user_orders(user_id):# 1. 获取用户信息userdb.query(SELECT * FROM users WHERE id ?,user_id)# 2. 获取订单ordersdb.query( SELECT * FROM orders WHERE user_id ? ORDER BY created_at DESC LIMIT 100 ,user_id)# 3. 获取订单详情如果需要order_ids[o.idforoinorders]iforder_ids:detailsdb.query( SELECT * FROM order_details WHERE order_id IN (%s) ,,.join(order_ids))# 在应用层组装数据return{user:user,orders:orders,details:details}方案2冗余设计空间换时间-- 将常用关联字段冗余存储CREATETABLEorders(idBIGINTPRIMARYKEY,user_idBIGINT,user_nameVARCHAR(100),-- 冗余用户姓名user_phoneVARCHAR(20),-- 冗余用户电话INDEXidx_user(user_id));方案3使用物化视图/汇总表-- 预计算复杂关联结果CREATEMATERIALIZEDVIEWuser_order_summaryASSELECTu.idasuser_id,u.name,COUNT(o.id)asorder_count,SUM(o.amount)astotal_amountFROMusers uLEFTJOINorders oONu.ido.user_idGROUPBYu.id,u.name;-- 定期刷新物化视图REFRESH MATERIALIZEDVIEWuser_order_summary;五、例外情况1.数据仓库/OLAP场景星型/雪花模型允许较多JOIN因为数据定期批量处理不是实时查询2.小表驱动大表-- 小表如配置表JOIN大表是可以接受的SELECT*FROMlarge_table lJOINsmall_config_table sONl.type_ids.id-- 确保small_config_table.id有索引3.维度表JOIN在数仓中事实表JOIN维度表是标准做法但维度表不宜过大且关联字段必须有索引总结这个设计规范的核心理念是可预测的性能避免JOIN导致的性能不确定性线性扩展应用层处理比数据库层更容易扩展明确的责任分离业务逻辑尽量放在应用层为分布式设计考虑分库分表后的可行性在大数据量、高并发的互联网应用中这种保守的设计能有效避免生产环境中的性能灾难特别是在微服务架构和分布式数据库环境中更为重要。