如果表包含使用MySQL的10000个条目,如何优化查询？

Question

当我像这样执行这个查询时,他们需要花费很多执行时间,因为user_fans表包含10000个用户条目.我该如何优化它？

询问

SELECT uf.`user_name`,uf.`user_id`,
@post                := (SELECT COUNT(*) FROM post WHERE user_id = uf.`user_id`) AS post,
@post_comment_likes  := (SELECT COUNT(*) FROM post_comment_likes WHERE user_id = uf.`user_id`) AS post_comment_likes,
@post_comments       := (SELECT COUNT(*) FROM post_comments WHERE user_id = uf.`user_id`) AS post_comments,
@post_likes          := (SELECT COUNT(*) FROM post_likes WHERE user_id = uf.`user_id`) AS post_likes,

(@post+@post_comments) AS `sum_post`,
(@post_likes+@post_comment_likes) AS `sum_like`, 
((@post+@post_comments)*10) AS `post_cal`,      
((@post_likes+@post_comment_likes)*5) AS `like_cal`,
((@post*10)+(@post_comments*10)+(@post_likes*5)+(@post_comment_likes*5)) AS `total`  
FROM  `user_fans` uf  ORDER BY `total` DESC lIMIT 20

Answer 1

我会尝试通过在你的其他表上放置触发器来简化这个完全简化,只需在你的User_Fans表中添加几个列...每个相应的count()一个你试图得到的...来自Posts,PostLikes,PostComments, PostCommentLikes.

将记录添加到任何一个表时,只需更新您的user_fans表以将计数加1 ...无论如何,它将基于用户的密钥ID实际上是瞬时的.至于"LIKES"......类似,只有在某些东西被触发为"喜欢"的情况下,添加1 ..那么你的查询将是单个记录上的直接数学而不依赖于任何连接来计算"加权"总价值.随着您的表变得更大,查询也将变得更长,因为他们有更多的数据要倾注和聚合.您正在浏览每条user_fan记录,其实质上是查询来自所有其他表的每条记录.

所有这一切,保持你的桌子,我会重组如下......

SELECT 
      uf.user_name,
      uf.user_id,
      @pc := coalesce( PostSummary.PostCount, 000000 ) as PostCount,
      @pl := coalesce( PostLikes.LikesCount, 000000 ) as PostLikes,
      @cc := coalesce( CommentSummary.CommentsCount, 000000 ) as PostComments,
      @cl := coalesce( CommentLikes.LikesCount, 000000 ) as CommentLikes,
      @pc + @cc AS sum_post,
      @pl + @cl AS sum_like, 
      @pCalc := (@pc + @cc) * 10 AS post_cal,
      @lCalc := (@pl + @cl) * 5 AS like_cal,
      @pCalc + @lCalc AS `total`
   FROM
      ( select @pc := 0,
               @pl := 0,
               @cc := 0,
               @cl := 0,
               @pCalc := 0
               @lCalc := 0 ) sqlvars,
      user_fans uf
        LEFT JOIN ( select user_id, COUNT(*) as PostCount
                       from post
                       group by user_id ) as PostSummary
           ON uf.user_id = PostSummary.User_ID

        LEFT JOIN ( select user_id, COUNT(*) as LikesCount
                       from post_likes
                       group by user_id ) as PostLikes
           ON uf.user_id = PostLikes.User_ID

        LEFT JOIN ( select user_id, COUNT(*) as CommentsCount
                       from post_comment
                       group by user_id ) as CommentSummary
           ON uf.user_id = CommentSummary.User_ID

        LEFT JOIN ( select user_id, COUNT(*) as LikesCount
                       from post_comment_likes
                       group by user_id ) as CommentLikes
           ON uf.user_id = CommentLikes.User_ID

   ORDER BY 
      `total` DESC 
   LIMIT 20

My variables are abbreviated as 
"@pc" = PostCount
"@pl" = PostLikes
"@cc" = CommentCount
"@cl" = CommentLike
"@pCalc" = weighted calc of post and comment count * 10 weighted value
"@lCalc" = weighted calc of post and comment likes * 5 weighted value

对预查询的LEFT JOIN运行那些查询ONCE,然后整个事物被连接而不是作为每个记录的子查询被命中.通过使用COALESCE(),如果LEFT JOINed表结果中没有这样的条目,你将不会被NULL值弄乱,因此我将它们默认为000000.

澄清你的问题

您可以将任何QUERY作为"AS AliasResult"."As"也可用于简化任何长表名称,以简化可读性.别名也可以使用相同的表,但作为不同的别名来获取类似的内容,但用于不同的目的.

select
      MyAlias.SomeField
   from
      MySuperLongTableNameInDatabase MyAlias ...

select
      c.LastName,
      o.OrderAmount
   from
      customers c
         join orders o
            on c.customerID = o.customerID  ...

select
      PQ.SomeKey
   from
      ( select ST.SomeKey
           from SomeTable ST
           where ST.SomeDate between X and Y ) as PQ
         JOIN SomeOtherTable SOT
            on PQ.SomeKey = SOT.SomeKey ...

现在,上面的第三个查询是不实际的,需要(完整查询导致别名"PQ"代表"PreQuery").如果您想要预先限制某组其他复杂条件并希望在为所有最终结果执行多个其他表的额外连接之前需要更小的集合,则可以执行此操作.

由于"FROM"不必是实际的表,但可以是查询本身,查询中使用的任何其他位置,它必须知道如何引用此预查询结果集.

此外,在查询字段时,它们也可以是"作为FinalColumnName",以便将结果简化到将要使用的位置.

从...中选择CONCAT(User.Salutation,User.LastName)作为CourtesyName

选择Order.NonTaxable + Order.Taxable +(Order.Taxable*Order.SalesTaxRate)作为OrderTotalWithTax来自......

"As"columnName不是聚合所必需的,但最常见的方式是这样.

现在,关于MySQL变量......如果你正在进行存储过程,很多人会预先声明它们在剩下的程序之前设置它们的默认值.您可以通过设置并为该结果提供"别名"引用,在查询中在线执行这些操作.在执行这些变量时,select将模拟始终返回值为SINGLE RECORD的值.它几乎就像在查询中使用的可更新的单个记录.您不需要应用任何特定的"加入"条件,因为它可能与查询中的其余表没有任何关系...本质上,创建笛卡尔结果,但是对任何其他表的一条记录永远不会创建无论如何重复,所以下游没有损坏.

select 
       ...
   from 
      ( select @SomeVar := 0,
               @SomeDate := curdate(),
               @SomeString := "hello" ) as SQLVars

现在,sqlvars如何工作.想想一个线性程序......一个命令在查询运行时按照确切的顺序执行.然后将该值重新存储回"SQLVars"记录中,准备下次通过.但是,您不会将其引用为SQLVars.SomeVar或SQLVars.SomeDate ...只是@SomeVar:= someNewValue.现在,当在查询中使用@var时,它也会在结果集中存储为"As ColumnName".有时,这可能只是在准备下一条记录时的占位符计算值.然后,每个值可直接用于下一行.所以,给出以下样本......

select
      @SomeVar := SomeVar * 2 as FirstVal,
      @SomeVar := SomeVar * 2 as SecondVal,
      @SomeVar := SomeVar * 2 as ThirdVal
   from
      ( select @SomeVar := 1 ) sqlvars,
      AnotherTable
   limit 3

Will result in 3 records with the values of 

FirstVal    SecondVal   ThirdVal
2           4           8
16          32          64
128         256         512

请注意@SomeVar的值是如何使用的,因为每列都使用它...所以即使在同一条记录上,更新的值也可立即用于下一列...也就是说,现在看看尝试构建模拟记录计数/每个客户的排名......

select
      o.CustomerID,
      o.OrderID
      @SeqNo := if( @LastID = o.CustomerID, @SeqNo +1, 1 ) as CustomerSequence,
      @LastID := o.CustomerID as PlaceHolderToSaveForNextRecordCompare
   from
      orders o,
      ( select @SeqNo := 0, @LastID := 0 ) sqlvars
   order by
      o.CustomerID

"Order By"子句强制首先按顺序返回结果.因此,在这里,返回每个客户的记录.第一次通过,LastID为0,客户ID为... 5.由于不同,它返回1作为@SeqNo,然后它将该客户ID保存到下一条记录的@LastID字段中.现在,客户的下一条记录...最后一个ID是相同的,所以需要@SeqNo(现在= 1),并且为同一客户添加1比1并成为#2 ...继续路径.. .

至于更好地编写查询,请查看MySQL标记并查看一些重要的贡献者.查看问题和一些复杂的答案以及解决问题的方法.并不是说没有其他声誉得分较低的人刚刚开始并且完全胜任,但你会发现谁给出了很好的答案以及为什么.看看他们发布的答案的历史.您阅读和遵循的越多,您就越能更好地处理更复杂的查询.