i MySQL, historiskt grupp av användes för att ge sortering samt. Om en fråga specificerade grupp av, resultatet sorterades som om ordning efter var närvarande i frågan.

MySQL here implicitly sorts the results from GROUP BY (i.e. in the absence of ASC or DESC designators for GROUP BY columns ).

MySQL also supported explicit sorting with GROUP BY (i.e. by using explicit ASC or DESC designators for GROUP BY columns).

detta har ändrats i 8.0 eftersom det inte längre stöder antingen implicit eller explicit sortering för grupp efter. I det här blogginlägget kommer jag att förklara varför denna förändring blev nödvändig och även det arbete som gjordes som en föregångare till denna förändring.

gruppera i MySQL

För att gruppera en uppsättning rader väljer MySQL optimizer olika metoder. En av dem är att sortera raderna innan de grupperas. Detta gör det enkelt att gruppera en grupp efter en annan. Det blir också billigt om det finns ett index som kan användas för att få sorterade rader. Om det inte finns något index kan MySQL optimizer fortfarande besluta att göra extern (filesort) sortering innan gruppering.

som framgår av exemplet, innan du lägger till index i tabellen, använder MySQL extern sortering för att göra grupp efter. För exempelfrågan har jag tvingat planen genom att använda SQL_BIG_RESULTAT (eftersom MySQL inte väljer den här planen för datasetet vi har). Men MySQL skulle använda denna plan för att gruppera i avsaknad av ett index för att få sorterade rader och använda tillfällig tabell blir kostsamt på grund av stort antal grupper. När indexet har lagts till använder det indexet för att göra grupp av.

men att ha sorterat rader före gruppering är inte en nödvändighet. Optimizer kan besluta att använda sig av en tillfällig tabell för att göra det. Varje rad i denna tabell skulle vara en grupperad rad och med varje inkommande rad uppdateras raden som motsvarar den gruppen i tabellen. Sortering behövs inte här. Men som GROUP BY i MySQL förväntades Sortera, tvingades det att sortera de grupperade raderna även i det här fallet .

i exempelfrågan kan vi se att även om tillfällig tabell används, MySQL gör fortfarande extern sortering. Användare måste uttryckligen ange ORDER BY NULL för att låta MYSQL veta att gruppen inte behöver Sortera. Så en icke-standard (ORDER BY NULL) syntax behövdes för att motverka effekten av en annan icke-standard förlängning (grupp genom sortering). Det är mycket renare nu när vi har eliminerat den röra.

borttagning av implicit sortering för grupp av

någon gång tillbaka försökte jag fixa bugg 71804. Reportern förväntade sig att MySQL inte skulle göra den onödiga filen-Sortera den gjorde för grupp efter. Att försöka göra en patch för buggen fick oss att inse att optimering av denna speciella situation inte är mycket rakt fram på grund av stödet för implicit och explicit sortering av den gruppen som tillhandahålls. Så vi drog slutsatsen att innan denna optimering kunde göras, borde vi återfaktorera kod relaterad till sortering för grupp efter.

det första steget i att göra det var att ta bort den implicita sorteringen för GROUP BY. Som nämnts i användarhandboken här beslutades att ta bort stödet för det en tid tillbaka . Det har gjorts som en del av den nedåtgående indexfunktionen i 8.0.

som framgår av exemplet ovan utförs inte sortering för frågan. Som ett resultat sorteras inte grupperade rader i slutresultatet. Om användare behöver sorterade rader måste de ange ordning efter i frågan.

i MySQL 5.7 och under versioner hittar användarna följande varning i manualen.

”GROUP BY implicit sorterar som standard (det vill säga i frånvaro av ASC eller DESC beteckningar för GROUP BY kolumner). Men förlitar sig på implicit GROUP BY sortering (det vill säga sortering i frånvaro av ASC eller DESC beteckningar) eller explicit sortering för GROUP BY (det vill säga genom att använda explicit ASC eller DESC beteckningar för GROUP BY kolumner) är föråldrat. För att producera en viss sorteringsordning, ange enORDER BY klausul. ”

borttagning av explicit sortering för grupp med

När det gällde borttagning av explicit sortering var det lite svårare att göra det. Vi kunde inte ta bort det om inte MySQL stödde ORDER BY med samlad. Samlad med ORDER BY var inte tillåtet i MySQL 5.7 och tidigare versioner. Så som ett alternativ skulle användarna använda GROUP BY ASC/desc för att få sorterade data med samlad (även om sorteringen var mycket restriktiv med super Aggregerade rader alltid placerade efter raderna som användes för att beräkna dem vid ASC och vice versa för desc). Vi var tvungna att lyfta denna begränsning innan vi tog bort stödet för explicit sortering för grupp efter.

MySQL tillåter nu beställning med samlad. Jag har förklarat i detalj hur man utnyttjar denna förbättring här. Som förklaras i samma blogg, om användarna vill ha exakt samma Sorteringsordning för nollor som för MySQL 5.7 för samlad, bör de använda funktionen gruppering() för att skriva om frågan på ett enkelt sätt.

så kort sagt har vi gjort följande saker som föregångare för att ta bort explicit sortering för grupp efter.

1. Lägga till gruppering () funktion

2. Borttagning av implicit sortering för grupp med

3. Tillåter beställning med samlad

och slutligen har vi tagit bort explicit sortering för grupp av i MySQL 8.0.13.

vi bad om samhällets åsikt för en tid tillbaka. Vi drog slutsatsen att användare som var medvetna om denna icke-standardiserade förlängning som MySQL tillhandahöll var bra med att det gick bort.

slutsats

Även om vi fortfarande har lite mer arbete att göra innan vi fixar bug 71804, är vi glada att vi fick det gjort. Låt oss veta dina tankar. Tack för att du använder MySQL!