Hur man läser publicerade SQE godkända betyg utan att få panik

The SRA publicerar en statistisk rapport om ett SQE-sammanträde. Inom cirka fyra timmar har någon tagit en skärmdump av en enskild figur, klippt bort varje varning och lagt upp den med en bildtext i stil med "ja, vi är alla dömda." Svaren hopar sig. Någon meddelar att de skjuter upp. Någon annan säger att provet är orättvist. Och några hundra perfekt kapabla kandidater tillbringar kvällen med att känna sämre om sina chanser än de gjorde vid frukosten.

I har sett den här cykeln upprepas tillräckligt många gånger för att verkligen bli uttråkad av den. Den frustrerande delen är inte paniken – paniken är mänsklig. Det är att den underliggande informationen faktiskt är användbar, och nästan ingen läser den som data. De läste det som en dom.

Så låt oss göra det här ordentligt. Vad SRA publicerar, vad gör det inte, var siffrorna vilseleder dig tyst och hur man omvandlar en officiell rapport till två eller tre konkreta ändringar av din SQE-revideringsplan.

Vad SRA faktiskt publicerar – och vad den utelämnar

Efter varje SQE1 och SQE2 sammanträde lägger SRA ut statistisk rapportering som täcker bedömningen. Det exakta innehållet och formatet utvecklas, så gå alltid till sqe.sra.org.uk för den aktuella rapporten istället för att lita på en forumsammanfattning eller på hur en rapport såg ut för två år sedan.

I stort sett tenderar det publicerade materialet att täcka storleken på kohorten, övergripande prestanda och uppdelningar efter kandidategenskaper – den typ av jämställdhets-, mångfalds- och inkluderingsanalys som en tillsynsmyndighet är skyldig att utföra. Det finns vanligtvis kommentarer om hur bedömningen var uppbyggd och standarduppsättning. Det finns fotnoter. Det finns alltid fotnoter, och de är alltid den mest intressanta delen av dokumentet.

Här är vad rapporten i allmänhet gör inte säger dig:

• Hur mycket hade varje kandidat faktiskt förberett, eller hur länge.
• Hur många var på ett första försök jämfört med ett andra eller tredje.
• Vem satt det "bara för att se hur det är" med tre veckors skumläsning bakom sig.
• Vilka ämnen enskilda kandidater var svagast i — detaljen på FLK-ämnesnivå publiceras helt enkelt inte i den formen.
• Allt som helst om dig.

Den sista låter glest. Det är det inte. En publicerad genomgångsprocent är en beskrivning av en befolkning du aldrig har träffat. Det är inte en sannolikhet kopplad till ditt namn.

Kvintiler: bitkandidaterna läser mest

SQE1-kandidater får sina resultat tillsammans med information om hur de presterade i förhållande till andra – rapporterade i kvintiler snarare än som en offentlig serietabell. Detta snubblar upp människor i två riktningar. Kandidater som klarar men landar i en lägre kvintil behandlar det ibland som ett svart märke; kandidater som misslyckas i en högre kvintil antar att de var "nästan där" på ett sätt som garanterar godkänt nästa gång.

Ingen läsning håller i sig. Kvintilen är positionsinformation om en sittning, mot en kohort, på en uppsättning frågor. Det är användbart som en grov diagnostik – ett pass på bottenkvintilen säger att dina kunskaper är tunnare än certifikatet antyder, vilket spelar roll om du är på väg in i SQE2 – men det är inte en profetia.

Sex sätt som en rubriks genomslagsfrekvens tyst vilseleder dig

1. Kohortens sammansättning ändras mellan sittningar. Olika sittningar lockar olika mix av kandidater: vissa tungt vägda mot dem som har genomfört ett strukturerat program, andra med en större andel självstuderande eller utomlands kvalificerade kandidater som förbereder sig kring heltidsarbete. Jämför två sittningar och du kanske jämför två olika populationer, inte två olika provsvårigheter.
2. Resitters viks in i summan. En rubrik som blandar förstagångssittare med resitters kommer att läsa annorlunda än en ren första-försöksfigur. Båda är legitima; de svarar på olika frågor. Kontrollera vilken du tittar på innan du drar slutsatser.
3. Små undergrupper producerar bullriga siffror. När ett sammanbrott täcker ett litet antal kandidater, kan en sväng på tre eller fyra personer flytta procentandelen dramatiskt. SRA flaggar vanligtvis för detta. Skärmbildsdelare gör det i allmänhet inte.
4. Korrelation läses som orsakssamband. Om en rapport visar att kandidater med en viss bakgrund presterar olika i genomsnitt, reflekterar det en hel virvel av faktorer – förberedelsetid, ekonomisk press, modersmål, tillgång till strukturerade studier, om någon reviderar klockan 23.00 efter en hel dag på QWE. Den berättar inte vad som kommer att hända med en individ som arbetar annorlunda än genomsnittet.
5. Godkäntbetyget är inte fixerat till ett runda nummer. Mer om detta nedan, men antalet frågor du behöver rätt skiftar mellan mötena eftersom papperen är standardinställda. "Du behöver 60%" är folklore.
6. Pass-grader säger ingenting om marginalen. Ett möte där många kandidater samlas precis under linjen och ett möte där de samlas långt under producerar mycket liknande rubriker med väldigt olika berättelser under.

Hur markeringen ställs in – och varför det borde lugna dig

SQE1 papper är inte märkta mot en fast procentsats som någon plockat ur luften. SRA använder en erkänd standardinställningsmetod där ämnesexperter bedömer hur en "bara kompetent" kandidat skulle prestera på varje fråga, och den erforderliga standarden för den specifika uppsatsen härleds från dessa bedömningar. I praktiken innebär detta att det obearbetade antalet korrekta svar som behövs kan skilja sig åt mellan olika möten, eftersom frågeuppsättningarna skiljer sig i svårighetsgrad.

Två konsekvenser följer, och de betyder mer än någon rubrik.

För det första tävlar du inte mot andra kandidater. Det finns ingen kvot, ingen kurva som misslyckas med en fast andel, inget scenario där en stark kohort driver ut dig. Om alla som sitter FLK1 med dig råkar vara briljanta, höjer det inte ribban du måste rensa. Detta enda faktum oskarpar omkring åttio procent av paranoian i examenshallen.

SFör det andra är ett "hårt papper" delvis självkorrigerande. När kandidater kommer ut från ett sammanträde och insisterar på att frågorna var brutala, har normgivningsprocessen till viss del redan stått för frågesvårigheter. Det gör inte ett otäckt papper trevligt. Det betyder att förhållandet mellan "det kändes hemskt" och "därför misslyckades jag" är mycket svagare än vad ditt nervsystem tror.

A genomgångsfrekvens är ett fotografi av en folkmassa. Du letar efter dig själv i det, och du är inte i det. Du står utanför ramen och håller i kameran, med flera månaders revidering fortfarande tillgänglig för dig.

Bashastighetsfällan: ett bearbetat exempel

Låt oss göra detta konkret, eftersom abstraktion är där panik föder.

Anta att en publicerad rapport visar att ungefär hälften av kandidaterna vid ett givet SQE1 sammanträde klarade. (Historiskt har publicerade SQE1-passfrekvenser tenderat att sväva någonstans i den breda regionen, med verklig variation mellan sammanträdena — gå till sqe.sra.org.uk för den faktiska siffran för sammanträdet du bryr dig om, och citera inte en siffra från minnet.) En kandidat läser det och drar slutsatsen att hon har en femtiofemtio chans. Myntvändning. Skrämmande.

NNu bryt ner publiken. Within any large SQE1 cohort you'll find, roughly speaking:

• Kandidater som förberedde sig systematiskt över alla 13 FLK-ämnen under sex till tolv månader, gjorde tusentals frågor med enstaka bästa svar och satt tidsinställda hån.
• Kandidater som verkligen förberedde sig hårt men fick slut på landningsbanan i två eller tre ämnen — mycket ofta Solicitors Accounts, Trusts eller Business Law and Practice, de som folk lämnar till sist.
• Kandidater som bokade sammanträdet optimistiskt, fick livet att hända dem och gick in i vetskapen om att de inte var redo men föredrar att ta del av upplevelsen.
• Resitters som återvänder med en mycket skarpare känsla för vad provet faktiskt frågar om — av vilka några har åtgärdat problemet, av vilka några har upprepat samma revision som misslyckades första gången.

Rubrikkursen är ett genomsnitt av alla dessa. Ditt jobb är inte att slå genomsnittet. Ditt jobb är att flytta dig själv till den första gruppen. Det är en beteendefråga – timmar, täckning, frågevolym, timingdisciplin – inte en statistisk fråga.

Mini fallstudie: Priyas andra försök

Priya, en utomlands kvalificerad advokat som arbetar heltid, misslyckades FLK2 på sitt första försök och landade i en medelkvintil. Hennes instinkt var att läsa den publicerade rapporten, dra slutsatsen att provet var stack mot internationella kandidater och börja skriva ett argt inlägg.

Istället gjorde hon något tråkigare och mycket mer effektivt. Hon rekonstruerade, fråga för fråga, vad som hade gått fel. Två saker kom fram. Hon hade i snitt haft cirka 78 sekunder per fråga i praktiken men brände nästan två minuter på Property Practice faktamönster i verkligheten – eftersom hon läste om scenariot istället för att lita på sitt första pass. Och noggrannheten i hennes Solicitors Accounts i praktiken hade aldrig varit över cirka 55 %, vilket hon tyst hade ignorerat i tre månader med motiveringen att det "bara var en liten del av tidningen".

Hennes andra försök innebar ingen ny lärobok. Hon gjorde ungefär 1 400 ytterligare övningsfrågor som vägde tungt mot Solicitors Accounts and Trusts, satt fyra fulltidsanställda hån i rätt takt och drillade en enkel regel: läs den sista frågeraden först, sedan fakta en gång. Hon passerade bekvämt. Den publicerade godkända frekvensen för hennes sittande var, för hennes del, irrelevant - det hade inte förändrat en enda sak hon gjorde.

Poängen är inte att Priya var ovanligt disciplinerad. Det är att rapporten inte berättade för henne att hon inte kunde göra något, och hennes egen fellogg berättade allt för henne.

Förvandla en godkänd rapport till tre revideringsbeslut

Om du ska läsa rapporten — och du borde, en gång, ordentligt — läs den med en penna och dessa frågor i åtanke.

1. Är min beredningsvolym i rätt storleksordning?

Rapporterna ger dig inte ett antal timmar. Men de kommer att berätta om bedömningens skala: FLK1 och FLK2, 180 frågor med enstaka svar vardera, satt i två sessioner på 2 timmar 33 minuter på samma dag för varje uppsats. Det är mycket exponering, och 13 fungerande juridiska kunskapsämnen under det. Om din plan innefattar att läsa anteckningar och göra några hundra frågor i slutet, fungerar inte aritmetiken. Hög frågevolym under tidspress är den mekanism som faktiskt bygger SQE1-kompetens - vilket är anledningen till att en seriös frågebank är viktigare än en vacker uppsättning anteckningar. Ant Law SQE Frågebanken finns för just detta: 14 000+ MCQs taggade av FLK-ämne och underämne, med en övningsmotor som fortsätter att trycka tillbaka dina svaga områden mot dig istället för att låta dig komfortrevidera kontraktet för femte gången.

2. Var är jag egentligen svag, i motsats till där jag känner mig svag?

Kandidater är fruktansvärda på självbedömning. Människor som känner sig skakiga när det gäller jordlag har ofta bra; personer som mår bra i juridiska tjänsters etiska scenarier gör det inte rutinmässigt, eftersom frågorna handlar om fina distinktioner mellan vad du får gör, måste gör och inte får göra. Noggrannhetsanalyser på ämnesnivå slår magkänslan varje gång. Titta på dina siffror, sortera stigande, arbeta från botten.

3. Övar jag i examenstakt, eller i lästakt?

Det vanligaste felläget jag ser är inte okunskap. Det är kandidater som vet tillräckligt men som aldrig har repeterat klockan. Tidsinställda mocks som speglar det verkliga formatet och tidsförhållandet är inte valfri garnering. Det är det som hindrar dig från att förlora sex eller åtta minuter på de första tjugo frågorna eftersom du överläser faktamönstren.

Hålla godkända andelar i proportion inom hela kvalifikationen

On mer perspektiv. Att klara SQE1 och SQE2 är en stor del av advokatexamen i England och Wales, men det är inte hela vägen. Att bli advokat i Storbritannien kräver också en kvalificerande examen eller motsvarande, två års kvalificerande arbetslivserfarenhet (QWE) och att uppfylla SRA:s karaktär och lämplighetskrav. Kandidater som fixerar sig till en enda publicerad procentsats underinvesterar ofta på QWE-sidan – reder ut bekräftelser, spårar vad de faktiskt har gjort, förstår vad som räknas – och kommer sedan på sig själva att klättra senare. Ramverket och den procedurmässiga detaljen för QWE och karaktär och lämplighet finns på sra.org.uk; läs dem tidigt snarare än i slutet.

SQE2 är för övrigt ett annat djur såväl statistiskt som innehållsmässigt. Den bedömer fem praktiska färdigheter - klientintervju med närvaroanteckning och juridisk analys, opinionsbildning, ärendeanalys, juridisk forskning och juridisk skrivning och utformning - över muntliga och skriftliga uppgifter. Publicerade SQE2-resultat har generellt sett mer uppmuntrande ut än SQE1, vilket är intuitivt vettigt: kohorten har redan rensat ett betydande filter, och de flesta har kommit längre i praktiken. Transplantera inte din SQE1-ångest i grossistledet på den.

A kort checklista för nästa gång en rapport sjunker

1. Läs själva SRA-rapporten på sqe.sra.org.uk, inte skärmdumpen.
2. Identifiera om siffran täcker alla kandidater eller endast första försök.
3. Läs fotnoterna om undergruppsstorlekar innan du drar några slutsatser om "människor som jag".
4. Påminn dig själv om att standarden är kriteriebaserad – du tävlar inte mot kohorten.
5. Ställ en fråga: ändrar detta något jag borde göra den här veckan? Om nej, stäng fliken.
6. Gå och gör femtio frågor.

Det sista steget är bara ett halvt skämt. Det pålitliga motgiftet mot statistisk rädsla är data om dig själv. En publicerad genomgångsprocent beskriver främlingar; din egen noggrannhetstrend, din felsvarsbok och dina tidsinställda skenpoäng beskriver dig, och bara den andra uppsättningen svarar på ansträngning.

Så här är det praktiska nästa steget. Välj dina två svagaste FLK-ämnen - de du har undvikit, du vet vilka de är - och gör en tidsinställd uppsättning med trettio frågor i varje denna vecka, och läs sedan varje förklaring, inklusive de du fick rätt av tur. Om du vill någonstans att göra det ordentligt, med FLK1 och FLK2 frågor taggade efter underämne, fullängds låtsas som speglar den verkliga timingen och en AI-handledare som du kan fråga när en svarsförklaring inte landar, prova Ant Law SQE frågebanken på antlaw.ai. Frågor om hur du strukturerar din revision? Skriv till oss på [email protected] — vi läser dem alla.