Madley Norvégiában alacsonyabb osztályú mérkőzéseken bíráskodott, s 2019 telén maga lebbentette fel a fátylat Angliából történt távozásának okáról. Kiderült, hogy a korábbi profi játékvezető, ma már újságoknál szakértő Mark Halsey „Duci Bobbynak” nevezte őt egy cikkében, ami érthetően rosszul érintette Madleyt.
A játékvezető a 2019. december 31-én megjelent blogbejegyzésében árulta el a történtek hátterét részletesen:
„Ültem az autómban és elment mellettem egy járási problémákkal küzdő mozgássérült. Csináltam róla egy hat másodperces filmet Snapchattel, és nem szólaltam meg a felvétel alatt, majd lementettem a telefonomra. Később egy mondatot írtam hozzá a telefonomban: »Basszus, idén megnyerhettem volna a szülők versenyét.« Igen, elismerem, a környezetéből kiragadva ez a mondat valóban tényleg szörnyen gusztustalanul hangzik. Ugyanakkor magamnak szántam, magamat akartam ezzel kifigurázni. A filmet nem hoztam nyilvánosságra, csupán egy embernek küldtem el, akiben mélységesen megbíztam és tíz éven keresztül része volt az életemnek” – írta Bobby Madley, aki kitért arra is, hogy egy nappal a film készülte előtt a kislánya sportnapján vett részt, ahol a többi szülővel arról beszélgetett, hogy nem indul a szülők versenyén, nehogy kikapjon.
Az az egy ismerőse, akinek Madley elküldte a filmet és a hozzáfűzött kommentárt, nem vette a lapot, és továbbküldte a játékvezetők főnökének, s innen már csak egy lépés volt a Norvégiába költözés.
Madley 2018. április 23-án, mindössze 32 és fél évesen vezette a mai napig utolsó Premier League-meccsét, s Norvégiából végül 2020 tavaszán tért vissza Angliába, ahol harmad- és negyedosztályú bajnokik dirigálásával próbált új életet lehelni megfeneklett karrierjébe. A jelek szerint pedig sikerrel, hiszen a jelenlegi bajnoki idényben már előléptették a másodosztályba (Championship), sőt 10 mérkőzés után szombaton a Brentford–Wolverhampton találkozón visszatérhet a Premier League-be.
Ráadásul rögtön történelmet is írhat, hiszen ugyanezen a napon bátyja, Andy Madley a Brighton–Chelsea találkozón fújja majd a sípot, így ők lesznek az első testvérpár a Premier League történelme során, akik egyazon játéknapon mérkőzést vezethetnek.