Po celou zimu 1923-24 Abrahams vytrvale trénoval pod dohledem skvělého trenéra Sama Mussabiniho – jejich vztah byl jedním z mnoha fascinujících témat oceňovaného filmu Ohnivé vozy. Odměna za tvrdou zimu přišla na začátku roku 1924, kdy Abrahams zaběhl s pomocí větru 100 yardů za 9,6 sekundy a opět vylepšil anglický rekord ve skoku do dálky na 24,2½ (7,38). Po dvoutýdenní pauze zvítězil na mistrovství AAA v běhu na 100 yardů a ve skoku dalekém a poté odjel do Paříže na olympijské hry. Po málem katastrofě na startu semifinále běhu na 100 metrů zaběhl ve finále skvěle a porazil Američana Jacksona Scholze o dva metry. Jeho čas byl oficiálně udáván jako 10,6 sekundy, ačkoli elektrická časomíra ukazovala maximálně 10,52 sekundy. V Paříži se Abrahams dostal také do finále běhu na 200 metrů a byl členem štafety, která při každém výběhu běžela postupně rychleji, než získala stříbrné medaile s časem 41,2 sekundy, který měl zůstat britským rekordem po 28 let. Na pařížské olympiádě se nekonaly žádné předávací ceremoniály a měsíc po hrách obdržel Abraham své medaile poštou; protože však francouzské úřady nedaly na zásilku dostatek známek, musel si přebytečné pozitivum zaplatit sám.
Abrahams rozhodně nenaplnil svůj potenciál, zejména jako skokan do dálky, když těžké zranění nohy ukončilo v květnu 1925 jeho aktivní kariéru, ale dále prokázal sportu nepřekonatelné služby jako administrátor, novinář, hlasatel, historik a statistik. V letech 1925-1967 byl atletickým dopisovatelem Sunday Times, zakládajícím členem Asociace statistiků atletických disciplín (Association of Track & Field Statisticians) a dlouhá léta komentátorem rozhlasové stanice BBC. V roce 1926 se stal členem generálního výboru AAA, v roce 1931 byl jmenován tajemníkem a v roce 1976 prezidentem. Byl prvním tajemníkem Mezinárodní rady, která byla předchůdcem Britské amatérské atletické rady, a v roce 1963 byl jmenován předsedou BAAB poté, co 21 let zastával funkci pokladníka. Abrahams nebyl v rámci sportu všeobecně oblíbený a jeho někdy hrubé chování se v pozdějších letech stalo poněkud výraznějším, ale mnoho lidí může dosvědčit jemnější a velkorysejší stránku jeho povahy. Někde v těchto rozdílných aspektech jeho osobnosti se pravděpodobně skrývá odpověď na otázku, proč se mu nikdy nedostalo žádného oficiálního uznání za obrovské množství dobrovolné práce, kterou vykonal ve prospěch sportu. V roce 1957 mu však bylo uděleno vyznamenání CBE jako tajemníkovi Komise pro národní parky, do níž nastoupil po třinácti letech advokátní praxe.