Abrahams 1923-24 telén szorgalmasan edzett a zseniális edző, Sam Mussabini szemei alatt – kapcsolatuk egyike volt A tűz szekerei című díjnyertes film számos lenyűgöző témájának. A kemény munkával töltött tél jutalma 1924 elején jött el, amikor Abrahams szélsebesen 9,6 másodpercet futott 100 yardon, és ismét megjavította az angol távolugrás rekordját 24-2½-re (7,38). Két hét szünet után megnyerte a 100 yardot és a távolugrást az AAA-bajnokságon, majd Párizsba utazott az olimpiai játékokra. Miután a 100 méter elődöntőjének elején majdnem katasztrófát szenvedett, a döntőben nagyszerűen futott, és két méterrel legyőzte az amerikai Jackson Scholzot. Idejét hivatalosan 10,6 másodpercnek adták meg, bár az elektromos időmérő legfeljebb 10,52 másodpercet mutatott. Párizsban Abrahams a 200 méteres síkfutás döntőjébe is bejutott, és tagja volt annak a váltócsapatnak, amely minden egyes alkalommal egyre gyorsabban futott, mielőtt 41,2 másodperces idővel ezüstérmet szerzett, ami 28 évig brit rekord maradt. A párizsi olimpián nem volt díjátadó ünnepség, és egy hónappal a játékok után Abraham postán kapta meg az érmeit; de mivel a francia hatóságok nem tettek elegendő bélyeget a csomagra, a többletpozitívumot magának kellett kifizetnie.
Abrahams minden bizonnyal nem teljesítette ki a benne rejlő lehetőségeket, különösen távolugróként, amikor 1925 májusában egy súlyos lábsérülés véget vetett aktív pályafutásának, de a későbbiekben felülmúlhatatlan szolgálatot tett a sportnak mint adminisztrátor, újságíró, műsorvezető, történész és statisztikus. A Sunday Times atlétikai tudósítója volt 1925-től 1967-ig, alapító tagja volt az Atlétikai Statisztikusok Szövetségének (Association of Track & Field Statisticians), és sok éven át a BBC rádió kommentátora. Az AAA Általános Bizottságának 1926-ban lett tagja, 1931-ben titkárrá, 1976-ban pedig elnökké nevezték ki. Ő volt az első titkára a Nemzetközi Testületnek, amely a Brit Amatőr Atlétikai Testület elődje volt. 1963-ban a BAAB elnökévé nevezték ki, miután 21 évig a BAAB kincstárnoka volt. Abrahams nem volt általános népszerűségnek örvendett a sportágon belül, és néha nyers modora későbbi éveiben még hangsúlyosabbá vált, de sokan tanúskodnak a szelídebb és nagylelkűbb oldaláról. Valahol személyiségének különböző aspektusai között valószínűleg ott rejlik a válasz arra a kérdésre, hogy miért nem kapott soha semmilyen hivatalos elismerést azért a hatalmas mennyiségű önkéntes munkáért, amelyet a sport érdekében végzett. 1957-ben azonban a Nemzeti Parkok Bizottságának titkáraként megkapta a CBE kitüntetést, amelybe 13 év ügyvédi tevékenység után lépett be.