Az 1945-ben amerikai atomtámadás sújtotta Hirosima vezetése vasárnap közölte, hogy visszalép – részben a városlakók elégedetlensége, részben a kellő anyagiak hiánya miatt. Hasonlóképpen határozott a második világháborúban nukleáris csapásnak kitett Nagaszaki is, amely Hirosimával közösen pályázott.
A visszakozást az is magyarázhatja, hogy a Japánon belüli vetélkedésbe beszállt Tokió, amelynek nagyobb esélye van, hogy az ország olimpiai bizottsága mögé sorakozzon fel, amikor választani kell majd a jelentkezők közül.