雅典奥运会对鲍威尔来说是一次痛苦的回忆。用鲍威尔自己的话说：那次比赛是职业生涯中令我最失望的一场--尽管对于当时年仅21岁的他来说职业生涯才刚刚开始。在去年的奥运会上，鲍威尔在从他那失败的起跑开始就一直落后于他的对手们，最后他仅获的第五名，这对冲着奥运会冠军而来的他来说简直是无法接受的。

　　阿萨法-鲍威尔是在他哥哥多诺万的影响下开始练习短跑的，多诺万-鲍威尔也是牙买加的一位出色的短跑选手，不过他的最好成绩仅是1999年的世锦赛上跑进了100米比赛的半决赛。阿萨法和他哥哥一起前往美国的德克萨斯训练，不过短短的几次训练之后阿萨法并没有表现出他在短跑项目上的天赋，连他的哥哥此时都认为他不适合成为一名短跑选手，多诺万一度对他的弟弟说：“阿萨法，我想你该考虑一下去做些别的什么事情。”

　　真正让阿萨法下定决心从事短跑项目的是他的教练斯蒂芬-弗郎西斯，弗郎西斯教练给他看了著名短跑选手博尔顿的比赛录像，博尔顿曾在1997年的世锦赛上夺得200米跑的冠军并在奥运会上赢得过四枚奖牌。他鼓励阿萨法-鲍威尔继续跑下去。