尽管有人说亚玛力人的祖先不是以扫的孙子亚玛力，认为他们的渊源要早得多，却又未能提出确凿的证据。这个说法其实是根据巴兰的一句话：“亚玛力人是列国的先锋，他最终的结局却是灭亡。”（民24:20）问题是，巴兰在这里不是一般性地谈到各国各族的历史，也不是谈在此之前七八百年各民族的起源。当时，巴兰是受雇去诅咒快要进应许之地的以色列人，谈的纯粹是这个民族的历史。巴兰列举以色列人的仇敌如摩押、以东和西珥后指出，在以色列人离开埃及往巴勒斯坦途中，列国中带头攻击他们的“先锋”是亚玛力人，而亚玛力人最终的结局就是“灭亡”。

以色列人离开埃及，到达西奈山附近的利非订时，亚玛力人无故袭击他们，是列国中带头攻击他们的“先锋”。因此耶和华作出判决，下令把亚玛力人灭尽。（民24:20；出17:8-16；申25:17-19）一年后，以色列人罔顾耶和华的指示，企图硬闯应许之地，结果被亚玛力人击退。（民14:41-45）在士师的日子，跟以色列人作对的亚玛力人两度进犯，其中一次是在摩押王伊矶伦在位的时候。（士3:12,13）此后，亚玛力人跟米甸人和东方的人联手攻击以色列人达七年之久，最终被基甸和他的三百个勇士击溃。（士6:1-3,33；7:12；10:12）