由于努曼诺尔人的长期欺压，哈拉德人对其充满了敌意，恰好这个时候新的大魔王索伦在中土世界重新崛起，他开始挑战人类的权威努曼诺尔人，这个时候的哈拉德人好像全部投靠到了索伦的阵营中，他们在索伦的统治下逐渐强大起来，索伦教授他们怎样修建石墙，哈拉德人城池的兴旺也是从这个时候开始的。而且索伦还为他们提供铁质的武器作战，对于哈拉德人来说，索伦既是统治者也是神明，同时他们也非常畏惧索伦，因为他经常使用黑魔法。
这里不得不提到两个蓝袍巫师，这个时期维拉们专门派了两位蓝袍巫师来到遥远的中土世界东方地区，帮助那里的人摆脱索伦的统治，来到中土东方的蓝袍巫师确实为击败索伦作出了巨大贡献。其实他们也来到中土世界的南部，那里是哈拉德人的生活区，团结他们抵抗索伦的统治。那么这个时候的中土大陆的人类实际上分为了三股力量，一支是努曼诺尔帝国的殖民势力，另一部分是支持索伦的人类势力，还有一支是率领人们抵抗索伦的蓝袍巫师势力。但是就前两个势力而言，蓝袍巫师的势力明显要稍微弱一点，而且努曼诺尔人也不是他们的盟友。所以蓝袍巫师的抵抗势力夹在两大势力之间，在夹缝中求生存。这里不得不佩服蓝袍巫师们，在这样艰难的环境中不仅生存了下来，还限制了东方的力量，并且相对减轻了西方在魔戒大战中承受来自东方的压力，确保了西方的全面胜利。
我们将视角重新转向索伦，在经历了第一次努曼诺尔大战失败后的索伦重新崛起，开始命令哈拉德人猛烈进攻努曼诺尔人殖民地，这大大触怒了努曼诺尔皇帝阿尔法拉宗，终于在第二纪元3261年，阿尔法拉宗率领强大的努曼诺尔舰队浩浩荡荡在乌木巴尔登陆，哈拉德人看到了努曼诺尔强大的舰队后吓得四散逃跑，就连索伦本人也卑躬屈膝，他被俘虏后带到了努曼诺尔岛上。索伦很快由阶下囚变成了皇帝的近臣。因为索伦的蛊惑，阿尔法拉宗变得更加残暴，在他统治时期，哈拉德人被努曼诺尔人肆意欺压和残害。而且索伦在努曼诺尔时期有过之尔无不及。
,
