능력주의 체계는 편향될 수밖에 없는 한계를 가진 인간에 의해 만들어진다. 능력주의를 맹신하는 사람들은 이 사실을 간과한다.
사람은 누구나 개인적 경험, 사회·경제적 배경 등에 따라 어떤 방향으로든 편향된 관점을 가지기 마련이다. 어떤 능력을 중요하게 볼 것인지, 그 능력을 어떤 방법으로 측정할 것인지와 같은 판단은 이미 편향이 작용된 결정이다. 이렇게 선택된 방식으로 능력을 측정할 때 출제자의 편향이 응시자 중 누군가에게는 유리하고 누군가에게는 불리하게 작용한다.