Les poneys Exmoor sont le plus souvent baies (brown), avec crinière et queue plus foncées. Ils peuvent aussi être isabelle (dun), bai (bay), noir (black) ou alezan (chestnut), certains avec marques blanches.
Cependant, la Exmoor Pony Society ne reconnaît officiellement que brown, dun et bay comme robes autorisées pour la reproduction.