Просто в Средиземье с магией вообще очень печально.
В основном, она была доступна (смертным) при помощи разных артефактов (вроде Колец, зачарованных мечей, Сильмариллов и т.д.), а "Гендальфу и компании"(Истари) запретили пользоваться особо убойной магией в прямых столкновениях.