В меню города внизу справа (под надписью Призыв) нарисованы стрелки вверх, одна из них это расход жителей на молотки, т.е. использование рабства.

Если он неактивна, значит или рабство не принято или жителей нехватает, чтобы закончить постройку