Насколько я понимаю, хотя ситуация была конечно разной, обычно именно барон (или более серьезный аристократ) имел замок и дружину, т.е. контролировал ситуацию на местах.
Мелкие рыцари, (шателены) могли иметь свои свои владения, но чисто экономически не могли построить...