В бандитских убежищах отдыхают те бандитские отряды, которые бегают по карте. Поэтому в разное время там может быть разное количество отрядов разной численности. При этом в убежище всегда есть главарь с несколькими приспешниками, который появляется в конце. Его разгром означает победу.
Логика борьбы с бандитскими убежищами: истреблять бандитские отряды как на карте, так и в самом убежище. Сразу всех в убежище можно не громить, а отступать при необходимости (Табуляция => средняя кнопка мыши, дающая курсор => нажать курсором плашку «Отступить»). Хотя можно и не отступать — товарищи при поражении всё равно вытащат, только лечиться придётся дольше — зато за время лечения можно будет поработать в кузне. И так постепенно нагнуть и победить бандитов.
Польза от уничтожения бандитских убежищ: улучшаются отношения с окрестными персонажами, что вдобавок развивает Обаяние (Charm) (потому что часть из окрестных персонажей — лорды), а также освобождается место для новых убежищ — а их обнаружение развивает уже Разведку.