На початку ХVІІІ століття господарем села Варковичі був пан Лядуховський. Він дуже боявся доведених до відчаю кріпаків, тому у 1725 році шляхтич споруджує в селі кам’яний замок. Будинок був двоповерховий, в ньому нараховувалося більше 50 кімнат. Цього ж 1725 року король видав Варковичам, де було уже 98 дворів і проживало 870 жителів, привілей на право називатися містечком. У 1729 році Лядуховський зводить у містечку костел бернардинів. Усередині ХІХ ст. у Варковичах відкрито церковно-приходську школу. Працювала у містечку також музична школа, однокласне училище.
У 1866 році Варковичі стали волосним центром. Волосна управа знаходилася на місці, де зараз дільнича лікарня. До Варковицької волості належали села Варковичі, Крилів, Заруддя, Листвин, Княгинин, Озеряни, Ульбарів, Копани.