Замок Любарта являє собою у плані рівносторонній трикутник із випнутими сторонами і відстанями між вершинами (вежами) 100 м. Висота стін близько 12 м над валом. Товщина сягає до 3 м., верхня частина має товщину 0,8 м. Загалом на замок використано до 5 млн цеглин. Протягом шести століть існування рівень підлоги замкового двору піднявся приблизно на 3,8 м. Стіни і вежі вимурувані у готичній системі кладки. Розміри цеглин коливаються у залежності від будівельного періоду, в якому вони використовувалися. Загалом це (28-30)х(12.5-15)х(7.5-9.5) см. На стінах містяться бойові галереї з бійницями. Стіни подекуди покриті ґонтовим дахом. Біля В'їзної та Владичої башт на консолях тримаються еркери з машикулями — отворами для обстрілу зони підошви стіни.
В'їзна вежа це п'ятиярусна паралелепіпедна споруда. Висота становить 28 м., розмір в плані 11,9×12,05 м. У південній частині розміщені гвинтові сходи, і сполучались з князівським палацом. Від рогу вежі починається стіна Окольного замку. Унизу вежа підпирається потужними контрфорсами, зведені на початку XIX ст, які дещо звужуються доверху. Між ними арковий вхід у замок. Над входом розташовані два портали із арковим завершенням. Це колишні входи у замок, колись вони закривались підйомним мостом. Другий ярус вежі має напівциліндричні, а третій та четвертий мали хрещаті склепіння. Лише вони порушують загалом симетричну структуру головного фасаду вежі. У середній частині фасаду виступають квадратні зубці, розташовані над проміжним карнизом. Верхній карниз має аркатурний мотив і оперізує вежу по периметру. Під ним знаходяться два отвори. Аттик має потужні зубці-мерлони ренесансної форми. Задній фасад вежі, який виходить у замковий двір, має простішу структуру. Центральний прохід має готичне завершення. Середні яруси вежі, за винятком верхнього, мають по одному вікну, обрамлені білокам'яними ренесансними наличниками.
Стирова вежа, як і В'їзна, має форму прямокутного паралелепіпеда, підпирається зовні контрфорсами. Висота 28 м.,розмір у плані 10×10 м. Також має два зовнішні відгалуження: східне (коротше) є залишком східного оборонного кільця, південне (довше) — залишок Окольного замку. Має два входи з білокам'яними порталами: нижній довгий час був засипаний, тому користувались входом другого ярусу.. Звідси є сполучення з верхніми ярусами по гвинтових сходах, що проходять в стіні. На стінах можна прогледіти орнаментальний тип кладки цегли. П'ятиярусна вежа завершується аттиком із зубцями. Загалом товщина стін зменшується догори: на нижньому ярусі сягає до 3 м, а на верхньому (аттиковий) — 75 см. З третього ярусу є виходи на бойові майданчики стін. У стінах різних поверхів влаштовані бійниці, деякі з вікон мають готичне обрамлення, інші — ренесансне. Перемички внутрішніх дверей аркові.
Архітектура Владичої вежі ще лаконічніша. Висота становить 14 м., розмір в плані 8,75×8,50 м. Товщина стін на нижньому ярусі — до 3 м, на верхньому — близько 1 м. Вежа не має оздоблення. З третього ярусу є виходи на бойові майданчики стін. Склепіння над другим ярусом циліндричне. Перемички бійниць з арковим завершенням. Вежа вкрита ґонтовим шатровим дахом, над яким височіє на ніжці металева фігура «Кликун».
Вежа Чарторийських Окольного замку також являє собою прямокутний паралелепіпед, накритий ґонтовим гостроверхим дахом. Між вежею і південним кутом єзуїтського колегіуму стіна замку має бійниці. Із вежі є вихід на бойову галерею цієї ділянки Окольника. Так само є вихід у протилежну сторону — на стіну замку, яка далі тягнеться на південь. Зараз цей вихід частково замурований і залишений у вигляді вікна. Особливістю збережених частин Окольного замку є фундаментні арки та орнаментна кладка окремих ділянок стін, де використовувалася цегла різних кольорів.
Хоча Окольний замок вже давно припинив своє існування, але згідно з дослідженням, 55 % його такого, яким він був у XVIII ст., існує і тепер. Схема шляху вулиць у колишньому Окольнику та деякі інші елементи замковості збережені. Звісно це стосується стін, веж та пристінних будівель замку. Ті будівлі, двори, які містилися всередині, давно зникли з терену замку за виключенням кількох споруд. У 2009 р. велися роботи із відновлення частини мурів Окольника, які йшли від В'їзної вежі Верхнього замку до будинку XVI ст., який досі зберігся. Отже окрім цієї частини, з Окольного замку XVIII ст. збереглися такі елементи (див.схему: синій колір — збережені ділянки, зелений колір — відновлена ділянка, червоний колір — шлях мурів Окольника):
Протягом історії замку люди не втримувалися, щоб не залишити якийсь напис на зовнішній стіні Верхнього замку. Фактично, усі стіни між вежами укриті написами; зазвичай це імена людей та дати. Найстаріший знайдений напис датується 1444 р. (або 1602, 1616). Він зроблений на тій ділянці стіни, яка на той момент уже була збудована. Написам притаманна розмаїтість шрифтів, способів видряпування, каліграфії, ономастики, датувань. Привертають увагу написи відомих людей. Так, напис «A.N. KORZENIOWSKI R.P. 1799» належить тому Коженьовському, який протягом довгого часу працював над архівами замку, складеними за останні 300 років до його роботи. Під Владичою вежею у стіні міститься цеглинка, на якій колись написала сестра Лесі Українки Ольга: «1891 Ольга КОСАЧ».