Заснування замку датується серединою XVII ст, проте ймовірніше те, що на цей час припадає його відбудова на місці колишнього укріплення. У 1660 р. будівництво замку завершено, хоча відомо, що у 1657 р. він витримав облогу козацького війська. За планувальною конфігурацією Раковецький замок був нерегулярним з трьома баштами: квадратною в плані надбрамною зі звідним мостом над ровом - з півночі; трикутною - із заходу над урвищем; шестигранною - зі сходу.
На замковому подвір'ї розташовувалися каплиця, криниця, господарські споруди та будинок із житловими приміщеннями, що доєднувався до західного муру. У 1667 р. укріплення витримало облогу татар, але в 1676 р. замком заволоділи турки й значно пошкодили його. Пізніше руїни знову відбудували і надалі він відіграв помітну роль у боротьбі проти турецьких військ. У 60-х роках XVIII ст. замок спалили і невдовзі він зовсім занепав.
Не зважаючина те, що це був могутній оборонний комплекс, місцеві жителі за останне століття багато чого "порозтягували" із замку на паркани, підвали та інши споруди. Недоступним для руйнівників, як правило, залишається лише донжон — вежа посеред замку, яка колись виконувала роль останнього бастіону: згори до неї не дістатися, а знизу цеглу не витягти, бо на голову впаде вся споруда. Тому Раковецький замок зберігся не повністю. Лишилася шестикутна в плані башта і рештки північно-західного муру. Вціліла семиярусна башта із входом у вигляді арки з боку дитинця, що була подібна до башт-стовпів або донжонів, дає підстави стверджувати більш ранню дату заснування замку. На кожному ярусі башти розміщено квадратні та щілиноподібні бійниці. Судячи із залишків оборонних стін мурів, вони були завтовшки 1,7 м. та заввишки 9 м. Мури мали бойові яруси з бійницями.