Это самое старое административное здание не только в городе, но и во всей Тульской области. «Здание палат» имеет статус объекта культурного наследия федерального значения конца XVII — начала XVIII веков.

Существующее здание палат двухэтажное, с мезонином, толщина стен около 90 см., имеет сводчатые перекрытия, коридорную систему и попарное расположение комнат, со следами анфилады, междуэтажную внутристенную винтовую лестницу. Здание палат имеет несколько периодов строительства, о чем свидетельствует разная толщина стен, разная конфигурация и размеры проемов, высота помещений. По версии исследователей, первоначальное здание имело 1 этаж, второй этаж был, возможно, неполным, в виде деревянного мезонина. О наличии верхнего этажа или мезонина свидетельствует каменная винтовая узкая лестница, начинающаяся в стене первого этажа, поднимающаяся вдоль свода на уровень второго этажа. Она могла быть построена только одновременно со строительством дома.

Архитектура фасадов первого этажа выполнена в стилистике русского (московского) барокко конца XVII в., со следами поздних переделок. Архитектура фасадов второго этажа отличается от первого – она выполнена в стилистике раннего петровского барокко (с элементами классицизма) начала XVIII в., с сохранением планировочной соосности проёмов и членений первоначального первого этажа здания.

31 августа 1834 году Венёв пережил ужасный пожар, уничтоживший почти весь город. Пожарным удалось отстоять всего несколько зданий, в числе которых были Каменные палаты.В начале XIX веке сюда переехал городовой магистрат и дума. Магистрат — судебный орган власти ведущий гражданские и уголовные дела горожан. Существовал с 1700 по 1866 год.

При императоре Александре II городское самоуправление получило более широкие полномочия, была создана Городская Управа, которая занимала две комнаты второго этажа. Каждый этаж имел отдельный вход. В 1899 году весь первый этаж использовался в качестве помещения для ратников. В советское время с 1919 по 1972 годы в здании Каменных палат находилась центральная библиотека. В послевоенные годы ей пришлось потесниться, в здании было одновременно размещено до 8 различных организаций. С 1972 года по настоящее время здесь работает Веневский краеведческий музей, который открылся для посетителей в 1981 году. Каменные палаты в марте 2002 года режиссер Петр Тодоровский снимал в своем фильме «В созвездии быка».

Сайт «Веневский уезд» (www.veneva.ru).