Тот замок, который мы видим сейчас (пусть и обветшавший), - настоящий архитектурный шедевр. Его построил в 1890–1892 годах знаменитый Вильгельм Нейман - главный архитектор Даугавпилса/Динабурга. Вокруг разбили парк, вырыли пруды, в которых даже выращивали форель.
В 1927 году в старинную усадьбу въехали новые обитатели - первые воспитанники приюта. Изначально приют планировали разместить на ул. Шоссейной (сейчас - ул. 18. Новембра), но здание отдали суду, а детям - замок. За первое десятилетие работы (до 1938 года) приют стал домом для 951 ребенка. Учреждение жило своим трудом: 18 гектаров земли, свой сад (яблоки продавали с аукциона!) и хозяйство.
Во время Второй мировой войны замок стал частью военной истории - здесь размещался госпиталь, но и приют продолжал существовать (в 1941 году там укрывали 158 детей).
За век учреждение сменило много названий: Гривский дом младенца, Психоневрологический детский дом, Калкунский дом ребенка, Центр опеки. Руководили им сильные личности: от Аполонии Лауриновичи и Вероники Бергфелде в довоенное время до Зинаиды Литвяк (более 25 лет на посту директора).
Сегодня филиал Kalkūni (VSAC Latgale) продолжает работать в новых корпусах. А вот главное историческое здание замка - жемчужина Вильгельма Неймана - закрыто. Оно принадлежит государству (конкретно Министерству благосостояния Латвийской Республики) и тихо ждет огромных средств на реставрацию, храня молчание о своей богатой истории.