Przejeżdżając przez Vizovice nie sposób nie zauważyć znajdującego się w samym centrum zamku.
Pierwotnie w miejscu zamku istniał klasztor cystersów Smilheim, wybudowany w XIII wieku. Wielokrotnie łupiony popadł w ruinę. Na jego gruzach w XVI wieku powstała renesansowa posiadłość lokalnego możnego. Po jej zniszczeniu przez Turków, na jej miejscu w XVIII wieku wybudowano obecną rezydencję w barokowym stylu. Po II wojnie światowej posiadłość została znajcjonalizowana i przekształcona w muzeum. Obecnie zamek jest zaliczony jako narodowe dobro kultury i udostępniony do zwiedzania, wraz z rozległym parkiem w stylu angielskim.