V Milovanech se nacházela fara s barokním kostelem sv. Kateřiny z roku 1730, vystavěným uprostřed hřbitova na místo původního dřevěného kostela. Farnost byla zrušena v roce 1946 a brzy na to byl zbořen i zdejší kostel.
Zdejší dědičná rychta patřila k největším v okolí, patřilo k ní hospodářství o výměře 81 hektarů. Zdejší rychtář podle záznamů z Moravské vlastivědy nekonal roboty a povinný dovoz jednoho sudu vrchnostenského vína vykupoval ročně dvěma zlatými a 55 krejcary.
Dobové prameny uvádějí v obci bohatý společenský a kulturní život, kde vedle tradičního hasičského a tělocvičného spolku existoval také ochotnický divadelní spolek a v širokém okolí vyhlášená milovanská kapela Johanna Stixe.