S výstavbou tzv. shromažďovacího sálu, ve skutečnosti s kulturním domem v Ústí nad Orlicí, se začalo počátkem osmdesátých let. Poslední částí, která měla být postavena, byla přístavba klubové části, která měla představovat zázemí kulturního domu směrem k Hernychově vile. Základy sice byly připraveny, k její realizaci však nikdy nedošlo. V dnešní době jsou základy skryty pod parkovištěm a chodníkem, který spojuje právě Hernychovu vilu s kulturním domem.

V Kulturním domě v Ústí nad Orlicí se pravidelně pořádají koncerty, představení či různá vystoupení. Kulturní dům disponuje kapacitou sálu 900 míst ke stání, divadelní úpravou 500 míst a stolovou úpravou 370 míst.