Pašreizējais Elejas muižas ansamblis veidots 19. gs. sākumā, klasicisma stilā pēc grāfa Kristofa Johana Frīdriha (Žanno) Mēdema pasūtījuma. Savulaik tas atzīts par Kurzemes klasicisma pērli un izcilu būvniecības paraugu Eiropā. Pirmā pasaules kara laikā 1915. gadā ēkas tika nodedzinātas. Līdz mūsdienām saglabājusies muižas pārvaldnieka māja un teātra māja jeb klēts, tējas namiņš un senā baronu kapsēta, bet no kādreizējās majestātiskās pils palikušas vien drupas. Kopš 1967. gada Elejas muižas ansamblis ir valsts nozīmes arhitektūras piemineklis.