Das Schloss, urkundlich im 12. Jh. erwähnt, war eine Ministerialienburg und ist heute als malerischer mittelalterlicher Bau erhalten. Er ist eine enggeschlossene Anlage mit efeuüberwachsener zinnenbekrönter Ringmauer, herrschaftlichem Wohnbau, sowie Gesinde- und Wirtschaftsgebäuden. Bemerkenswert sind der Mittelsaal aus dem 16. Jh. mit Balkendecke und Freskenschmuck, sowie die gotische Stube mit einem berühmten Getäfel und eine Kapelle mit Flügelaltärchen.
Schloss Auer wird von der Besitzerfamilie bewohnt und kann nicht besichtigt werden, doch schon die Außenansicht belohnt den Spaziergänger. Auch können Ferienwohnungen im Schloss angemietet werden.