Zwany popularnie „zamkiem”. Pierwotny budynek mający charakter obronny powstał w tym miejscu w I połowie XVII wieku. Wielokrotnie przebudowywany i rozbudowywany, obecny klasycystyczny wygląd uzyskał w I połowie XIX wieku. Klasycystyczny, w kształcie podkowy, murowany, parterowy. Składa się ze skrzydła głównego i dostawionych do niego pod kątem prostym dwóch skrzydeł bocznych. Pośrodku skrzydła głównego od strony zajazdu czterokolumnowy portyk. Otoczony był parkiem w stylu angielskim. Obecnie w zachodnim skrzydle pałacu mieści się siedziba Towarzystwa Miłośników Andrychowa.