Budynek plebani w Grybowie powstał w 1699 r. przy kościele drewnianym św. Bernardyna (kościół datowany na 1455 r. spłonął w czasie działań wojennych w styczniu 1945 r.). W 1. poł. XIX w. obiekt przekształcono w stylu klasycystycznym. Obecnie mieści się w nim dekanalne muzeum sztuki sakralnej. Plebania jest obiektem parterowym, na rzucie prostokąta, przed wejściem znajduje się ganek oparty na kolumnach. W muzeum eksponowane są obrazy gotyckie z kościoła św. Bernardyna, ikony cerkiewne oraz zabytki sztuki ludowej. Szczególnie cenne są: gotycki obraz Św. Zofii z córkami z 1460r. oraz późnogotycki obraz Świętej Rodziny z 1500r.