Pierwsza kaplica istniała już w XV w., kiedy to Jan Ligęza przekazał dominikanom sołectwo prądnickie. Obecna kaplica, po pożarze starszej, drewnianej stanęła w tym miejscu w 1642 r. Przybrała wtedy barokowy kształt, na planie kwadratu z kopułą. We wnętrzu znajdują się malowidła przedstawiające św. Jana Chrzciciela, którego wezwanie kaplica otrzymała po nadaniu odpustu, przybywającym do niej 24 czerwca, przez papieża Benedykta XV. Obok w XVIII w. utworzono niewielki cmentarz dla zakonników.