Durante la peste del 1577 il campo del Pezone, ubicato fuori dal borgo oltre il naviglio, fu adibito a cimitero di emergenza consacrato da San Carlo; Federico Borromeo lo fece cintare da muri e fece erigere un sacello. Dopo la peste del 1629, per adempiere a un voto, fu costruita una chiesetta (1636) successivamente ampliata (1752), sede della Confraternita dei vivi e dei morti. Nel 1768 si pensò di ubicare i nuovi sepolcri degli inzaghesi nel recinto del Lazzaretto, ma l’acqua del naviglio penetrava e rese impraticabile tale disegno. Soppresse le confraternite, l’oratorio fu alienato (1787) al conte Luigi Barbò che lo trasformò in villa. Nell’800 l’edificio fu del prof. Pietro Magistretti e successivamente della famiglia Prestini. Nel ‘900 continuarono i passaggi di proprietà sino al frazionamento dell’immobile, ora un condominio al cui ingresso vigila una Sophora Japonica pendula centenaria