Situado no Largo de S. João, o Palácio de S. João Novo apresenta-se como uma casa apalaçada, em estilo barroco do segundo quartel do século XVIII. Em meados de 1945 o palácio, nessa altura pertençente à Junta da Província do Douro Litoral, foi transformado em Museu de Etnografia e História. Este museu, considerado o mais rico deste género em Portugal, possui um acervo de mais de 4000 peças. Mas no início dos anos 80 começou a dar mostras da sua degradação, situação que se veio agravar no incêndio de 1984. Até que em Maio de 1992 o museu teve que ser encerrado devido à falta de condições de segurança do edifício.