Der Bau des Palazzo Pfanner geht auf das Jahr 1660 zurück, als die adelige Luccheser Seidenhändlerfamilie Moriconi einen Architekten, wahrscheinlich aus Genua, mit dem Bau eines prachtvollen Barockpalastes innerhalb der Stadtmauern beauftragte.

Der Besitz ging 1680 an die Familie Controni, die ebenfalls zum Handelspatriziat in Lucca gehörte. Die Controni erweiterten den Bau 1686 durch die große Außentreppe und zu Anfang des 18. Jahrhunderts durch den prächtigen Garten im italienischen Stil, der Filippo Juvarra zugeschrieben wird. In der zweiten Hälfte des 19. Jahrhunderts wurde der Komplex von Felix Pfanner erworben, einem Bierbrauer aus Österreich, der 1846 auf Einladung des Herzogs Carlo Lodovico von Bourbon nach Lucca gekommen war. Der Herzog hatte gewünscht, dass die Herstellung von Bier in der Stadt in die Hände "eines fähigen deutschen Braumeisters" gelegt würde.

Bis heute befindet sich der Palazzo im Besitz der Familie Pfanner, die vor kurzem die Restaurierung der Außenfassaden, von Teilen des Inneren sowie der Fresken an der großen Freitreppe in Auftrag gegeben hat. Seit Ende der 90er Jahre sind sowohl der Garten als auch die Wohnräume des Palazzo für den Publikumsverkehr zugänglich und werden unter anderem für temporäre Ausstellungen, Konzerte und kulturelle Begegnungen genutzt.