Historia spichlerza sięga czasów opata Franciszka Mikołaja Zalewskiego (1772–1740). Ten 3-kondygnacyjny budynek z małymi okienkami, położony nieopodal bramy barokowej prowadzącej z parku do archikatedry, wchodził w skład zespołu pałacowego w Gdańsku-Oliwie. Zbudowany został w miejscu dwóch mniejszych średniowiecznych spichlerzy. Nad wejściem do spichlerza, od strony wschodniej widnieje kartusz herbowy Godziemba opata Zalewskiego. Pierwotnie spichlerz pełnił funkcje gospodarcze, a przed i po wojnie służył jako magazyn dla muzeum pomorskiego. Od 30 maja 1988 roku mieści się tu Dział Etnografii Muzeum Narodowego w Gdańsku.