Adres: Herengracht 621
Architect: Adriaen Dortsman, Willem Hamer, Gerrit A.van Arkel
Bouwtijd: 1674, 1889, 1907
Opdracht: Adriaen Dortsman, D.S.Granaat, -

De architect Adriaen Dortsman (1635-1682), die waarschijnlijk belangrijke opdrachten als de Nieuwe Lutherse Kerk (Ronde Lutherse Kerk) aan zijn belangrijke beschermheer Jan Six te danken had, lijkt de spil geweest te zijn van een groep Amsterdammers van Waalse afkomst die in nieuwe vormen liet bouwen. Six en Dortsman waren ook buren: de architect kreeg de kans naast het huis van Six een heel blok woonhuizen te ontwerpen op grond die Jan Six heeft gekocht. Herengracht 621 is een 5,41 meter breed huis dat deel uitmaakt van vijf door Adriaen Dortsman ontworpen huizen (Herengracht 621-629) aansluitend aan het woonhuis van Jan Six tot de hoek met de Amstel. Vier huizen hadden een stoep met onderingang (621-623-627-629), het woonhuis voor Dortsman had een balkon. Het ensemble werd gecompleteerd met woonhuizen aan de Amstel 208-210-212.

Omstreeks 1730 wordt het huis bewoond door Karel van Dam (1692-1753). Hij was 36 jaar boekhouder bij de West Indische Compagnie (WIC) en de Sociëteit van Suriname en kerkmeester van de Zuiderkerk.
In 1889 vindt een verbouwing plaats naar woonhuis en kantoor onder architect Willem Hamer voor de juwelier en diamantfabrikant David Soesman (Semmie) Granaat (1855-1928) en zijn vrouw Deborah Polak (1868-1915). Zij krijgen twee kinderen Siegfried en Rosa Granaat. David heeft al in 1891 een vennootschap met Van Wezel. In 1895 was David Granaat één van de oprichters van de Amsterdamsche Juweliersvereeniging, die optrad als bond van diamantfabrikanten. De vereniging was daarmee een tegenhanger van de diamantbewerkersbond ANDB. Toen Granaat in 1907 zijn slijperij sloot, kwamen 150 man op straat te staan. Er was destijds een crisis in de diamantindustrie. In 1908 was het kantoor van Granaat verhuisd naar Nieuwe Achtergracht 168. Granaat heeft in 1908 een vestiging in New York evenals veel andere diamantairs. Niet verwonderlijk, 90% van het Amsterdamse aanbod aan diamanten wordt naar de VS verkocht en in New York is 70% van de diamantslijpers van joods-Hollandse afkomst (aardige bijkomstigheid: de Nederlanders integreren erg slecht, zelfs zo slechts dat bepaalde woorden uit het diamantslijpersvak als Amerikaans woord worden aangenomen). Overigens is de vestiging van Granaat in New York slechts van korte duur.
In 1907 wordt opnieuw een verbouwing doorgevoerd, nu door architect Gerrit van Arkel.
In 2009 wordt het pand gekocht door Bank Mendes Gans die al sinds 1919 eigenaar en gebruiker is van Herengracht 619.