L'ancienne Douane du Havre s'élevait sur la partie du Grand Quai, nommée autrefois pointe Cavelier, du nom de Guillaume Cavelier qui en 1517 y possédait un terrain sur lequel on éleva un corps de garde. Par la suite on y édifia la Douane, construite de 1754 à 1757. En 1779 elle servait de résidence au général Lafayette losqu'il reçut le 27 août l'épée d'honneur qui lui était offerte par le Congrès américain. Elle fut détruite lors de l'attaque du Havre pendant la seconde guerre mondiale.