Il portait aussi le nom d'hôtel de la Cour-des-Comptes, car cette institution s'y était installée en 1591. Il porte le nom de celui qui fut peut-être son constructeur, Nicolas Romé, seigneur de Fresquienne, conseiller du Roi en son Conseil Privé et Maître des requêtes.
La façade de la partie la plus ancienne (celle qui est conservée dans la construction actuelle) présente un décor qu'on retrouve dans les constructions de la même époque : galerie d'Aumale à l'Hôtel de Bourgtheroulde, Hôtel Jubert. C'est un bon exemple de la première renaissance rouennaise. On retrouve des pilastres à candélabres et des frises à enroulements d'une facture très soignée.
Dans un cartouche de la façade, la construction est datée de 1525. Elle ne figure pourtant pas sur le dessin de Jacques Le Lieur.
L'entrée de l'hôtel se trouvait sur la rue des Carmes. Dans la cour, à droite de la maison d'origine, un bâtiment un peu plus récent de construction classique, était formé de cinq travées. Son style permet de le classer dans la catégorie des édifices de la seconde renaissance. Il comportait au rez-de-chaussée une galerie qui fut transformée en chapelle après l'acquisition par la Chambre des Comptes. Puis la galerie devint un passage qui ouvrait sur la rue Saint-Romain. Cette galerie possédait des voûtes à pendentifs remarquables.
L'hôtel a été longtemps enserré dans des constructions qui ne permettaient pas d'apprécier sa valeur.
Durement touché par les bombardements et l'incendie en mai et juin 1944, il a été remonté (avec un étage en moins) dans le moderne Palais des Congrès. La loggia qui bordait la cour au sud n'a pas été sauvée de la pioche des démolisseurs.

Collection Guy Pessiot