Classée monument historique, la tour de l'horloge était l'entrée principale de la ville forte, qui comptait 3 portes fortifiées dont une a disparu. Il existait à l'époque une fortification avancée, comportant un pont levis.

Elle se situe au nord-est du bourg, du côté où l'accès à la ville est le plus aisé. Son porche débouche sur la Grande Rue, au centre, suivant la ligne de crête de l'épron rocheux.

Elle était surmontée d'un joli clocher flèche, soutenue par quatre piliers entourant une cloche. Il fut détruit lors de l'incendie de la ville en 1815, et fut remplacé par un bulbe comtois.

Elle est un des rares témoins de l'architecture militaire Franc-comtoise.