唐代，李靖讨萧铣驻兵于此，“百姓德之，故曰靖港。清咸丰四年（1854），太平军西征入湘，大败曾国藩之湘军。因水运便利而商贾繁华，一时为境内第一繁荣集镇。民国中期，与津市、洪江同为湖南省繁盛三镇。1957年，沩水改道，靖港段沩水堵口。古镇数里外有新石器时代遗址10余处。古镇的古街、古民居、古建筑及古街区的整体格局，保存相对较好。保护范围主要包括“八街四巷七码头，保留木结构建筑占整个建筑的三分之一以上，其中“宏泰坊、“育婴堂等晚清砖木结构建筑保存较好，原临河所建房屋均为吊脚楼，独具江南水乡特色。位于保健街的戏台，以花岗石护栏相连，石板临江面皆阳刻有花、鸟、兽等各种图案。镇上还有宗教建筑数处，一度朝有千人作揖，夜有万盏明灯。