自罗马时代以来，科尔切斯特一直是重要的军事驻地。科尔切斯特驻军目前是第 16 空中突击旅的所在地。陆军唯一的军事惩教训练中心位于科尔切斯特郊区的 Berechurch Hall 路，在部队内部和当地俗称“温室”，以奥尔德肖特最初的军事监狱[36]命名。[37]该中心关押着来自所有三个军种的被判处拘留期的男女军人。

1998年至2008年，该镇驻地进行了大规模的重建。国防部的大量土地被出售用于私人住房开发，部分驻军也被转移。现在，驻军的许多地方都空着，等待着第二阶段的开发。

自 2006 年以来，科尔切斯特一直是英国 12 个为纪念皇室周年纪念日和外国国家元首来访而鸣放皇家礼炮的地方之一。从 2009 年起，这些致敬活动就在城堡公园举行。

科尔切斯特拥有多个博物馆。城堡博物馆位于科尔切斯特城堡内，拥有有关罗马科尔切斯特的丰富展览。附近有冬青树博物馆 (Hollytrees Museum)，这是一座社会历史博物馆，位于查尔斯·格雷 (Charles Gray) 故居内，设有儿童展品，此外还有位于前诸圣教堂 (All Saints' Church) 内的镇自然历史博物馆。廷珀利钟表博物馆 (Timperley's Clock Museum) 位于镇中心一座 15 世纪的木结构房屋内，曾经是威廉·吉尔伯特 (William Gilbert) 的家，现在收藏了伯纳德·梅森 (Bernard Mason) 钟表藏品。

该镇与足球的联系始于业余俱乐部科尔切斯特镇 (Colchester Town)，该俱乐部成立于 1867 年，并于 1937 年解散。该俱乐部的后继者是职业俱乐部科尔切斯特联 (Colchester United)，该俱乐部参加足球一级联赛并在科尔切斯特社区体育场 (Colchester Community Stadium) 进行主场比赛。该俱乐部成立于 1937 年，于 1950 年进入足球联赛。科尔切斯特联女子足球俱乐部 (Colchester United Ladies) 效力于 FA 女子超级联赛南部赛区。该镇的其他运动队包括科尔切斯特橄榄球俱乐部、科尔切斯特角斗士美式足球俱乐部、科尔切斯特举重俱乐部以及科尔切斯特和东埃塞克斯板球俱乐部。埃塞克斯郡板球俱乐部在科尔切斯特和东埃塞克斯队的主场城堡公园板球场进行一些主场比赛。

科尔切斯特的体育设施包括体育中心、科尔切斯特休闲世界、科尔切斯特加里森田径场（军队和平民共同使用的合作设施）和滑板公园。

科尔切斯特动物园是一个位于城镇郊区的大型动物园。

中世纪科尔切斯特的主要地标是科尔切斯特城堡，这是一座 11 世纪的诺曼城堡，建在古罗马神庙的拱顶之上。科尔切斯特有著名的中世纪遗址，包括施洗者圣约翰本笃会修道院（当地人称为“圣约翰修道院”）幸存的大门，以及圣博托尔夫奥古斯丁修道院的废墟（当地人称为“圣约翰修道院”）。圣博托尔夫修道院”）。科尔切斯特的许多教区教堂都建于这一时期。

科尔切斯特在 14 世纪后期迅速发展为毛织业中心，并因其赤褐色（灰棕色织物）而闻名于欧洲许多地区。这使得人们能够从黑死病的影响中异常迅速地恢复过来，特别是通过移民进入该镇。

1550年至1600年间，大量来自佛兰德斯的织布工和布料制造商移民到科尔切斯特及周边地区。他们以生产“Bays and Says”布料而闻名，这种布料由羊毛编织而成，通常与 Baize 和 Serge 联系在一起，尽管现存的例子表明它们与现代同类产品有很大不同。科尔切斯特市中心的一个地区仍然被称为荷兰区，那里的许多建筑都可以追溯到都铎时期。在此期间，科尔切斯特是英格兰最繁荣的羊毛城镇之一，并以其牡蛎而闻名。古老的罗马城墙沿着荷兰区的北门街延伸。

1648 年，第二次英国内战期间，戈林勋爵率领的保皇党军队进入该镇。由托马斯·费尔法克斯爵士和亨利·伊雷顿领导的追击议会军队包围了该镇十一个半星期，这段时期被称为科尔切斯特围城战。事情从6月13日开始。保皇党于夏末投降（8 月 27 日，戈林勋爵在 Kings Head Inn 签署了投降文件），查尔斯·卢卡斯爵士和乔治·莱尔爵士在科尔切斯特城堡内被处决。一座小方尖碑标记了他们坠落的地点。

丹尼尔·笛福 (Daniel Defoe) 在英格兰和威尔士之旅中提到，1665 年该镇因瘟疫而失去 5000 多人，“比例比任何邻国或伦敦市都要多”。然而，当他在 1722 年写下这篇文章时，他估计该地区的人口约为 40,000 人（包括“外村”）。

1884 年，该镇遭受科尔切斯特地震袭击，估计里氏震级为 4.7 级，造成了广泛的地区性破坏。

20世纪初，科尔切斯特游说成为英国圣公会埃塞克斯教区的所在地，从现有的罗切斯特教区中分离出来。竞标未成功，县城切姆斯福德成为新教区的所在地。埃塞克斯大学于 1961 年在该镇郊区的威文霍公园成立。耗资 2,270 万英镑、全长 8 英里的 A120 科尔切斯特东部绕道于 1982 年 6 月开通。