到索尔茨伯里中央监狱的第一天，卡翁达就给监狱长留下了极为深刻的印象。按照惯例，新入狱的黑人犯人必须脱光衣服，抬起一条腿跳上跳下地接受检查，而白人犯人则可免除此程序。年轻气盛的卡翁达宁死不受此屈辱，令监狱长刮目相看，破例恩准免除此项检查，并特别关照今后卡翁达将得到与白人犯人同等的待遇，譬如配发牙膏，获准读书、报，穿给印度人和白人囚犯穿的囚衣等，甚至特许卡翁达的妻子带他们的六个孩子前来探监。

一次，监狱管理局长来视察，监狱长特意把卡翁达作为一名模范犯人介绍给局长大人，并调侃道：”他之所以来这里，是因为他阴谋推翻大英帝国。”

局长回答说：”哦，这对他今后履行职责将会有所帮助。”

事隔40多年，说起那位白人监狱长，卡翁达仍不加掩饰地赞许道：他是位绅士，是个通情达理的好人。

1960年1月9日，卡翁达被提前一天释放，因为次日是星期天，星期天不放人，于是他早一天重获自由。当日，卡翁达会见了记者和律师，随即发表了要求北罗得西亚人民保持镇静和忍耐，采取非暴力手段获取独立的声明。出狱前，他曾多次思考如何以新的形象出现在人民面前，最终决定拿起一块象征自由与和平的白手帕向人们挥动致意。从此，白手帕便成了卡翁达的标志性饰物。1月31日，他当选联合民族独立党的主席。1964年10月24日，赞比亚人民终于在卡翁达的领导下获得独立。

第三次入狱是在1997年10月。自1991年大选失利以来，其继承人奇卢巴总统采取一系列诋毁卡翁达声誉的举措。攻击他采取了封建专制独裁；吃大锅饭把经济搞垮；在政治上一边倒（亲华）等等。对此，卡翁达也采取了针锋相对地反击，利用各种机会和场合揭露、谴责奇卢巴政府的腐败，同时为其重返政坛加紧了与各界人士，特别是军方高层人士的接触与联系。1997年10月，赞比亚部分将领发动军事政变被当局粉碎。赞比亚政府即令法院以参与、资助未遂军事政变为名拘捕了卡翁达。令奇卢巴总统不解的是此举不仅激起了国内各界人士的强烈反对，就连同美国、英国等世界许多国家都对此表示不满，一些欧美国家甚至以此为由停止了对赞比亚的经济援助。奇卢巴政府迫于压力，于当年12月底释放了卡翁达，但同时宣布限制他的自由，将其软禁在家中。

从监狱出来后，卡翁达仍难得安宁。当局不准他出国访问、旅游，限制其参加各类政治活动，甚至对其欲会见的人也要横加指责，并经常找各种各样的理由来非难这位前总统。