Từ năm 1941 - 1944, thực dân Pháp đã đưa tù nhân ra đảo Phú Quốc thiết lập 3 trại tù, giam cầm khoảng 1.000 người và sau đó giải thể. Tháng 6/1953, Pháp tái lập Trại giam tù binh Căng Cây Dừa (còn gọi là Trại giam Cây Dừa) lớn nhất Đông Dương lúc bấy giờ, diện tích khoảng 40 ha, giam giữ các chiến sĩ, cán bộ kháng chiến cả ba miền Bắc, Trung, Nam và lúc đông nhất lên đến 14.000 tù binh. Và khi Hiệp định Giơnevơ năm 1954 được ký kết, việc trao trả tù binh được tiến hành, trại giam bị xóa bỏ. Cuối năm 1955, trên nền Trại giam Cây Dừa - Phú Quốc, Mỹ - Ngụy tiếp tục lập một trại tù với tên gọi Trại Huấn chính Cây Dừa (còn gọi là Nhà lao Cây Dừa) giam giữ gần 1.000 tù binh, tù chính trị và đến tháng 3/1957 thì chấm dứt hoạt động. Năm 1967, chúng xây dựng lại, lấy tên là Trại giam Tù binh Cộng sản Việt Nam/Phú Quốc để giam cầm, đọa đày các chiến sĩ cách mạng với quy mô, số lượng lớn nhất Việt Nam.