有著台灣最後一道治安防線之稱的綠島監獄，從民國59年開始興建，但因為離島建材運輸不易，一直到了民國61年才開始啟用，在這裡收容的多半是來自台灣各監獄中最難以管教的犯人，透過離島的隔絕特性，讓受刑人能夠改邪歸正，更有不少「大哥」級的人物曾經在此服刑，也因此監獄四周總是瀰漫著一股神祕、肅殺的氣氛，意外地成為觀光景點之一。

然而也曾經有不少因為政治運動或是為人權而奔走的志士，曾經被囚禁在這島上，也因此催生了這個公園。人權紀念公園位在公館村，由知名的作家柏楊提字的碑文：「在那個時代，有多少母親，為她們被囚禁在這個島上的孩子，長夜哭泣。」不只道出了當時那些志士的心酸，也點出了當時環境的封閉。

紀念公園，紀錄了當時參與人權運動的人士大名，不僅標誌著台灣人權的進步，同時已是亞洲的第一座人權紀念碑呢。綠島的這兩個景點，是充滿歷史回憶的地方，除了美輪美奐的風景之外，來這裡走走，感受一下綠島歷史的痕跡。