Крепость на Имери Грамвуса была построена венецианцами в середине 16 века для защиты от Османской империи. Расположение этой крепости давало возможность контролировать пролив, отделяющий западный Крит от полуострова Пелопонесс. Но спустя чуть более 100 лет она была захвачена турками. К тому времени весь остров уже находился в руках завоевателей. 133 года понадобилось критянам, чтобы вернуть крепость Грамвуса и превратить ее в центр освободительной борьбы с турецкими захватчиками. Но сложнейшие условия, с которыми столкнулись местные жители в те годы, вынуждали их заниматься пиратством. Нападению подвергались практически все суда, проходящие в этих водах: турецкие, египетские и европейские. Так Грамвуса получила славу пиратской крепости. В течение этого периода население острова Имери Грамвуса выросло. Здесь даже были построены школа и церковь.
Грамвуса имеет статус заповедника и охраняется государством. Это – место обитания редких представителей флоры и фауны. Здесь останавливаются многие виды перелетных птиц.