Totalt 1 804 rohingyer har satts på sju båtar på väg mot ön. Tidigare i december flyttades en första grupp om 1 600 människor från de undermåliga lägren i närheten av gränsen mot Myanmar.
Bangladesh regering, som sett till att bygga en 12 kilometer lång vall som skydd mot stormvågor och bostäder för omkring 100 000 personer på ön, avfärdar kritiken.
– Ön är helt säker, säger utrikesminister Abdul Momen.
Regeringen hävdar att förflyttningen är frivillig. En del av flyktingarna har dock berättat att de pressats till att flytta till ön. Människorättsorganisationen Amnesty International uttrycker oro för hur processen går till och FN uppmanar myndigheterna att försäkra att ingen flykting tvångsförflyttas.
– De rohingyer som har flyttat dit är väldigt nöjda. Vissa illasinnade grupper sprider negativ propaganda, säger Abdul Momen.