Achmad Mardiansyah's Journal

Manage your knowledge by writing it

Archive for the ‘deduplication’ tag

ZFS deduplication

with 2 comments

semenjak posting saya tentang kernel conference di brisbane, ada rekan yang bertanya tentang ZFS deduplication:

> Jadi deduplication ini bakal diimplementasikan di layer filesystem dari OS?
> Jika maksudnya untuk virtual machine saja, setahu saya Qemu, KVM dan
> User Mode Linux sudah menerapkannya dalam bentuk image yang berbentuk
> COW (Copy On Write). Jadi COW ini berbasis pada suatu image fix, dan
> perubahan yang dilakukan ditulis pada image lain. Dengan demikian jika
> ingin membuat varian baru berdasar image original, tinggal membuat
> image COW lain berdasar image original
> Yang menarik ini tentang hasil speed I/O bisa naik sampai 30%. Ada
> penjelasan metodologi testingnya?

iya. feature ini bakal ditambahkan di ZFS yang sekarang. command untuk eksekusinya adalah:
zfs set dedup=on bla bla bla…
Read the rest of this entry »

Written by Achmad Mardiansyah

July 21st, 2009 at 1:57 pm

kernel conference, brisbane australia

without comments

sekedar mo share info aja.
hari rabu sampe jumat (15-17 july 2009) ada kernel conference di brisbane. topiknya tentang latest issue tentang kernel operating system. pembicara dari macem2: freeBSD, openBSD, linux, sun

agenda bisa dilihat disini:
http://au.sun.com/sunnews/events/2009/kernel/agenda.jsp

salah topik yang banyak mendatangkan pertanyaan peserta hari ini adalah deduplication. feature ini masih testing, tapi sangat menarik untuk diimplementasikan.

contoh kasus deduplikasi:
misalkan kita pake vmware workstation, dan udah buat vm image. kalau kita mau buat vm baru bedasarkan vm image yang kita buat, maka kita tidak perlu copy lagi image tersebut ke tempat yang baru karena vmware bakal ngelink image tersebut dan buat image tambahan jika ada perubahan.
hasilnya:
– hemat space: tidak perlu copy image yang baru
– lebih cepat: karena tinggal ngelink aja.

nah konsep ini yang bakal di implementasikan di ZFS. sehingga jika ada blok yang sama di harddisk, ngak perlu di tulis lagi ditempat lain. tinggal di link aja.
hasil dari testing sejauh ini: space bisa dihemat 40%, speed I/O naik 30%.

buat yang ngak bisa dateng, bisa ikut via internet:
http://www.ustream.tv/channel/kernel-conference-australia
please note: brisbane = GMT+10

Written by Achmad Mardiansyah

July 15th, 2009 at 9:00 pm