« Return to Thread: Bls: Huge Matrix pake HashMap

RE: Bls: Huge Matrix pake HashMap

by Ilhamsyah Edwar :: Rate this Message:

Reply to Author | View in Thread

Ups sori, 1 triliun.. Bener... Nolnya banyak dah.. :)

Kalo di-split, tetap aja butuh memori sebanyak 8 byte x 1T = 8TB!!!
Asumsi data yang dimasukkan adalah integer yang 8 byte.. Kayaknya perlu
trik khusus nih. Mungkin bisa dengan diswap ke file untuk cache.

> -----Original Message-----
> From: jug-indonesia@...
> [mailto:jug-indonesia@...] On Behalf Of jarvov
> Sent: Friday, July 03, 2009 04:05 PM
> To: jug-indonesia@...
> Subject: Re: Bls: [JUG-Indonesia] Huge Matrix pake HashMap
>
> 1 triliun boss... bukan 1 milyar.
> Satu point data(m.n) itu isinya apa saja Mas?
> emang kalau di split enggak bisa ya? jadi dibagi per 1Kx1K di
> proses bagian per bagian.
> Ngeri denger nya... sejuta kali sejuta, kayak lagi ngitung
> aerodinamis pesawat tempur
>
> rgds,
> jarvov
>
> Ilhamsyah Edwar wrote:
> >
> >
> > Kayaknya kalo 1jt x 1jt terlalu besar deh.. Berarti ada
> 1milyar data.
> > Belum lagi memproses data sebesar itu, bisa butuh waktu
> beberapa jam
> > waktu running.
> >
> > Saya dulu pernah coba pake vector of vector, cuman sanggup
> 1000x1000.
> > Lebih daripada itu out of memory. Sudah coba naikin XMS sampe 1.5GB
> > gak kuat juga.
> > Saya dulu bukan untuk data mining, tapi untuk perhitungan finite
> > element.
> >
>
>
>

 « Return to Thread: Bls: Huge Matrix pake HashMap