spremanje puno velikih matrica u fajl(ove)

[sasha vukelic]

situacija je otprilike ovakva:

jagged array oblika [128][128][8] sa float vrijednostima
i imacu gomilu takvih matrica (recimo da je ta gomila 100 komada)

e sad prvo rjesenje cuvanja ovih matrica na disku koje mi pada na pamet je
jednostavno da otvorim fajl i redom upisem tih 131072 brojeva i kada mi zatreba da ih ucitavam na isti nacin...

okruzenje mi je c#, visual studio 2008.

jos nisam gledao uopste na koji fazon bi bilo dobro (baza podataka, obicni fajl(ovi)...), jer mi jos ne treba o glavu
pa ako neko ima prijedloga kako da ovo rijesim; slobodno...

ono sto me prvenstveno interesuje je sto brze ucitavanje
velicina fajla ili baze uopste nisu bitni

[Stevvan]

Jer nije problem da kazes za sta ti to konkretno treba?

[sasha vukelic]

nije. sto bi bio problem

vjerovatno si vidio ovo: http://www.sk.co.yu/forum/showpost.p...6&postcount=19
danas sam imao malo vremena i kontao mozda bih mogao instancirati vise terena, koje cu nadovezivati jedne na druge u zavisnosti gdje se nalazi kamera... a to bi trebalo cuvati na disku jer generisanje onog terena (na pocetku programa) traje oko pola sekunde i ako to pomnozis sa 100 vidis da moze potrajati

[Stevvan]

Jel jedna mapa array[128][128][8]? Ako je tako, onda sto moras sve ucitavati na pocetku, kad mozes pre svakog level-a tj. promene mape, ucitati odredjenu mapu, pa onda sve preko 10 sec i nije mnogo (taman imas vremena da protreses prste )

EDIT:
Tek sam sad pazljivije procitao poruku . Pa mogao bi da probas sa tim zapisivanjem, ne bi trebalo da mu treba puno vremena da ucita, ja sam sad napravio file od 131072 nula i python ga ucitava trenutno bez ikakvog zastoja, mada ja mislim da teren ne bi trebalo da ti bude veci od 5x5 polja, tako da i kada bi se sve ucitalo odjednom ne verujem da bi puno pojelo memorije (negde oko 3,2 mb na ram-u)

[sasha vukelic]

dodatno:

1. "mapa" ce se sastojati iz vise matrica navedenog oblika (pretpostavimo da je taj broj bas ogroman, recimo milion - da ne moze stati u memoriju) i znaci matrice ce se nastavljati jedna na drugu i ciniti jednu cjelinu.
2. u memoriji treba da stoji samo matrica koja se koristi, kao i susjedne matrice, sto nece koristiti puno memorije.
3. postoji razlika izmedju "generisanja" i ucitavanja matrice iz fajla. generisanje traje oko pola sekunde po matrici (na mom kompjuteru), no to vrijeme nije toliko bitno jer ce se teren generisati samo jednom, spremiti u fajl(ove) i ucitavati po potrebi. ucitavanje iz fajlova bi, naravno trebalo da bude brze od generisanja.

[Stevvan]

E da jedna stvar koja ti moze koristiti a pritom ti znaciti dosta u ubrzanju: Posto ce igra biti gledana odozgo, napravi da kamera da da vidis nesto manje od jedne celije. Ovo je dobro posto ces tako imati potrebu da ucitas najvise 4 celije odjednom. I da: Da li si rotaciju paukova (kada se krecu po brdascima) i generisanje terena sam pisao, ili si za to koristio nesto drugo?

[sasha vukelic]

Stevvan kaže:

I da: Da li si rotaciju paukova (kada se krecu po brdascima) i generisanje terena sam pisao, ili si za to koristio nesto drugo?

sve sto vidis sam isprogramirao - nista nije crtano: teren je random (znaci drugaciji svaki put), a to cudo sto hoda uopste nije model vec se sastoji iz spojenih dijelova koji se racunaju u zavisnosti od polozaja u kojem se noge nalaze (znaci jedino sto se pamti jesu x i y koordinate sve 4 noge - ostali se racuna iz tih podataka)

Stevvan kaže:

E da jedna stvar koja ti moze koristiti a pritom ti znaciti dosta u ubrzanju: Posto ce igra biti gledana odozgo, napravi da kamera da da vidis nesto manje od jedne celije. Ovo je dobro posto ces tako imati potrebu da ucitas najvise 4 celije odjednom.

vidim da dobro shvatas sta zelim mada, moje rjesenje ce ici malko drugacije - pogledaj sliku: plavo je matrica u kojoj se trenutno nalazi objekat. zelene su matrice koje su u memoriji, a sve ostalo je na disku. za primjer sam dao ako objekat predje u matricu lijevo od ove u kojoj se sada nalazi, onda se u memoriju ucitavaju matrice obojene crvenom bojom. matrice koje ostaju sa desne strane mogu da se brisu iz memorije, medjutim to ne mora da se odradjuje odmah u zavisnosti koliko je memorije na kompjuteru.

[Brains]

sasha vukelic kaže:

jagged array oblika [128][128][8] sa float vrijednostima i imacu gomilu takvih matrica (recimo da je ta gomila 100 komada)

Ako ti treba brzina, cuvaj u memoriji. Nije mnogo:

float je velicine 4 bajta (32 bita)

128*128*8*4 = 0.5 MB memorije

To ce reci da kompjuter sa 64 MB slobodne memorije moze da bez problema drzi 128 matrica ovog tipa.

Cak i da koristis double (on je velicine 8 bajta), opet nije problem da drzis sve u memoriji.

A ako ti treba vise od ovoga, uradi neki Thread sa smanjenim prioritetom koji bi ucitavao dalje matrice (ne moraju neposredno sledece matrice, vec nekoliko koraka unapred)

[sasha vukelic]

zaboravio sam da ipak zivimo u malo modernijem dobu

javicu se ponovo ako ih bude bas puno pa ipak bude trebalo neko rjesenje...