Przeniesienie macierzy na nowy system.

View: New views
9 Messages — Rating Filter:   Alert me  

Przeniesienie macierzy na nowy system.

by Robert Górajski :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Witam.

        Planuję w domu postawić tanią macierz RAID-5 na trzech dyskach SATA
całość będzie działać jako bezpieczny "dysk" zewnętrzny podpięty do
sieci domowej, do składowania wrażliwych dla mnie danych (głównie chodzi
o fotografie). Ponieważ mam do wykorzystania starszy komputer całość
chcę skonfigurować następująco:
- - posiadany dysk IDE na Debiana
- - trzy nowe SATA na RAID-5

W celach testowych postawiłem dwie wirtualne maszyny z Debianem. Na
jednej za pomocą 'mdadm' uruchomiłem RAID-5, oraz przeprowadziłem test z
odpięciem jednego dysku i włączeniu nowego. Całość działa bez problemów
macierz odbudowała się.

W chwili obecnej chcę przeprowadzić jeszcze jeden test gdzie za symuluję
uszkodzenie dysku na którym jest OS. Mówiąc krótko chcę przenieść
istniejący RAID z danymi z jednej maszyny wirtualnej na drugą. Nie mam
jednak pewności z których opcji mdadm skorzystać podczas takiej operacji .

Będę wdzięczny za wszelkie podpowiedzi.

- --
Pozdrawiam
- ----------------
Robert Górajski (RGR)
Jabber: robert.gorajski@...
GG: 6402203
- ------------------------------------------------
GPG/PGP ID: CBDF19BE
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.9 (GNU/Linux)
Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org/

iEYEARECAAYFAkr2lu4ACgkQcCeB9svfGb7YIgCg4UFHEaveRy0nWcc/edJDou4X
mR8An2xk5vtea65rPE0J5j/tLtZ65TlU
=JEIs
-----END PGP SIGNATURE-----


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by Mariusz Kruk :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

On Sun, 2009-11-08 at 11:01 +0100, Robert Górajski wrote:
> Planuję w domu postawić tanią macierz RAID-5 na trzech dyskach SATA
> całość będzie działać jako bezpieczny "dysk" zewnętrzny podpięty do
> sieci domowej, do składowania wrażliwych dla mnie danych (głównie chodzi
> o fotografie). Ponieważ mam do wykorzystania starszy komputer całość
> chcę skonfigurować następująco:
> - - posiadany dysk IDE na Debiana
> - - trzy nowe SATA na RAID-5

Ale zdajesz sobie sprawę, że RAID nie zastąpi backupu?

> W chwili obecnej chcę przeprowadzić jeszcze jeden test gdzie za symuluję
> uszkodzenie dysku na którym jest OS. Mówiąc krótko chcę przenieść
> istniejący RAID z danymi z jednej maszyny wirtualnej na drugą. Nie mam
> jednak pewności z których opcji mdadm skorzystać podczas takiej operacji .

man mdadm, szukaj "Assemble"

--
\------------------------/
|  Kruk@...   |
| http://epsilon.eu.org/ |
/------------------------\


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by Robert Górajski :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Właśnie RAID ma stanowić Backup danych które normalnie mam na laptopie.
Szukam takiej metody przechowywania danych która pozwoli mi nie bać się
o nie przez lata. W mojej ocenie (oczywiście mogę być w błędzie) nie
osiągnę lepszego magazynu danych niż dedykowany komputer z RAID.
Szczególnie, że nie będzie on działał w sposób ciągły a li tylko kiedy
będę potrzebował wykonać backup lub sięgnąć po dane. Z doświadczenia
wiem, że wypalane płyty CD / DVD potrafią "gubić" dane po kilku latach.
Mam w domu streamer DDS4 ale kasetki mają stosunkowo małą pojemność a
ich czas życia jest dla mnie bliżej nieznany (wiem tylko, że szybko
zużywają się ze względu na rozciąganie taśmy). Tak więc nie bardzo wiem
jak przechowywać dane w długim okresie czasu.

Pozdrawiam
- ----------------
Robert Górajski (RGR)
Jabber: robert.gorajski@...
GG: 6402203
- ------------------------------------------------
GPG/PGP ID: CBDF19BE


Mariusz Kruk pisze:

> On Sun, 2009-11-08 at 11:01 +0100, Robert Górajski wrote:
>> Planuję w domu postawić tanią macierz RAID-5 na trzech dyskach SATA
>> całość będzie działać jako bezpieczny "dysk" zewnętrzny podpięty do
>> sieci domowej, do składowania wrażliwych dla mnie danych (głównie chodzi
>> o fotografie). Ponieważ mam do wykorzystania starszy komputer całość
>> chcę skonfigurować następująco:
>> - - posiadany dysk IDE na Debiana
>> - - trzy nowe SATA na RAID-5
>
> Ale zdajesz sobie sprawę, że RAID nie zastąpi backupu?
>
>> W chwili obecnej chcę przeprowadzić jeszcze jeden test gdzie za symuluję
>> uszkodzenie dysku na którym jest OS. Mówiąc krótko chcę przenieść
>> istniejący RAID z danymi z jednej maszyny wirtualnej na drugą. Nie mam
>> jednak pewności z których opcji mdadm skorzystać podczas takiej operacji .
>
> man mdadm, szukaj "Assemble"
>
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.9 (GNU/Linux)
Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org/

iEYEARECAAYFAkr4VQwACgkQcCeB9svfGb7RNACgj7OaYJlXhZm6bqHP2buLMH0Y
GAoAnA6sE8x5/WikFaz6uD9tiAbmqTmQ
=/cCR
-----END PGP SIGNATURE-----


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by TENEG - Tomasz Gołębiewski :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

Witam,

to tak dużo tych danych z laptopa?
Po pierwsze RAID 1 ma niską wydajność. Przy takiej ilości danych (zakładam setki GB) i kopiowaniu ich przez sieć (zakładam switch 100 Mbit) to zajmie.. godziny.
Osobiście do backupów miałem skonfigurowany serwer tak, że 2 dyski po 320 GB każdy były połączone częściowo w RAID1 (na ważne pliki) a częściowo w RAID0 (na duże, mniej ważne dane).
Do serwera łączyłem się bezpośrednio kablem krosowanym po Gigabicie. Napisałem sobie skrypt, który backupował mi tylko to co chciałem mieć na backupie.
Transfery - max prędkość odczytu laptopowego dysku, czyli około 50-60 MB/s. Zaś faktycznie serwer umożliwiał: RAID1 ~100 MB/s zapis i odczyt, RAID0 ~200 MB/s r/rw (ograniczał rzecz jasna interfejs sieciowy Gigabit).

Aktualnie pracuję nad połączeniem ze sobą dwóch serwerów Debian po Sambie przy użyciu wielu interfejsów i modułu Bonding oraz kabli krosowanych. Na razie stestowałem to raz na starszym sprzęcie i uzyskałem ~200 Mbit (w każdym z serwerów były po 2 karty 100 Mbit). Moduł bonding zapewnia też fail-over kart sieciowych. W takim przypadku laptop musiałby mieć jakąś dodatkową gigabitową kartę, ale myślę że i tak żaden przeciętny dysk nie wyrobi
2 x 120 MB/s.

W każdym bądź razie w Pana przypadku raczej nastawiłbym się na coś takiego:
http://backuppc.sourceforge.net/
System ten jest dostępny jako paczka w repozytoriach Debiana. Aktualnie próbuję go wdrożyć w środowisku testowym.

pozdr.

Robert Górajski pisze:
-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Właśnie RAID ma stanowić Backup danych które normalnie mam na laptopie.
Szukam takiej metody przechowywania danych która pozwoli mi nie bać się
o nie przez lata. W mojej ocenie (oczywiście mogę być w błędzie) nie
osiągnę lepszego magazynu danych niż dedykowany komputer z RAID.
Szczególnie, że nie będzie on działał w sposób ciągły a li tylko kiedy
będę potrzebował wykonać backup lub sięgnąć po dane. Z doświadczenia
wiem, że wypalane płyty CD / DVD potrafią "gubić" dane po kilku latach.
Mam w domu streamer DDS4 ale kasetki mają stosunkowo małą pojemność a
ich czas życia jest dla mnie bliżej nieznany (wiem tylko, że szybko
zużywają się ze względu na rozciąganie taśmy). Tak więc nie bardzo wiem
jak przechowywać dane w długim okresie czasu.

Pozdrawiam
- ----------------
Robert Górajski (RGR)
Jabber: robert.gorajski@...
GG: 6402203
- ------------------------------------------------
GPG/PGP ID: CBDF19BE


Mariusz Kruk pisze:
  
On Sun, 2009-11-08 at 11:01 +0100, Robert Górajski wrote:
    
	Planuję w domu postawić tanią macierz RAID-5 na trzech dyskach SATA
całość będzie działać jako bezpieczny "dysk" zewnętrzny podpięty do
sieci domowej, do składowania wrażliwych dla mnie danych (głównie chodzi
o fotografie). Ponieważ mam do wykorzystania starszy komputer całość
chcę skonfigurować następująco:
- - posiadany dysk IDE na Debiana
- - trzy nowe SATA na RAID-5
      
Ale zdajesz sobie sprawę, że RAID nie zastąpi backupu?

    
W chwili obecnej chcę przeprowadzić jeszcze jeden test gdzie za symuluję
uszkodzenie dysku na którym jest OS. Mówiąc krótko chcę przenieść
istniejący RAID z danymi z jednej maszyny wirtualnej na drugą. Nie mam
jednak pewności z których opcji mdadm skorzystać podczas takiej operacji .
      
man mdadm, szukaj "Assemble"

    
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.9 (GNU/Linux)
Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org/

iEYEARECAAYFAkr4VQwACgkQcCeB9svfGb7RNACgj7OaYJlXhZm6bqHP2buLMH0Y
GAoAnA6sE8x5/WikFaz6uD9tiAbmqTmQ
=/cCR
-----END PGP SIGNATURE-----


  

-- 
Pozdrawiam/Regards,
Tomasz Gołębiewski
-- To UNSUBSCRIBE, email to debian-user-polish-REQUEST@... with a subject of "unsubscribe". Trouble? Contact listmaster@...

Re: Przeniesienie macierzy na nowy system.

by Jerzy Patraszewski-2 :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Jak doniosły WSI, dnia Mon, 09 Nov 2009 19:17:39 +0100
TENEG - Tomasz Gołębiewski  <tomasz.golebiewski@...>
napisał(a):

> Witam,
>
> to tak dużo tych danych z laptopa?
> Po pierwsze RAID 1 ma niską wydajność. Przy takiej ilości danych
> (zakładam setki GB) i kopiowaniu ich przez sieć (zakładam switch 100
> Mbit) to zajmie.. godziny. Osobiście do backupów miałem
- --ciach
RAID 1 niska wydajność? bez przesady - tak naprawdę kwestia jak będą
robione backupy. Ja polecam do takiego zastosowania (laptopowego)
rdiff-backup, który jest pythonową nakładką na rsynca. Fulla wykonuje
tylko raz, a potem tylko diffy. Ma kilka fajnych "ficzerów",
np. zapamiętuje które pliki były usunięte.
Pozdr.
sm0q
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.10 (GNU/Linux)

iEYEARECAAYFAkr4jUgACgkQoacw6qH103BovwCg1XxzTTp3C57URwCTTdOfLvYP
BJ0AmQEQEcNMTeeshHCT37R5BXN/u6ML
=UHnn
-----END PGP SIGNATURE-----

Re: Przeniesienie macierzy na nowy system.

by Mariusz Kruk :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

On Mon, 2009-11-09 at 18:44 +0100, Robert Górajski wrote:
> Właśnie RAID ma stanowić Backup danych które normalnie mam na laptopie.
> Szukam takiej metody przechowywania danych która pozwoli mi nie bać się
> o nie przez lata.

To czy się będziesz bać zależy od tego jaką niepewność akceptujesz ;-)
A poważnie - nie ma metody, która zabezpieczy Cię w 100%. Można najwyżej
minimalizować prawdopodobieństwo awarii.

> W mojej ocenie (oczywiście mogę być w błędzie) nie
> osiągnę lepszego magazynu danych niż dedykowany komputer z RAID.
> Szczególnie, że nie będzie on działał w sposób ciągły a li tylko kiedy
> będę potrzebował wykonać backup lub sięgnąć po dane. Z doświadczenia
> wiem, że wypalane płyty CD / DVD potrafią "gubić" dane po kilku latach.
> Mam w domu streamer DDS4 ale kasetki mają stosunkowo małą pojemność a
> ich czas życia jest dla mnie bliżej nieznany (wiem tylko, że szybko
> zużywają się ze względu na rozciąganie taśmy). Tak więc nie bardzo wiem
> jak przechowywać dane w długim okresie czasu.

Może zaczniemy od podstaw - głównym zadaniem RAID jest minimalizacja
downtime'u oraz utraty danych _z powodu awarii jednego (przy wyższych
poziomach może być więcej niż jednego) urządzenia_. To nie rozwiązuje
problemu np. uszkodzeń logicznych na poziomie filesystemu, albo błędów
użytkownika.
Generalnie - im więcej niezależnych kopii danych, tym niższe
prawdopodobieństwo uszkodzenia ich wszystkich równocześnie. Dlatego
można np. rozważyć zrobienie trzech osobnych dysków i robienie backupów
round-robinem kolejno na nich. (owszem, to nie są do końca niezależne
jednostki, ale są ze sobą mniej powiązane niż przy zwykłym RAID).

--
\.\.\.\.\.\.\.\.\.\.\.\.\.\
.\.Kruk@....\.\.
\.http://epsilon.eu.org/\.\
.\.\.\.\.\.\.\.\.\.\.\.\.\.


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by Wojciech Ziniewicz :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

W dniu 10 listopada 2009 08:51 użytkownik Mariusz Kruk
<kruk@...> napisał:
[...]

> Może zaczniemy od podstaw - głównym zadaniem RAID jest minimalizacja
> downtime'u oraz utraty danych _z powodu awarii jednego (przy wyższych
> poziomach może być więcej niż jednego) urządzenia_. To nie rozwiązuje
> problemu np. uszkodzeń logicznych na poziomie filesystemu, albo błędów
> użytkownika.
> Generalnie - im więcej niezależnych kopii danych, tym niższe
> prawdopodobieństwo uszkodzenia ich wszystkich równocześnie. Dlatego
> można np. rozważyć zrobienie trzech osobnych dysków i robienie backupów
> round-robinem kolejno na nich. (owszem, to nie są do końca niezależne
> jednostki, ale są ze sobą mniej powiązane niż przy zwykłym RAID).

Dokladnie - dla mnie najlepszym sposobem backupu jest RAID1 (np 2x 500
gb )+ jeden dodatkowy dysk na ktory backup przebiega rsyncem co np
tydzien.

RAID1 zabezpiecza w miare przed utrata danych a dodatkowy dysk przed
bledami uzytkownika (np rm -fr jakis katalog /  przypadkowo naciskajac
spacje po nazwie katalogu przed sleszem ;) )

pozdr.



--
Wojciech Ziniewicz
http://rfc.sunsite.dk/rfc/rfc2324.html


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by Krzysztof Burghardt-4 :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

W dniu 10 listopada 2009 13:04 użytkownik Wojciech Ziniewicz
<wojciech.ziniewicz@...> napisał:
> RAID1 zabezpiecza w miare przed utrata danych a dodatkowy dysk przed
> bledami uzytkownika (np rm -fr jakis katalog /  przypadkowo naciskajac
> spacje po nazwie katalogu przed sleszem ;) )

Jeśli już potrzebne są dwie kopie zapasowe, aby czuć się bezpiecznie,
to może warto jedną z nich trzymać offsite? W końcu złodziej może
zabrać macierz i "dodatkowy dysk". Podobnie powódź i pożar może
"dodatkowego dysku" nie oszczędzić.

Jeszcze kilka problemów do rozważenia i od prostego, domowego NAS-a
płynnie przejdziemy do DRP albo i nawet BCP ;-)

--
Krzysztof Burghardt <krzysztof@...>
http://www.burghardt.pl/


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...


Re: Przeniesienie macierzy na nowy system.

by Rafal Czlonka-2 :: Rate this Message:

Reply to Author | View Threaded | Show Only this Message

Wojciech Ziniewicz wrote:
> Dokladnie - dla mnie najlepszym sposobem backupu jest RAID1 (np 2x 500
> gb )+ jeden dodatkowy dysk na ktory backup przebiega rsyncem co np
> tydzien.
> RAID1 zabezpiecza w miare przed utrata danych a dodatkowy dysk przed
> bledami uzytkownika (np rm -fr jakis katalog /  przypadkowo naciskajac
> spacje po nazwie katalogu przed sleszem ;) )

RAID1 + dodatkowy dysk nie zabezpieczają przed utratą danych, tym
bardziej jeśli są na tej samej maszynie. Co do użytkownika, to
zakończenie nazwy katalogu "/" jest zupełnie niepotrzebne, poza tym
użytkownik nie powinien mieć praw umożliwiających mu usuniecie "/",
co na nowszych systemach jest, co najmniej, trudne do zrobienia nawet
jako root.

Backup na, np.: NAS, który sam posiada RAID (przynajmniej 1) i nie
znajduje się w tym samym miejscu co nasza maszyna (w zależności
od ilości danych pełen raz na tydzień/dwa i przyrostowe codziennie);
wydaje się lepszym pomysłem przy niewiele większym nakładzie kosztów.

Pozdrawiam,
--
Raf

http://www.catb.org/~esr/faqs/smart-questions.html


--
To UNSUBSCRIBE, email to debian-user-polish-REQUEST@...
with a subject of "unsubscribe". Trouble? Contact listmaster@...