collapse

Reklama


Autor Wątek: KS-PPS a dysk SSD?  (Przeczytany 11989 razy)

0 użytkowników i 1 Gość przegląda ten wątek.

Offline cobratw

  • Super Specjalista
  • ****
  • Wiadomości: 302
  • Pomógł? 14
  • Kujawsko-Pomorskie
Odp: KS-PPS a dysk SSD?
« Odpowiedź #15 dnia: Listopada 28, 2014, 09:52:55 am »
No więc komp zakupiony. core i5, 8 gb ramu, dysk ssd Crucial M550 + wd caviar black 1 tb
na ssd system, na wd ks-pps
system śmiga aż miło, eksport raportu (5k świadczeń) z wd na ssd trwa ok 26 minut przynajmniej tak wskazuje pps, stoper puszczony zobaczymy :)


edit:
ze stoperem dokładnie 27 minut 48 sekund
« Ostatnia zmiana: Listopada 28, 2014, 10:09:48 am wysłana przez cobratw »

Offline PiotrSz

  • Administrator
  • Ekspert
  • *****
  • Wiadomości: 3285
  • Pomógł? 109
Odp: KS-PPS a dysk SSD?
« Odpowiedź #16 dnia: Listopada 28, 2014, 12:41:08 pm »
No więc komp zakupiony. core i5, 8 gb ramu, dysk ssd Crucial M550 + wd caviar black 1 tb
na ssd system, na wd ks-pps
system śmiga aż miło, eksport raportu (5k świadczeń) z wd na ssd trwa ok 26 minut przynajmniej tak wskazuje pps, stoper puszczony zobaczymy :)


edit:
ze stoperem dokładnie 27 minut 48 sekund

A jak wyniki jakichś testów syntetycznych ?
Spróbuj z ciekawości przelecieć zarówno SSD jak i Blacka Benchmarkiem z HDTune

Ja właśnie testuje nasz nowy "serwer dla ubogich" ;-)
Póki co w szoku jestem jaki to smok jest!
Xeon W3520 - 4rdzenie po 2,6GHz (2,9 z turbo) bazujący na i7 (do tego ma jeszcze HT więc 8 wątków ciągnie na raz ale nie wiem czy nie wyłącze HT bo z FB mi sie kiedyś nie sprawdzał.. muszę potestować jak to teraz wygląda)
4 dyski WD VelociRaptor 160GB już jakieś mega szybkie nie są w porównaniu z współczesnymi konstrukcjami ale dalej są długożywotne a mają stosunkowo mały przebieg
O dziwo ten komp (Fujitsu Celcius M470) ma wbudowany kontroler który pozwala nie tylko na raid 0,1 i 5 ale również 10 i może spróbuje odpalić to na 4 dyskach.
Teraz testuje konfigurację z raid5 i w benchmarku mam min prędkość 185MB/s, max 333MB/s, av 280MB/s, czas dostępu 7ms i burst rate 3986MB/s!!! za to obciążenie procka przy tym ok 18% (ale jeden chyba rdzeń tylko)

pozdrawiam
« Ostatnia zmiana: Listopada 28, 2014, 15:55:10 pm wysłana przez PiotrSz »

Offline cobratw

  • Super Specjalista
  • ****
  • Wiadomości: 302
  • Pomógł? 14
  • Kujawsko-Pomorskie
Odp: KS-PPS a dysk SSD?
« Odpowiedź #17 dnia: Listopada 28, 2014, 13:57:02 pm »
A jak wyniki jakichś testów syntetycznych ?
Spróbuj z ciekawości przelecieć zarówno SSD jak i Blacka Benchmarkiem z HDTune





ta serwer dla ubogich :P

Offline PiotrSz

  • Administrator
  • Ekspert
  • *****
  • Wiadomości: 3285
  • Pomógł? 109
Odp: KS-PPS a dysk SSD?
« Odpowiedź #18 dnia: Listopada 28, 2014, 15:39:08 pm »
ta serwer dla ubogich :P

Kilkuletni z demobilu bo dla ubogich którzy nie mają na nowy..
A tak serio to wziąłem dwie takie maszyny, żeby stosunkowo niedużym kosztem spróbować zabezpieczyć środowisko PPSa na którym prawdopodobnie kolejny rok będziemy pracować. Będę próbował jakąś synchronizację całości albo tylko samej bazy zrobić.
Kupno teraz nowego wypasa nie ma sensu bo przy wdrożeniu dużego systemu do EDM i tak będzie pewnie trzeba coś świeżego postawić!

A sprzęcior jest taki tylko w lekko zmienionym przeze mnie konfigu (wyleciała grafika i wymiana dysku na 4xVelociRaptor + dodatkowa sieciówka gigabit)
http://comtrade.pl/product-pol-1822-Fujitsu-Celsius-M470-Xeon-W3520-i7-2-66-GHz-4-rdzenie-8-GB-250-GB-DVD-RW-Windows-7-Prof-Quadro-FX-1800.html


pozdrawiam

Offline Lastryko

  • Specjalista
  • ***
  • Wiadomości: 227
  • Pomógł? 6
Odp: KS-PPS a dysk SSD?
« Odpowiedź #19 dnia: Listopada 28, 2014, 18:12:58 pm »
... Będę próbował jakąś synchronizację całości albo tylko samej bazy zrobić...

Ale przy tej konfiguracji to pozostaje Ci jedynie zabawa na poziomie systemu operacyjnego i FB.
Dużo ciekawsze byłoby zrobienie replikacji synchronicznej na poziomie macierzy tak by
serwer FB nie był nawet świadomy przełączenia na replikę.

Kupno teraz nowego wypasa nie ma sensu bo przy wdrożeniu dużego systemu do EDM i tak będzie pewnie trzeba coś świeżego postawić!

True, true.

Offline logger

  • Początkujący
  • *
  • Wiadomości: 35
  • Pomógł? 0
Odp: KS-PPS a dysk SSD?
« Odpowiedź #20 dnia: Grudnia 02, 2014, 00:00:31 am »
Jeśli zależy Wam na prędkości - dajcie sobie spokój z SSD. Ja mam SSD i zwykły talerzowy, różnice nie są wielkie aby kupować.
Prędkość generacji w PPSie zależy prawie w 100% od procesora - od GHz jednego rdzenia jak i wydajności samego rdzenia (intel bije na głowę AMD). Np. i5 IVY bridge koniecznie z oznaczeniem K na końcu nazwy procka, dobrą (google) płytę do overclockingu i nakręć go na 4 4,2 GHz jak pójdzie. Przetestuj przy jakiej częstotliwości system pracuje stabilnie.
Po prostu jak u mnie procek i5 w laptopie chodzi w trybie ECO 1,17 GHz albo w TURBO 3.15 GHz (wartość realna jaką procek osiąga) - to prędkość mniej więcej w tym drugim przypadku w stosunku do pierwszego przypadku wzrasta zgodnie z 3.15 / 1.17 = około 2.5 raza szybciej.

5000 świadczeń idzie w ok. 23 minuty, przy czym chodzi 1 wątek w wirtualnej maszynie.

A tak w ogóle to jak ktoś długo pracuje i nie robi nic z bazą, należy zrobić kopię zapasową i z powrotem ją przywrócić lub porządkowanie sekwencji.

Dysk HDD ma swój cache i jak do bazy jest zapisywany 1 rekord lub odczytywany - to za każdym razem głowica nie odczytuje. Bazy danych nie są w taki głupi sposób projektowane, tam odczyt na poziomie fizycznym następuje od razu po paręset rekordów, dysk czeka na procesor.

Dysk SSD bez mega szybkiego procka IMHO to niepotrzebny wydatek.

Zatem lepiej zakupić szybki procek w kompie stacjonarnym (bez UPSa) i założyć sobie RAMdisc, czyli dysk wirtualny w pamięcie RAM.
Oczywiście kopia zapasowa to podstawa zawsze.






 


Offline PiotrSz

  • Administrator
  • Ekspert
  • *****
  • Wiadomości: 3285
  • Pomógł? 109
Odp: KS-PPS a dysk SSD?
« Odpowiedź #21 dnia: Grudnia 02, 2014, 09:12:07 am »
...

aż nie wiem jak to wszystko skomentować.. Ty na pewno pracujesz na danych osobowych wrażliwych?

pozdrawiam

Offline cobratw

  • Super Specjalista
  • ****
  • Wiadomości: 302
  • Pomógł? 14
  • Kujawsko-Pomorskie
Odp: KS-PPS a dysk SSD?
« Odpowiedź #22 dnia: Grudnia 02, 2014, 12:30:41 pm »
Jeśli zależy Wam na prędkości - dajcie sobie spokój z SSD. Ja mam SSD i zwykły talerzowy, różnice nie są wielkie aby kupować.

Dysk SSD bez mega szybkiego procka IMHO to niepotrzebny wydatek.


pewne odczyt 500 a ok 100 mega to żadna różnica phiii
a system  pewnie tez startuje podobnie

Offline PiotrSz

  • Administrator
  • Ekspert
  • *****
  • Wiadomości: 3285
  • Pomógł? 109
Odp: KS-PPS a dysk SSD?
« Odpowiedź #23 dnia: Grudnia 02, 2014, 14:13:29 pm »
pewne odczyt 500 a ok 100 mega to żadna różnica phiii
a system  pewnie tez startuje podobnie

Z tym akurat bywa różnie w przypadku SSD. W firmie pracuje na kompie z jakimś starszym SSD Corsaira 60GB który powinien mieć ok 400-500MB/s ale że jest podpięty pod pierwszą generacje i5 chyba jeszcze bez SATA3 to idzie ok 200-250 i szału nie ma.
Tzn system i programy uruchamiają się zauważalnie szybciej i nie mieli tak jak w przypadku nawet VelociRaptora (w domu na systemowy mam VR 160GB) ale do serwera nawet na systemowy wolałbym jednak coś stworzone do długiej niezawodnej pracy (SCSI, SAS albo VR z SATA).

W jednym miejscu działa mi jeszcze stary serwer Compaq Proliant 1600 (2xPIII 500MHz) z dyskami SCSI 9 i 18GB które pracują u mnie nieprzerwanie (no z kilkoma wyłaczeniami) prawie 10lat a kupowałem ten złom już sporo używany. Odpukać zero awarii! Byłoby miło, żeby współczesny sprzęt podziałał połowę tego czasu bezawaryjnie..

pozdrawiam

Offline logger

  • Początkujący
  • *
  • Wiadomości: 35
  • Pomógł? 0
Odp: KS-PPS a dysk SSD?
« Odpowiedź #24 dnia: Grudnia 02, 2014, 16:28:18 pm »
...

aż nie wiem jak to wszystko skomentować.. Ty na pewno pracujesz na danych osobowych wrażliwych?

pozdrawiam
No ale ja odpowiedziałem tylko i wyłącznie na temat wcześniejszego zapytania typu: dysk SSD a szybkość generacji 5000 rekordów w PPSie.
Nie dziwię się zatem, że nie wiesz jak to komentować. :-)
Jeżeli baza ma 1 GB, kopia z talerzowego na talerzowy dysk trwa około 10 sekund przez SATA II. I co ma do tego praca z danymi wrażliwymi? Pracuję na danych osobowych wrażliwych od 10 lat i ani razu mi żaden sprzęt nie padł. A kopię zawsze robię!
Druga kwestia, dysk SSD opłaca się mieć tylko i wyłącznie do systemu operacyjnego a zwłaszcza i w laptopie - odporność na uderzenia. O zastosowaniach specjalistycznych nie piszę: Autocad, praca z plikami audio, video, obróbka itp.
Mam w tej chwili laptopa z 1 GB talerzowcem, na zewnątrz mam SSD, i powiem wam że nie spieszy mi się z wymianą. Windows 8 z talerzowego w 10 sekund startuje to wystarczająco krótko. SSD wygrywa czasem dostępu do pliku który jest natychmiastowy dla każdego pliku. W SSD nie występuje pojęcie defragmentacji plików.
Zatem skanery wirusowe, kopiowanie dużej ilości plików, praca w systemie operacyjnym - tak - SSD jest lepszy.
Gdy baza danych jest w 1 pliku - wystarczy go zdefragmentować albo przegrać i wgrać z powrotem - praca na 1 pliku dużym jest zatem bardzo zbliżona SSD do HDD odnośnie baz danych. Różnice mogą być rzędu kilkunastu procent. Decyzja zależy od użytkownika, jego portfela.

Offline logger

  • Początkujący
  • *
  • Wiadomości: 35
  • Pomógł? 0
Odp: KS-PPS a dysk SSD?
« Odpowiedź #25 dnia: Grudnia 02, 2014, 16:40:42 pm »
pewne odczyt 500 a ok 100 mega to żadna różnica phiii
a system  pewnie tez startuje podobnie
W jednym miejscu działa mi jeszcze stary serwer Compaq Proliant 1600 (2xPIII 500MHz) z dyskami SCSI 9 i 18GB które pracują u mnie nieprzerwanie (no z kilkoma wyłaczeniami) prawie 10lat a kupowałem ten złom już sporo używany. Odpukać zero awarii! Byłoby miło, żeby współczesny sprzęt podziałał połowę tego czasu bezawaryjnie..

pozdrawiam
Będzie działał. Bo dysk jest zrobiony z materii  a materia zachowuje swoje właściwości w czasie tak jak grawitacja.
Dysk jak ma działać i działa przez 1 rok powiedzmy, podziała jeszcze duuugie lata.
Jedyny mankament z nowym sprzętem jest taki, że oni upychają mnóstwo gigabajtów na talerz, ciężko powiedzieć jak będzie z trzymaniem danych przez dłuuugie lata.
Sam dysk nowoczesny - mechanicznie - nie powinien się zepsuć, ale z tymi danymi ciężko powiedzieć jak zachowa się nośnik. Teoretycznie fizyka to fizyka, jak dane trzymają się przez parę miesięcy to powinno być bez różnicy i po wielu latach.

10 lat - to dobry wynik ale już bym miał coś na oku przygotowanego w razie awarii.

Dodam, że u mnie w przychodni jest dysk HDD 5400 RPM ATA - działa 5 lat w przychodni a wcześniej u mnie w domu był w kompie przez 2 lata.
Włączany jest o 7:30 a wyłaczany o 18:00 i chodzi tak 5 dni w tygodniu.

Inny dysk w innym miejscu, smart wskazuje około 40000 godzin pracy - działał ale go wymieniłem na nowy. Ani razu mi nigdy żaden dysk nie padł.
Ot kiedyś miałem HDD 20 GB, stary woziłem go w kieszeni na rowerze a noga cały czas pracuje i dysk w dół i górę. Padł biedny w końcu ;D
Ale brałem to pod uwagę.

Offline Lastryko

  • Specjalista
  • ***
  • Wiadomości: 227
  • Pomógł? 6
Odp: KS-PPS a dysk SSD?
« Odpowiedź #26 dnia: Grudnia 02, 2014, 17:07:03 pm »
.... I co ma do tego praca z danymi wrażliwymi? Pracuję na danych osobowych wrażliwych od 10 lat i ani razu mi żaden sprzęt nie padł. A kopię zawsze robię!...

Domyślam się, że koledze Piotrowi raczej o sposób podejścia do tematu chodziło niż o "padnięcie sprzętu". :)
Po tym wykładzie z pecetologii stosowanej też odniosłem wrażenie, że coś tu zgrzyta - waga problemu i merytoryka dyskusji.

Ekspertem od podsystemów dyskowych nie jestem. Zaledwie odrobinę się orientuję w temacie
i z mojegu punktu widzenia sprowadzanie dyskusji do tematu maksymalnej szybkości odczytu z dysków
jest kompletnym nieporozumieniem.

Przy podejmowaniu decyzji czy bazę FB umieścić na HDD czy też SSD konieczne jest
poznanie profilu IO generowanego przez serwer bazodanowy.
Czy są to zapytania sekwencyjne czy też losowe. Jaki procent stanowią odczyty a jaki zapisy.
No i najważniejsze parametry: ilość operacji w jednostce czasu (IOPS) oraz rozmiar bloku operacji.

Maksymalny transfer z dysku to sytuacja sekwencyjnego odczytywania bardzo dużych bloków małą ilością operacji.
W takim przypadku pierwszą barierą jest przepustowość samego interfejsu.
W normalnych warunkach taka sytuacja nie występuje (z wyjątkiem prostego kopiowania bazy).
Zazwyczaj operacje wykonywane są na małych bokach (4k), często w sposób losowy.
Przy tych założeniach istotną wielkością jest IOPS, który dla dysków HDD (w zależności od prędkości obrotowej) szacuje się na 50-180. Tutaj SSD pokazują dlaczego warte są swojej ceny.

Naturalnie to wszystko "bierze w łeb" jeśli mówimy o prostym systemie obsługującym 2-3 stacje,
gdzie w godzinach szczytu serwer generuje 50 IOPSów.
 

Offline PiotrSz

  • Administrator
  • Ekspert
  • *****
  • Wiadomości: 3285
  • Pomógł? 109
Odp: KS-PPS a dysk SSD?
« Odpowiedź #27 dnia: Grudnia 02, 2014, 21:34:25 pm »
.... I co ma do tego praca z danymi wrażliwymi? Pracuję na danych osobowych wrażliwych od 10 lat i ani razu mi żaden sprzęt nie padł. A kopię zawsze robię!...

Domyślam się, że koledze Piotrowi raczej o sposób podejścia do tematu chodziło niż o "padnięcie sprzętu". :)
Po tym wykładzie z pecetologii stosowanej też odniosłem wrażenie, że coś tu zgrzyta - waga problemu i merytoryka dyskusji.

No mniej więcej o to mi chodziło!
Rozmawiamy tutaj o przygotowaniu serwera pod wielostanowiskowe środowisko pracy bazy danych zawierającej wrażliwe dane osobowe.
Jak dla mnie zarówno 1 szt SSD jak i 1 szt tależowego nie jest żadnym rozwiązaniem.. podstawą jest bezpieczna macierz która w minimalny chociaż sposób chroni nam dane przed utratą.
Raid1 na 2 dyskach to minimum nawet dla tak prostej 1-plikowej bazy danych.
Kolejnym tematem jest dobry kontroler raid z pamięcią (szybkość) i baterią (bezpieczeństwo).
Kolejnym, zabezpieczenie zasilania serwera poprzez UPS.

Zwykła kopia bezpieczeństwa też przestaje być wystarczająca, jeżeli system ma działać non stop i ma zagwarantować integralność danych!
Co z tego, że będę miał kopię z wczorajszego wieczoru czy nawet z przed godziny jak wszystko co pomiędzy tym szlag trafi a i czas potrzebny na odtworzenie bazy z kopii oraz ponowne uruchomienie środowiska produkcyjnego spowoduje spore zamieszanie w firmie!
I mówię na razie o sytuacji gdzie nie mamy jeszcze wdrożonej EDM oraz lekarze nie pracują na żywca na systemie! Jednakże już sama praca rejestratorek i pielęgniarek oraz korzystanie w pełni z terminarza wymusza na mnie przejście na coś pewniejszego i bezpieczniejszego niż zwykła kopia bezpieczeństwa (nawet robiona co kilka minut - chociaż to jest nierealne przy ponad 6GB bazie!)

Tutaj naprawdę nie ma miejsca na żadne zabawy z podkręcaniem, wirtualnymi ramdyskami itd..

Podejrzewam, że logger może pracować na PPSie na zasadzie wpisywania od czasu do czasu danych na jednym stanowisku (lapek) i tutaj przy zachowaniu minimalnego bezpieczeństwa poprzez robienie kopii bazy na koniec dnia pracy oraz obowiązkowo po każdej komunikacji z NFZ jest to realne. Nie jest to jednak tematem tego wątku!

Podstawą jest bezpieczeństwo danych. Większość osób pracujących z takimi systemami (również administratorzy..) nie wiedzą, że za zniszczenie lub utratę danych osobowych są odpowiednie paragrafy z odpowiedzialnością karną włącznie..

Co do awaryjności dysków twardych to mam swoje własne doświadczenia z kilkunastu lat serwisowania oraz opieki nad kilkudziesięcioma komputerami i serwerami w różnych firmach...

Lastryko - dzięki za wykład! O tym nawet nie myślałem pomimo, że są to kluczowe informacje!
Mi przy doborze dysków do tego tymczasowego (kolejnego..) serwera dla PPSa przyświecały 3 zasady tj. żywotność, cena oraz prędkość większa niż standardowy dysk desktopowy. Na chwilę obecną PPS "śmiga" na 2 dziesięcioletnich 80GB Seagate SATA i jakichś mega problemów wydajnościowych przy chodzących jednocześnie ponad 20 stanowiskach PPSa nie ma. Kluczowym powodem wymiany jest odświeżenie platformy oraz zapewnienie większego bezpieczeństwa (potencjalna duplikacja serwerów). Jeżeli mogę to Cię jeszcze za jakiś czas pomęczę na priva w sprawie replikacji itd.

BTW co do podkręcania i innych kombinacji sprzętowych to jestem tego wielkim entuzjastą ale w warunkach domowych! W żadnym wypadku nie firmowych czy serwerowych! A w podkręcanie bawię się od lat 90 i mojego pierwszego 486 (40@66 chyba) ;-) W międzyczasie podkręcałem jeszcze jakieś K5tki (75@90), K6tki, C300 (@450), C900 (@1200), A1700 (1700+@3200+), AX2 4200+, E8400 (2x3GHz@2x4,5) a obecnie bodajże Q8200 (4x2,3@4x2,8). Podkręcałem też voodoo i komórki ;-) koniec Offtopa.

A miałem siedzieć cicho... ehh ;-)

pozdrawiam

 

* Szukaj


* Kto jest on-line

  • Kropka Gości: 585
  • Kropka Ukrytych: 0
  • Kropka Użytkowników: 0

Nie ma żadnego użytkownika on-line.

Reklama

* Aktywni

Paweł Paweł
9409 Wiadomości
mpi
3356 Wiadomości
PiotrSz
3285 Wiadomości
Michał Michał
3191 Wiadomości
karolweksler
3153 Wiadomości
09061303
3079 Wiadomości
Edward_B Edward_B
2968 Wiadomości
Bartosz Bartosz
2375 Wiadomości
maciek777 maciek777
2201 Wiadomości
cilazapril cilazapril
1634 Wiadomości

Reklama

Reklama

Style:3: index (domyslny), Portal (default), Display (default).
Pod-szablony:8: init, html_above, body_above, portal_above, main, portal_below, body_below, html_below.
Pliki językowe:8: SPortal.english (domyslny), SPortal.polish-utf8 (domyslny), SPortal.english (domyslny), index+Modifications.english (domyslny), index+Modifications.polish-utf8 (domyslny), SPortal.polish-utf8 (domyslny), index.english (domyslny), index.polish-utf8 (domyslny).
Arkusze stylów:1: portal (default).
Uwzględnione pliki:15 - 738KB. (pokaż)
Użytych zapytań: 29.

[Pokaż zapytania]