Klaster obliczeniowy

Wszystko o naszych urządzeniach: PC, laptopy, jednopłytkowce, itp - problemy ze sprzętem , aplikacjami itd.
Awatar użytkownika
WoodPaker
User
User
Posty: 136
Rejestracja: czwartek 17 wrz 2015, 19:23
Lokalizacja: USA
Kontaktowanie:

Klaster obliczeniowy

Postautor: WoodPaker » środa 27 kwie 2016, 20:58

hej wam wszystkim razem i z osobna
Zostałem powołany do stworzenia małego klastra obliczeniowego. Mam do wydania jakieś $5000 i zastanawiam się co mogę z tego złożyć. Zależy mi by na procesor przypadało przynajmniej 4GB RAMu. Co polecicie? Nie chce kupować gotowego rozwiązania tylko raczej coś złożyć



 ! Wiadomość z: wojtek
Temat przeniosłem w bardziej odpowiednie miejsce
Life is to short to eject USB safely

Awatar użytkownika
RafPe
User
User
Posty: 177
Rejestracja: sobota 05 wrz 2015, 16:22

Re: Klaster obliczeniowy

Postautor: RafPe » środa 27 kwie 2016, 22:44

A mógłbyś napisać coś więcej co masz na myśli klaster obliczeniowy ? Sama nazwa klaster wskazuje dla mnie na więcej niż jedno urządzenie a do tego często jest tak ze kupienie gotowych rozwiązań wychodzi taniej jeśli zsumujesz czas potrzebny do uruchomienia go samemu :)

Sent from my GT-I9506 using Tapatalk

Awatar użytkownika
WoodPaker
User
User
Posty: 136
Rejestracja: czwartek 17 wrz 2015, 19:23
Lokalizacja: USA
Kontaktowanie:

Re: Klaster obliczeniowy

Postautor: WoodPaker » czwartek 28 kwie 2016, 00:10

Klaster obliczeniowy czyli kilka(naście) płyt głównych wraz z procesorem i pamięcią połączone w jedno wielkie urządzenie pozwalające na uruchamianie zadań obliczeniowych na kilku(nastu) procesorach(rdzeniach) jednocześnie.
Doświadczenie w budowaniu takich cudów mam więc kupno gotowego rozwiązania odpada ze względu na cenę. Tylko zastanawiam się co kupić. Wiesz, mogę kupić nawet płyty za 1000$ ale to mija się z celem. Ma być tanie i w miarę wydajne. Tak żeby działało
Life is to short to eject USB safely

Awatar użytkownika
WoodPaker
User
User
Posty: 136
Rejestracja: czwartek 17 wrz 2015, 19:23
Lokalizacja: USA
Kontaktowanie:

Re: Klaster obliczeniowy

Postautor: WoodPaker » czwartek 28 kwie 2016, 02:06

Tak się zastanawiam jakie płyty główne tam wstawić :)
Life is to short to eject USB safely

Awatar użytkownika
PROTON
Expert
Expert
Posty: 527
Rejestracja: czwartek 08 paź 2015, 18:35
Lokalizacja: Warszawa

Re: Klaster obliczeniowy

Postautor: PROTON » czwartek 28 kwie 2016, 20:10

Pytanie, jakie oprogramowanie chcesz na nim uruchamiać, co chcesz na nim robić?
Można zrobić klaster na pecetach wykorzystując ich CPU, np: https://en.wikipedia.org/wiki/Beowulf_cluster
Lub GPU np. CUDA, OpenCL, VirtualCL, itp.
Albo na FPGA ;)

Jak ma być tanio to poszukaj używanych serwerów 1U z 2 CPU minimum Xeon X5450/E5450 i 32GB RAM, za tyle kasy hurtowo kupisz ich ze 100 szt. Każdy z nich będzie miał fizycznie 8 rdzeni po 3GHz czuli w sumie da to z 800 rdzeni. Jak dobrze zakręcisz się przy firmach utylizujących to może i szafy do nich dostaniesz.

Wady: 4-5 szaf, dużo kabli i switchy, duży pobór mocy, problemy z dyskami bo będą padały.
Gott weiß ich will kein Engel sein.

Awatar użytkownika
PROTON
Expert
Expert
Posty: 527
Rejestracja: czwartek 08 paź 2015, 18:35
Lokalizacja: Warszawa

Re: Klaster obliczeniowy

Postautor: PROTON » czwartek 28 kwie 2016, 20:14

Zaraz, można zrobić bezdyskowo, wszystko bootowane po sieci.
Gott weiß ich will kein Engel sein.

Awatar użytkownika
squeez
User
User
Posty: 211
Rejestracja: czwartek 04 lut 2016, 10:13

Re: Klaster obliczeniowy

Postautor: squeez » czwartek 28 kwie 2016, 22:09

IBM ma coś takiego jak Blade. Same jednostki (używane) dosyć tanio wychodzą nie wiem jak z "szafą" ta może się okazać słabym punktem.

-- EDIT --
Choć teraz widzę że nie tylko IBM to ma, tylko przykład: http://allegro.pl/dell-blade-center-10x ... 17270.html
plus takiego rozwiązania taki że masz po części problem z głowy z upakowaniem tego :)

Za około 1k$ masz jakieś 40 rdzeni do tego sporo RAM zasilacze, switche, KVM, przy twoim budżecie mógłbyś kupić 5 takich zestawów co daje ci jakieś 200 rdzeni :)

Ja przy takiej skali raczej bym nie szedł w kupno płyta+procesor+zasilacz i spinanie tego ręcznie. Raczej mała szansa że kupisz identyczne zestawy a przy takiej skali to zabawa w oddzielne konfiguracje, łączenie, przechowywanie itp. to spora strata czasu.

Awatar użytkownika
WoodPaker
User
User
Posty: 136
Rejestracja: czwartek 17 wrz 2015, 19:23
Lokalizacja: USA
Kontaktowanie:

Re: Klaster obliczeniowy

Postautor: WoodPaker » wtorek 03 maja 2016, 03:56

PROTON pisze:Jak ma być tanio to poszukaj używanych serwerów 1U z 2 CPU minimum Xeon X5450/E5450 i 32GB RAM, za tyle kasy hurtowo kupisz ich ze 100 szt. Każdy z nich będzie miał fizycznie 8 rdzeni po 3GHz czuli w sumie da to z 800 rdzeni. Jak dobrze zakręcisz się przy firmach utylizujących to może i szafy do nich dostaniesz.

Nie zakręce się. Po pierwsze nie mam czasu jeździć po całych Stanach w poszukiwaniu takich firm, a po drugie to są pieniądze z grantu więc nie może to być używka. Ale drugi pomysł jest dość ciekawy.
A co będę liczył? Nanorurki, fullereny, grafen, leki. Wszystkiego po trochu a wszystko po to by poznać ich właściwości fizykochemiczne.
Life is to short to eject USB safely

Awatar użytkownika
PROTON
Expert
Expert
Posty: 527
Rejestracja: czwartek 08 paź 2015, 18:35
Lokalizacja: Warszawa

Re: Klaster obliczeniowy

Postautor: PROTON » wtorek 03 maja 2016, 19:36

Co ciekawego znalazłem: http://www.supermicro.com/products/moth ... -2750F.cfm
Zasilanie: 4-pin 12V DC power input or 24-pin ATX
Czyli z jednego mocnego zasilacza można zasilić wiele płyt.
Gott weiß ich will kein Engel sein.

Awatar użytkownika
WoodPaker
User
User
Posty: 136
Rejestracja: czwartek 17 wrz 2015, 19:23
Lokalizacja: USA
Kontaktowanie:

Re: Klaster obliczeniowy

Postautor: WoodPaker » wtorek 03 maja 2016, 21:51

Tak swoją drogą ile MIPSów ma taki Atomik?
Life is to short to eject USB safely

Awatar użytkownika
PROTON
Expert
Expert
Posty: 527
Rejestracja: czwartek 08 paź 2015, 18:35
Lokalizacja: Warszawa

Re: Klaster obliczeniowy

Postautor: PROTON » środa 04 maja 2016, 08:31

Tu masz wydajność:
https://www.cpubenchmark.net/cpu.php?cp ... 40+2.40GHz
https://forums.servethehome.com/index.p ... 750f.2444/

8 rdzeniowy Atom jest troszkę słabszy od 4 rdzeniowego E5450, czyli rdzeń ATOM-a jest o połowę wolniejszy od rdzenia Xeona. Sam ALU jest pewnie taki sam, ale ATOM jest wykastrowany za cache i optymalizatorów więc dlatego wynik ma słaby.
Gott weiß ich will kein Engel sein.

Awatar użytkownika
PROTON
Expert
Expert
Posty: 527
Rejestracja: czwartek 08 paź 2015, 18:35
Lokalizacja: Warszawa

Re: Klaster obliczeniowy

Postautor: PROTON » środa 04 maja 2016, 08:35

Gott weiß ich will kein Engel sein.


Wróć do „Sprzęt, sterowniki, oprogramowanie”

Kto jest online

Użytkownicy przeglądający to forum: Obecnie na forum nie ma żadnego zarejestrowanego użytkownika i 10 gości