Grafikkarten zum Minen oder Rechnen - Graka in einem DL360 G8

  • Moin,

    gerade dabei mein setup zum Minen bzw. Wärmeerzeugen ;) im Winter zu überarbeiten. Ich plane Rechenleistung dem Wärmebedarf anzupassen. Aktuell sind es zwischen 1.5-3KW.

    Aktuell habe ich ja eine 3090 die ich eher zum Spielen inkl. WaKü hatte, aber gespielt habe ich damit so gut wie gar nicht. Stattdessen wurde sie zum minen von Ethereum (das ist ja seit staking jetzt rum - und eigentlich auch gut so) genutzt. Zur Zeit nutze ich die zum erstellen von Plots für Chia und als remote compute für eine Chia farm (XCH Krypto hat nichts mit dem Samen zu tun ausser evtl. wegen dem Grüntouch absichtlich ähnlichem Namen).

    Meine Homeserver sind ja etwas älter (Workstations im Büro ignorierend:

    • 3x i7 mit Supermicro Mainboard und 64GB RAM PCI-E 3
    • 1*i9 Supermicro mit 128GB RAM und meine ich PCI-E 4
    • 1x HP 360 DL Proliant Server mit 512GB ram und ex Xeon PCI-E 3 (ein slot und keine Stromanschlüsse für Graka)

    In die Supermirco kommen Nvidia 3060 - zwei habe ich schon laufen. Das geht mit den passenden Treibern direkt von Nvidia. d.h. man muss Linux header installieren (oder pve header) und mit entsprechenden verweis installieren ala

    Code
    ./NVIDIA-Linux-x86_64-535.86.05.run --kernel-source-path /usr/src/linux-headers-6.2.16-19-pve/

    d.h. leider bei jedem Kernelwechsel auch Treiber neu erstellen.

    Größeres Problem stellt der HP server da. Ich dachte ich kann da einfach ein externes Netzteil nehmen und die Graka mit Strom versorgen - ging aber nicht. Zumindest bin ich mit eine 2080 und 1080ti gescheitert. Allerdings liefen die auch in einem der Supermicros nicht von daher evtl. auch kaputt (gebraucht gekauft aber mit Rückgabeoption die ich ziehe).

       

    1080ti mit 6 und 8pin Stromanschluss - slot im Supermicro und Strom von 12V Molex.

    Evtl. reichte der Strom von den eigentlich für Diskbackplane Molex Adapter auch nicht.

    Eine 1050 (zwei slots) habe ich zum laufen gebracht - allerdings hat die nur 4GB VRAM was ganz arg an der Kante ist. Sprich mein remote compute process stürz ab und zu wegen out of mem ab. Für optimale Performance bruacht es >= 8GB.

     

    Provisorium - mit PCIE 4 Extender-Kabel liegt die 1050 auf dem Gehäuse. Dass soll nat. ins Gehäuse rein

    Von daher habe ich noch eine P2200 geordert (75W ein Slot, 5GB aus DE gebrauch 200€) und auch China eine P4 (75W ein slot 8GB für 90€). Strom/Leistung wäre vermutlich eher eine T1000 (50W, 8GB RAM) ideal, die finde ich aber nur für 400€ neu.

    Zum Graka vergleich ist diese Seite gut: Technical City oder T1000 (Terminator like :)).

    Plan also von

    • 1050 (die ja halb-lebig geht und wegen 2 slots auch nicht in den Rechner passt) ->

    Folgende sollten passen, nur nicht sicher ob die mit der 10G Netzwerkkarte kollidieren, man wird sehen.

    • P2200 (75W) ->
    • Tesla P4 (75W aber schneller und mehr Speicher) und evtl.
    • T1000 (vermutlich etwas langsamer als P4 aber sparsamer) wenn es um Stromsparen geht.

    Performancevergleich:

    Sowohl die 3090 auf meiner AMD Workstation mit 128GB Ram und NVME Drives wie die 1050 auf dem Xeon system (150GB Ram werden genutzt) mit 1050 brauchen ca. 6-7min zum erstellen eines Chia K32 C19 plots.

    Auf der Workstation bringt eine schnellere Erstellung auch nix mehr, da der transport über das 1G LAN eh der Bottleneck ist. Der HP server ist 10G angebunden und deswegen lohnt hier ein Aufrüsten der Graka durchaus.

    Hier mal ein paar der Erstellungszeiten für die 1050 (zum späteren Vergleich):

    Display Spoiler

    Total plot creation time was 427.633 sec (7.12722 min)

    Total plot creation time was 427.995 sec (7.13326 min)

    Total plot creation time was 427.847 sec (7.13078 min)

    Total plot creation time was 427.892 sec (7.13154 min)

    Total plot creation time was 428.322 sec (7.1387 min)

    Total plot creation time was 428.569 sec (7.14282 min)

    Total plot creation time was 428.116 sec (7.13527 min)

    Total plot creation time was 427.998 sec (7.13331 min)

    Total plot creation time was 427.507 sec (7.12512 min)

    Total plot creation time was 428.059 sec (7.13432 min)

    Total plot creation time was 427.766 sec (7.12943 min)

    Total plot creation time was 428.362 sec (7.13936 min)

    Total plot creation time was 427.989 sec (7.13315 min)

    Total plot creation time was 427.302 sec (7.1217 min)

    Total plot creation time was 427.709 sec (7.12849 min)

    Total plot creation time was 427.886 sec (7.13144 min)

    Total plot creation time was 427.442 sec (7.12403 min)

    Total plot creation time was 428.452 sec (7.14087 min)

    Total plot creation time was 427.775 sec (7.12959 min)

    Total plot creation time was 427.87 sec (7.13116 min)

    Total plot creation time was 427.185 sec (7.11975 min)

    Total plot creation time was 427.693 sec (7.12822 min)

    Total plot creation time was 427.96 sec (7.13267 min)

    Total plot creation time was 427.433 sec (7.12388 min)

    Total plot creation time was 428.32 sec (7.13866 min)

    Total plot creation time was 427.792 sec (7.12987 min)

    Total plot creation time was 427.922 sec (7.13203 min)

    Total plot creation time was 428.117 sec (7.13529 min)

    Total plot creation time was 427.427 sec (7.12379 min)

    Total plot creation time was 428.607 sec (7.14345 min)

    Total plot creation time was 427.904 sec (7.13173 min)

    Total plot creation time was 427.94 sec (7.13233 min)

    Total plot creation time was 428.058 sec (7.1343 min)

    Total plot creation time was 428.194 sec (7.13656 min)

    Total plot creation time was 427.753 sec (7.12922 min)

    Total plot creation time was 427.861 sec (7.13101 min)

    Total plot creation time was 427.842 sec (7.1307 min)

    Total plot creation time was 427.708 sec (7.12847 min)

    Total plot creation time was 427.709 sec (7.12849 min)

    Total plot creation time was 428.317 sec (7.13862 min)

    Total plot creation time was 428.166 sec (7.1361 min)

    Total plot creation time was 427.912 sec (7.13187 min)

    Total plot creation time was 427.964 sec (7.13273 min)

    Total plot creation time was 428.131 sec (7.13552 min)

    Total plot creation time was 428.296 sec (7.13826 min)

    Total plot creation time was 427.3 sec (7.12166 min)

    Total plot creation time was 427.685 sec (7.12808 min)

    Total plot creation time was 428.32 sec (7.13867 min)

    Total plot creation time was 427.722 sec (7.12871 min)

    Total plot creation time was 427.811 sec (7.13018 min)

    Total plot creation time was 427.547 sec (7.12579 min)

    Total plot creation time was 427.765 sec (7.12942 min)

    Total plot creation time was 427.593 sec (7.12655 min)

    Total plot creation time was 428.041 sec (7.13402 min)

    Total plot creation time was 427.807 sec (7.13012 min)

    Total plot creation time was 427.575 sec (7.12625 min)

    Total plot creation time was 427.15 sec (7.11917 min)

    Total plot creation time was 427.825 sec (7.13041 min)

    Total plot creation time was 428.326 sec (7.13877 min)

    Total plot creation time was 428.165 sec (7.13609 min)

    Total plot creation time was 427.641 sec (7.12736 min)

    Total plot creation time was 427.725 sec (7.12876 min)

    Total plot creation time was 427.901 sec (7.13168 min)

    Total plot creation time was 427.993 sec (7.13321 min)

    Total plot creation time was 428.288 sec (7.13813 min)

    Total plot creation time was 427.931 sec (7.13218 min)

    Total plot creation time was 427.693 sec (7.12822 min)

    Total plot creation time was 427.917 sec (7.13195 min)

    Total plot creation time was 428.137 sec (7.13562 min)

    Total plot creation time was 427.812 sec (7.13019 min)

    Total plot creation time was 428.146 sec (7.13576 min)

    Total plot creation time was 428.172 sec (7.13621 min)

    Total plot creation time was 428.115 sec (7.13525 min)

    Total plot creation time was 428.265 sec (7.13776 min)

    Total plot creation time was 427.96 sec (7.13266 min)

    Total plot creation time was 428.156 sec (7.13593 min)

    Total plot creation time was 427.918 sec (7.13197 min)

    Total plot creation time was 427.969 sec (7.13281 min)

    Total plot creation time was 428.227 sec (7.13712 min)

    Total plot creation time was 428.451 sec (7.14084 min)

    Total plot creation time was 428.687 sec (7.14479 min)

    Total plot creation time was 427.768 sec (7.12947 min)

    Total plot creation time was 428.57 sec (7.14283 min)

    Total plot creation time was 428.361 sec (7.13934 min)

    Total plot creation time was 428.23 sec (7.13716 min)

    Total plot creation time was 428.336 sec (7.13893 min)

    Total plot creation time was 427.49 sec (7.12484 min)

    Total plot creation time was 428.367 sec (7.13945 min)

    Total plot creation time was 427.726 sec (7.12877 min)

    Total plot creation time was 427.916 sec (7.13193 min)

    Total plot creation time was 428.466 sec (7.1411 min)

    Total plot creation time was 427.823 sec (7.13038 min)

    Total plot creation time was 428.426 sec (7.14043 min)

    Total plot creation time was 428.004 sec (7.1334 min)

    Total plot creation time was 427.94 sec (7.13234 min)

    Total plot creation time was 428.219 sec (7.13699 min)

    Total plot creation time was 428.371 sec (7.13951 min)

    Total plot creation time was 428.405 sec (7.14008 min)

    Total plot creation time was 428.515 sec (7.14192 min)

    Total plot creation time was 428.204 sec (7.13673 min)

    Total plot creation time was 428.64 sec (7.144 min)

    Total plot creation time was 427.726 sec (7.12877 min)

    Total plot creation time was 428.248 sec (7.13747 min)

    Total plot creation time was 428.496 sec (7.1416 min)

    Total plot creation time was 429.018 sec (7.15031 min)

    Total plot creation time was 428.259 sec (7.13766 min)

    Total plot creation time was 428.174 sec (7.13623 min)

    Total plot creation time was 428.185 sec (7.13642 min)

    Total plot creation time was 428.1 sec (7.135 min)

    Total plot creation time was 428.695 sec (7.14491 min)

    Total plot creation time was 428.059 sec (7.13431 min)

    Total plot creation time was 428.441 sec (7.14068 min)

    Total plot creation time was 428.726 sec (7.14543 min)

    Total plot creation time was 428.126 sec (7.13544 min)

    Total plot creation time was 427.914 sec (7.1319 min)

    Total plot creation time was 428.452 sec (7.14086 min)

    Total plot creation time was 428.667 sec (7.14446 min)

    Total plot creation time was 428.922 sec (7.14871 min)

    Total plot creation time was 429.12 sec (7.15201 min)

    Total plot creation time was 428.859 sec (7.14764 min)

    Total plot creation time was 428.949 sec (7.14914 min)

    Total plot creation time was 427.916 sec (7.13194 min)

    Total plot creation time was 428.983 sec (7.14972 min)

    Total plot creation time was 428.292 sec (7.13819 min)

    Total plot creation time was 428.54 sec (7.14233 min)

    Total plot creation time was 428.534 sec (7.14224 min)

    Total plot creation time was 428.367 sec (7.13944 min)

    Total plot creation time was 428.582 sec (7.14303 min)

    Total plot creation time was 428.381 sec (7.13968 min)

    Total plot creation time was 427.946 sec (7.13244 min)

    Total plot creation time was 428.326 sec (7.13877 min)

    Total plot creation time was 428.304 sec (7.13839 min)

    Total plot creation time was 427.939 sec (7.13232 min)

    Total plot creation time was 428.298 sec (7.13831 min)

    Total plot creation time was 428.146 sec (7.13576 min)

    Total plot creation time was 428.285 sec (7.13809 min)

    Total plot creation time was 429.039 sec (7.15065 min)

    Total plot creation time was 427.936 sec (7.13227 min)

    Total plot creation time was 428.29 sec (7.13816 min)

    Total plot creation time was 428.714 sec (7.14524 min)

    Total plot creation time was 428.088 sec (7.1348 min)

    Total plot creation time was 428.463 sec (7.14105 min)

    also ziemlich genau 7.13x Minuten (428s) pro K32 C19 plot

  • Olaf Krause November 19, 2023 at 11:44 AM

    Changed the title of the thread from “Grafikkarten zum Minen oder Rechnen” to “Grafikkarten zum Minen oder Rechnen - Graka in einem DL360 G8”.
  • hier mal die ersten Daten einer P2200

    5GB Speicher daher keine Abstürze mehr im -S2 mode vom Plotter wegen out of memory. Der Chip wird aber deutlich wärmer als auf einer 1050.

    Display Spoiler

    Total plot creation time was 452.436 sec (7.54061 min)

    Total plot creation time was 447.55 sec (7.45917 min)

    Total plot creation time was 447.67 sec (7.46117 min)

    Total plot creation time was 447.706 sec (7.46177 min)

    Total plot creation time was 447.632 sec (7.46054 min)

    Total plot creation time was 447.542 sec (7.45903 min)

    Total plot creation time was 446.777 sec (7.44629 min)

    Total plot creation time was 447.629 sec (7.46048 min)

    Total plot creation time was 448.508 sec (7.47513 min)

    Total plot creation time was 448.024 sec (7.46707 min)

    Total plot creation time was 447.932 sec (7.46553 min)

    Total plot creation time was 448.173 sec (7.46955 min)

    Total plot creation time was 447.16 sec (7.45267 min)

    Total plot creation time was 448.684 sec (7.47807 min)

    Total plot creation time was 447.501 sec (7.45834 min)

    Total plot creation time was 447.331 sec (7.45551 min)

    Die Karte ist trotz mehr Speichers deutlich langsamer. 7,4xmin contra 7.1xmin - OK 5% so super deutlich dann auch nicht. In Anbetracht, dass der geringe Speicher auf der 1050 ab und zu zum Absturz führt evtl. gar vernachlässigbar.

    hier ein paar technische Daten rechts die P2200: Vergleich 1050TI - P2200

    Anzahl der Shader-Prozessoren 768 1280
    Anzahl der CUDA-Transporter 768 keine Angaben
    Kernfrequenz 1291 MHz 1000 MHz
    Boost-Frequenz 1392 MHz 1493 MHz
    Anzahl der Transistoren 3,300 million 4,400 million
    Technologischer Herstellungsprozess 16 nm 16 nm
    Leistungsaufnahme (TDP) 75 Watt 75 Watt
    Max Temperatur 97 °C keine Angaben
    Texturiergeschwindigkeit 66.82 119.4
    Gleitkomma-Leistung 2,138 gflops keine Angaben

    aus den Daten würde man evtl. nicht schließen, dass es hier bei Chia Plot Erstellung kaum einen Unterschied gibt. Für die P2200 spricht klar 1slot design und 1GB mehr Speicher.

    Die P4 ist aus China unterwegs - ich bin mal gespannt was diese für eine Leistung erzielt. Vor allem auch ob der Zugewinn auf 8GB Speicher hier einen signifikanten Gewinn bringt. Die Frequenzdaten und das alter sprechen eher für die P2200.

  • Tesla P4 Karte ist angekommen, super klein - höchstens die Hälfte von einer P2200. Manko wird die passive Kühlung sein. Aber gut evtl. reicht die Gehäuselüftung bei der DL.

    Der Chip hat echt schnell 88C scheint um den Dreh rum aber zu bleiben, mal schauen ob die Karte da bleibt wegen Drosselung oder weil das wirklich die Balance zwischen notwendiger Leitung und Kühlung ist. Speicherverbrauch bei ca. 6GB - nutzt so dann leider die 8GB nicht aus. Evtl. kann man da noch was rauskitzeln.

    Nachtrag: nope! zumindest nicht für meine Anwendung, reicht dann knapp nicht - es wären mehr als 8GB notwendig.

    Hier die Performancemessung zum Vergleich

    Display Spoiler

    Total plot creation time was 422.552 sec (7.04253 min)

    Total plot creation time was 423.351 sec (7.05585 min)

    Total plot creation time was 419.66 sec (6.99433 min)

    Total plot creation time was 408.836 sec (6.81394 min)

    Total plot creation time was 411.982 sec (6.86637 min)

    Total plot creation time was 406.483 sec (6.77471 min)

    Total plot creation time was 403.489 sec (6.72482 min)

    Total plot creation time was 405.203 sec (6.75338 min)

    Total plot creation time was 395.618 sec (6.59364 min)

    Total plot creation time was 402.631 sec (6.71051 min)

    Total plot creation time was 396.258 sec (6.60429 min)

    Total plot creation time was 392.993 sec (6.54989 min)

    Also bisher die schnellste von den drei getesten Karten, Die Schwankungen kommen vermutlich vom Throttling wenn die Karte zu warm wird.

    • P4: <7min: 8GB Speicher stabil aber temp. throttling
    • 1050ti: 7,1min 4GB Speicher regelmäßige Crashes von daher effektive eher 7,5min
    • P2200: 7,4min 5GB Speicher stabil
  • Hier mal die getesteten Karten in Bilder

        

    Oben nach unten: 1050ti, P2200, TEsla P4

        

    1050ti, P2200, P4

    P4 Kühlerabdeckung entfernt sollte etwas besser kühlen im Gehäuseluftstrom.

  • Code
    Total plot creation time was 366.663 sec (6.11105 min)
    Total plot creation time was 364.336 sec (6.07227 min)
    Total plot creation time was 365.739 sec (6.09564 min)
    Total plot creation time was 365.094 sec (6.0849 min)
    Total plot creation time was 365.686 sec (6.09477 min)
    Total plot creation time was 365.31 sec (6.08849 min)

    nun ziemlich genau 6min pro plot und immer noch ~77C also ca. 10Grad weniger. -> Entfernen des Gehäuses und des Slotbleches hat geholfen.

Participate now!

Don’t have an account yet? Register yourself now and be a part of our community!