Artificial Intelligence GPUs Latest news

RTX 4090D with 48 GB and RTX 4080 with 32 GB: Chinese AI companies rely on more VRAM

The rapid increase in demand for computing power in the field of artificial intelligence (AI) has led to innovative solutions in China. To meet the growing demands, Chinese companies are modifying NVIDIA’s GeForce RTX 40 series graphics processing units (GPUs) and equipping them with expanded video memory (VRAM). These modifications are particularly popular with cloud computing providers who rent high-performance hardware for AI applications to their customers.

A striking example of these modifications is the NVIDIA GeForce RTX 4090D, whose VRAM has been expanded to 48 GB GDDR6X memory. These GPUs are rented out by Chinese cloud service providers for just USD 0.03 per hour. Another modified GPU, the GeForce RTX 4080 SUPER with 32 GB of memory, is also available for both rental and purchase. Modifying GPU VRAM is not a new practice. Such modifications have been made in the past to increase performance – often at comparatively low cost. One example of this is the NVIDIA GeForce RTX 2080 Ti, whose VRAM was doubled to 22 GB by modders to meet the requirements of the AI market. Now this modding practice also seems to have reached the latest GeForce RTX 40 “Ada Lovelace” GPUs.

According to a Chinese AI expert, modified GeForce RTX 4090D and RTX 4080 SUPER GPUs are circulating in the region. These GPUs are particularly in demand from cloud computing providers who rent out their computing power to meet the increasing demand in the market. The modified GeForce RTX 4080 SUPER, which can be rented for just USD 0.03 per hour, offers remarkable value for money. The modified GeForce RTX 4090D 48 GB is also an interesting option for purchase: it is reportedly available on the domestic market for around 2,500 US dollars. In comparison, the RTX 6000 “Ada”, which also offers 48 GB of memory, costs around 7,000 US dollars, making the modified versions attractively priced.

source: 青龍聖者 via X

Exactly how these modified GPUs are created remains unclear, as such operations are carried out in secret. So far, no images of the modified models have been published. However, it is believed that the modders were able to design a PCB that can accommodate 24 GDDR6X modules on the GeForce RTX 4090D. In the past, Chinese factories have been observed disassembling NVIDIA gaming GPUs to fit them with new PCBs and cooling systems better tailored to large-scale AI operations. These measures were taken after the US government announced it would restrict the export of AI accelerators from NVIDIA to China. It would be interesting to see what the modified GPUs look like in detail, especially the solutions to the challenges that come with such a large VRAM on a GPU. The cooling system that has to support these powerful components should also be of particular interest.

The fact that these modified GPUs are not available outside of China, as access to the applications requires a local number and identification, underlines the exclusivity of these offerings. Nevertheless, China is once again demonstrating its innovative strength in the technological field, particularly by adapting and modifying existing hardware for specialized applications such as AI development. China thus remains a pioneer when it comes to finding new ways to meet growing technological demands, be it through modding capabilities or other technological developments.

Source: 青龍聖者 via X

Kommentar

Lade neue Kommentare

H
HabeLeiderKeinLabor

Veteran

181 Kommentare 145 Likes

Das wären 72 cents pro Tag. Das kann unmöglich stimmen. Damit ist noch nicht mal der Strom für den Betrieb gedeckt.
Vielleicht pro Minute, das wären dann 43,2$ pro Tag.

Antwort 1 Like

Asghan

Mitglied

23 Kommentare 15 Likes

Laut https://de.statista.com/statistik/daten/studie/13020/umfrage/strompreise-in-ausgewaehlten-laendern/ beträgt der Preis pro kWh in China durchschnuttlich nur 8 US-Cent. Und das ist der Preis für Privathaushalte. Industrie demnach noch billiger. Aber hast du ja sicher vorab auch schon geschaut?
Das kommt schon hin mit 72 Cent pro Tag.

Antwort Gefällt mir

H
HabeLeiderKeinLabor

Veteran

181 Kommentare 145 Likes

Hahaha 😆 nee, sorry.

Sagen wir 300W Verbrauch * 24h = 7kWh
7 * 8 = 56cent
72 - 56 = 16 cent pro Tag

Für 16 cent pro Tag Gewinn, vermietet noch nicht mal der Weihnachtsmann eine +1000$ GPU in einem Rechenzentrum 😉

Kannst ja mal bei Hetzner schauen, was du für nicht mal drei Euro im Monat mieten kannst 😄

Naja, ich würde die Artikel von Samir in Zukunft erst gegenlesen lassen. Ist ja nicht das erste mal, dass ein Artikel von ihm völlig daneben ist. Immerhin den Text einmal kurz durch mentor.duden.de jagen (anstelle von sinnlosen Ki Bildern) wäre ein Anfang.

Antwort 4 Likes

Asghan

Mitglied

23 Kommentare 15 Likes

8cent für Privatnverbaucher wie gesagt... Industrie dürfte dann irgendwo bei 3-4 cent sein.
Und nun Rechne nochmal :D

Antwort Gefällt mir

H
HabeLeiderKeinLabor

Veteran

181 Kommentare 145 Likes

Du bist süss 😘 Lass mich raten, du bist jung und hast noch nie gearbeitet. Kleiner Tipp: Der Strom könnte auch 0 cent sein 😊

Antwort Gefällt mir

Asghan

Mitglied

23 Kommentare 15 Likes

Nette kleine Unterstellung hier. Und willkommen auf meiner Ignoliste damit :)

Antwort 2 Likes

FfFCMAD

Urgestein

710 Kommentare 210 Likes

Vielen Dank für das Erweitern meiner Blacklist.

Antwort 1 Like

Megaone

Urgestein

1,873 Kommentare 1,780 Likes

Vielleicht ist das ja die Miete für die Hardware und Strom geht on Top? Aber ist das am Ende wichtig? Auf alle Fälle sieht man mal wieder, das man China nicht unterschätzen darf. Der Wohlstand in good old Europe wird schneller schmelzen wie ein Schneeball in der Hölle. Lass uns mal 10-15 Jahre weiter sein.

Antwort 2 Likes

Dr4x

Mitglied

64 Kommentare 45 Likes

Gewinn = Erlös - Kosten...

Antwort 1 Like

M
Midnight Angel

Mitglied

36 Kommentare 21 Likes

Wie jetzt; hat immer noch kein Gamer gepostet, der wissen will, ob es eine Importquelle gibt?

(ich mus weg)

Antwort 3 Likes

P
Phelan

Veteran

205 Kommentare 185 Likes

Reine Vermutung.
Die vermieten die Karte an mehrere Nutzer gleichzeitig. Deswegen der viele Ram, damit mehrere Nutzer gleichzeitig darauf Jobs laufen lasen können ohne das es langsame Zugriffe auf den Haupt-RAM entstehen. Auf dne Karten wird ja nicht gespielt, sondern dalaufen "Berecuhnungs-Jobs".

Die Karten laufen auch üblicherweise nicht am Maxperformance spot sondern am Effizienzspot. Eine 4090D wird da in der Praxis imo eher nur bei 150-200W Verbrauch liegen.

Wenn die 1.000 solche Karte haben, buchen die mit Lastmanagment locker 3.000-10.000 Nutzer gleichzeitig.

Antwort 1 Like

Onkel-Föhn

Veteran

106 Kommentare 60 Likes

Hallo ! NV mit 48 GB !!! Wer soll sich so was leisten können ?!? ;)

Antwort Gefällt mir

Megaone

Urgestein

1,873 Kommentare 1,780 Likes

Und vor allem Dingen leisten wollen? Kurz vor Relase der 5090 und mit fragwürdigem nutzen?

Antwort 1 Like

Martin Gut

Urgestein

8,044 Kommentare 3,759 Likes

Das habe ich auch schon mehrfach erwähnt und gemeldet, dass die Artikel von Samir nie zu lesen wert sind. Echt, da war noch nie was brauchbares drin und dem entsprechend gibt es auch nichts schlaues darüber zu diskutieren. Das scheint hier aber einfach dazu zu gehören, dass jemand solchen Unsinn im Namen der Redaktion posten kann. Wenn nie von der Redaktion reagiert wird, bleibt das eben so. Mehr als wegklicken sobald man Samir als Unterschrift sieht, kann man da nicht machen.

Antwort 4 Likes

Megaone

Urgestein

1,873 Kommentare 1,780 Likes

Ich versteh dieses Gebashe echt nicht. Ich freu mich über jeden, der hier schreibt. Und ansonsten Igor anrufen und einfach mitmachen wenn man es soviel besser kann. Das ist übrigens ernst gemeint. Der schlechteste Artikel auf Igorlab ist immer noch 100x besser, als alles was 99,9% der sogenannten Influencer sich aus Ihren Hirnrinden quetschen und zahlen muss ich dafür auch nix.

Antwort 1 Like

Martin Gut

Urgestein

8,044 Kommentare 3,759 Likes

Na, ja. Etwas höher sind meine Ansprüche schon. Igor anrufen und selbst was schreiben? Ja, habe ich auch schon gemacht. Das war eine gute Erfahrung und ich hoffe, der Artikel hat schon ein paar Leuten geholfen. Jedenfalls hat es mir schon manche Schreibarbeit abgenommen, auf meinen Artikel verweisen zu können. Manche Themen sind immer wieder mal gefragt.

Antwort 4 Likes

Opa-Chris

Mitglied

90 Kommentare 126 Likes

Deine Ansprüche in Ehren, aber erlaube mir doch bitte eine Frage: zahlst Du für Samirs Beiträge?
Falls nicht, habe ich für dieses Gebashe mittlerweile auch kein Verständnis mehr.
Deine Meinung hattest Du bereits kundgetan, das sollte doch eigentlich reichen.

Sortiere doch einfach Samirs Beiträge für dich unter "Ignor'sLab" und gut ist.
Dann musst Du dich auch nicht mehr aufregen.

Antwort 2 Likes

H
HabeLeiderKeinLabor

Veteran

181 Kommentare 145 Likes

Sorry @Asghan, falls du dich beleidigt fühlst.
Aber tut mir echt leid, jugendliche Naivität ist noch meine harmloseste Unterstellung.
Solltest du nicht minderjährig und berufstätig sein, bist du naiv oder ignorant oder dumm oder postest ins Forum ohne auch nur eine Sekunde deine grauen Zellen einzuschalten.

Überleg mal, selbst wenn du im Disney Fantasy Land lebst, dein Vater gehört Hetzner, der gibt dir kostenlos Rackspace. Deine Mutter gehört Worldline, die macht dir kostenlos die Zahlungen, deine Tante macht dir kostenlos deinen administrativen Aufwand und dein Onkel das Marketing.
Jen-Hsun Huang ist ein guter Kollege von dir, er gibt dir eine 4090 zum Spottpreis von 1000$.
Du musst also einzig und alleine 1000$ pro Karte investieren.

Rechne mal aus, was dein ROI ist bei 1000$ Investition und 72cent Einkommen pro Tag.
Sind ca. 3.8 Jahre bis break even.
Klingt das realistisch für dich?

Antwort 1 Like

H
HabeLeiderKeinLabor

Veteran

181 Kommentare 145 Likes

Ich nicht. Qualität über Quantität.
Ich kann einen Film auch als schlecht beurteilen ohne selbst Regisseur zu sein.
YT ist so kostenlos wie Igors Lab. Und viele Influencer liefern bessere Artikel als Samir.
Bei einigen Artikel bin ich mir noch nicht mal sicher ob das
A: wirklich von einem Mensch und nicht einer KI geschrieben wurde
B: wirklich ein Artikel ist und nicht der Text einer Pressemitteilung des Herstellers.

Ich meine auch der Cybenetics Artikel, da steht Zitat:
Was ist das? Oben steht "News" ich würde das ja eher als bezahlte Werbung bezeichnen.
Influencer sind wenigstens so ehrlich und kennzeichnen ihre bezahlte Werbung.

Antwort 1 Like

Danke für die Spende



Du fandest, der Beitrag war interessant und möchtest uns unterstützen? Klasse!

Hier erfährst Du, wie: Hier spenden.

Hier kannst Du per PayPal spenden.

About the author

Samir Bashir

Werbung

Werbung