Nova paradigma - hardware inequality

[Nemoguća Могућност]

Hoce li samo najveci imati dovoljno hardvera da teraju AI?
Sta ce biti sa manjima, istrazivacima i slicnima koji nemaju pristup odgovarajucem hardveru?

 

[Nemoguća Могућност]

situacija je sledeca:

Training frontier models like GPT-4 or Gemini can take:

• Thousands of GPUs
• Millions of dollars in compute
• Months of time