如果跑大模型,对显存的大小有要求。另外如果是 windows 下需要 Nvidia 的显卡。先谢谢了。自己知道的有配台 Windows 台式机或 Mac Mini ,不知道还有没有其他方式。
如果跑大模型,对显存的大小有要求。另外如果是 windows 下需要 Nvidia 的显卡。先谢谢了。自己知道的有配台 Windows 台式机或 Mac Mini ,不知道还有没有其他方式。
|
1
emmm 或许是 intel 核显跑 pytorch 吧,然后插 32 G 内存条
|
|
kidljNov 5, 2023
2
找一个大模型算法工程师的工作 :doge:
|
|
FlashEchoNov 5, 2023
3
在 GPU 云(比如 autodl )上租个 A100 ,因为看上去不是专业用途,个人用户自己玩玩的话,还是租比较合算,A100 大概每小时 6 块钱
担心不会用浪费时长,可以去 paperspace 买个包月会员 |
|
RiESANov 5, 2023
4
|
|
5
4060ti 16g 2
|
|
1KTN90lKW9gVJ9vXNov 5, 2023 via iPhone
6
把内存分配给显存用、弄个 512g 显存🤔
|
|
em70Nov 5, 2023
7
阿里云已经停售 A100 了,现在 32G 显存最便宜的方法是买 macbook m1 max 32G,京东大概 2 万左右,比买 4090 划算
|
|
yummysakkoNov 5, 2023
8
sxm2 的 V100 吧
|
|
icyalalaNov 5, 2023
9
本地跑的话,Mac Studio 64GB 内存,RTX8000 48G 显存,都是两万上下?
|
|
10
超过 24g 就不存在游戏卡了,大模型训练都是多路计算卡,楼上 RTX8000 也算实惠的了,或者 3.7w 的 A100 40G
我觉得你如果还不清楚自己的需求话不如先租服务器试一下? |
|
11
不考虑速度的情况下,mac 确实是一个性价比之选
|
|
lithiumiiNov 5, 2023 via Android
12
能多卡的话就买老卡呗
|
|
bihuiNov 5, 2023
13
4060 16g 不够用吗?
|
|
14
如果不限定操作系统的话,MacBook 好像不错
|
|
sketcherlyNov 6, 2023
16
如果只是玩的话可以找一些租显卡的服务,可以看下我之前用过的这个,为了避免广告嫌疑 base64 aHR0cHM6Ly9tYXRwb29sLmNvbS8K ,或者顺着这个思路找个同类产品
|