推理加速型Pi1
Pi1型彈性 云服務(wù)器 采用專為AI推理打造的NVIDIA Tesla P4 GPU,能夠提供超強(qiáng)的實(shí)時(shí)推理能力。Pi1型彈性云服務(wù)器借助P4的INT8運(yùn)算器,能夠?qū)⑼评硌訒r(shí)降低15倍。配備硬件解碼引擎,能夠同時(shí)支持35路高清視頻流的實(shí)時(shí)轉(zhuǎn)碼與推理。
|
規(guī)格名稱 |
vCPU |
內(nèi)存(GB) |
最大帶寬/基準(zhǔn)帶寬(Gbps) |
最大收發(fā)包能力(萬PPS) |
網(wǎng)卡多隊(duì)列數(shù) |
GPU |
顯存(GB) |
本地盤 |
虛擬化類型 |
|---|---|---|---|---|---|---|---|---|---|
|
pi1.2xlarge.4 |
8 |
32 |
5/1.6 |
40 |
2 |
1×P4 |
1×8GB |
- |
KVM |
|
pi1.4xlarge.4 |
16 |
64 |
8/3.2 |
70 |
4 |
2×P4 |
2×8GB |
- |
KVM |
|
pi1.8xlarge.4 |
32 |
128 |
10/6.5 |
140 |
8 |
4×P4 |
4×8GB |
- |
KVM |
Pi1型彈性云服務(wù)器功能如下:
-
支持NVIDIA Tesla P4 GPU卡,單實(shí)例最大支持4張P4 GPU卡
-
提供GPU硬件直通能力
-
單GPU單精度計(jì)算能力最高5.5 TFLOPS
-
單GPU INT8計(jì)算能力最高22 TOPS
-
單GPU提供8GB ECC顯存,帶寬192GB/s
-
GPU內(nèi)置硬件視頻編解碼引擎,能夠同時(shí)進(jìn)行35路高清視頻解碼與實(shí)時(shí)推理
常規(guī)支持軟件列表
Pi1實(shí)例主要用于GPU推理計(jì)算場(chǎng)景,例如圖片識(shí)別、 語音識(shí)別 等場(chǎng)景。
常用的軟件支持列表如下:
-
Tensorflow、Caffe、PyTorch、MXNet等深度學(xué)習(xí)框架
推理加速型Pi2
Pi2型彈性云服務(wù)器采用專為AI推理打造的NVIDIA Tesla T4 GPU,能夠提供超強(qiáng)的實(shí)時(shí)推理能力。Pi2型彈性云服務(wù)器借助T4的INT8運(yùn)算器,能夠提供最大130TOPS的INT8算力。Pi2也可以支持輕量級(jí)訓(xùn)練場(chǎng)景。
|
規(guī)格名稱 |
vCPU |
內(nèi)存(GB) |
最大帶寬/基準(zhǔn)帶寬(Gbps) |
最大收發(fā)包能力(萬PPS) |
網(wǎng)卡多隊(duì)列數(shù) |
GPU |
顯存(GB) |
本地盤 |
虛擬化類型 |
|---|---|---|---|---|---|---|---|---|---|
|
pi2.2xlarge.4 |
8 |
32 |
10/4 |
50 |
4 |
1×T4 |
1×16GB |
- |
KVM |
|
pi2.4xlarge.4 |
16 |
64 |
15/8 |
100 |
8 |
2×T4 |
2×16GB |
- |
KVM |
|
pi2.8xlarge.4 |
32 |
128 |
25/15 |
200 |
16 |
4×T4 |
4×16GB |
- |
KVM |
Pi2型彈性云服務(wù)器功能如下:
-
支持NVIDIA Tesla T4 GPU卡,單實(shí)例最大支持4張T4 GPU卡
-
提供GPU硬件直通能力
-
單GPU單精度計(jì)算能力最高8.1 TFLOPS
-
單GPU INT8計(jì)算能力最高130 TOPS
-
單GPU提供16GB GDDR6顯存,帶寬300GB/s
-
內(nèi)置1個(gè)NVENC和2個(gè)NVDEC
常規(guī)支持軟件列表
Pi2實(shí)例主要用于GPU推理計(jì)算場(chǎng)景,例如圖片識(shí)別、語音識(shí)別等場(chǎng)景。也可以支持輕量級(jí)訓(xùn)練場(chǎng)景。
常用的軟件支持列表如下:
-
Tensorflow、Caffe、PyTorch、MXNet等深度學(xué)習(xí)框架。