面向 Apache Spark 上 BigDL 的英特尔® 精选解决方案

在经过优化、经过验证的基础设施上加快并简化深度学习开发和部署。
查看解决方案简介 ›

面向 Apache Spark 上 BigDL 的英特尔® 精选解决方案的基本配置

组件

面向 Apache Spark 上 BigDL 的英特尔精选解决方案
基本配置

至少一个主节点

处理器

英特尔® 至强® 金牌 6148 处理器(2.40 GHz、20 个内核、40 个线程)、英特尔® 至强® 金牌 6248 处理器(2.5 GHz、20 个内核)或者编号更大的英特尔® 至强® 可扩展处理器

内存

192 GB 或更大 (12 x 16 GB DDR4-2666)

引导驱动器**

1 个 240 GB 或更大的英特尔® 固态盘 DC S4500/S4510(M.2 或 2.5 英寸)或更高档次

每节点的存储 HBA 控制器**

不适用 (N/A)

数据层

4 个 960 GB 或更大的英特尔数据中心级 S4500/S4510 或更高系列固态盘

数据网络

10 Gb 英特尔® 以太网融合网络适配器 X722(英特尔® 以太网 CNA X722)

每个节点的管理网络

集成 1 GbE 端口 0/RMM 端口

至少四个工作节点

处理器

英特尔至强金牌 6148 处理器(2.40 GHz,20 个内核,40 个线程),英特尔至强金牌 6248 处理器(2.5 GHz,20 个内核)或编号更高的英特尔至强可扩展处理器

内存

384 GB 或更大 (12 x 32 GB DDR4-2666)

引导驱动器**

1 个 240 GB 或更大的英特尔数据中心级 S4500/S4510(M.2 或 2.5 英寸)或更高系列固态盘

每节点的存储 HBA 控制器**

不适用

数据层

4 个 3.8 TB 或更大的英特尔数据中心级 S4500/S4510 或更高系列固态盘

数据网络

10 Gb 英特尔以太网融合网络适配器 X722(英特尔以太网 CNA X722)

每个节点的管理网络

集成 1 GbE 端口 0/RMM 端口

网络交换机

架顶 (ToR) 交换机

10 Gbps 48x 端口交换机

管理交换机

1 Gbps 48x 端口交换机

软件

Linux 操作系统

CentOS Linux 7.5.1804 版或 Red Hat Enterprise Linux* (RHEL*) 7

Apache Spark

2.2.0

Apache Hadoop

2.7.3

Java 开发套件 (JDK)

Oracle JDK 1.8.0 更新 181 或更高版本

BigDL

0.6

Analytics Zoo

0.2

英特尔® Distribution Python* 版

2.7

英特尔® 数学内核程序库(英特尔® MKL)

英特尔 MKL 2018 版更新 3

适用于所有节点

可信平台模块 (TPM)

TPM 1.2 离散或固件 TPM(英特尔® 平台可信技术 [英特尔® PTT])

固件和软件优化

启用英特尔® 卷管理设备(英特尔® VMD)**

启用英特尔® Boot Guard**

启用英特尔® 超线程技术(英特尔® HT 技术)

已启用英特尔® 睿频加速技术

启用 P 状态**

启用 C 状态**

电源管理设置设为性能**

工作负载配置设为已平衡**

启用内存延迟检测器 (MLC) 流转化器**

启用 MLC 空间预先提取**

启用数据缓存单元 (DCU) 数据预先提取**

启用 DCU 指令预先提取**

禁用最后一级高速缓存 (LLC) 预先提取**

启用非内核频率缩放**

最低性能标准

经过验证可达到或超过以下最低性能:

ImageNet 培训吞吐量

每秒 375 幅图像,85% 或更高的前五准确率1
**建议,但不是必需

产品和性能信息

1

性能结果基于 2018 年 10 月 10 日的测试,并且可能无法反映所有公开的安全更新。有关详细信息,请参见配置信息披露。没有任何产品能保证绝对安全。配置:一个主节点:2 个英特尔® 至强® 金牌 6148 处理器,英特尔® 服务器主板 S2600WFT,总内存:192 GB,12 个插槽/16 GB/2,666 次兆传输/秒 (MT/s) DDR4 RDIMM,英特尔® 超线程技术(英特尔® HT 技术)禁用,英特尔® 睿频加速技术启用;存储(启动):1 个 240 GB 英特尔® 固态盘 DC S4500;存储:4 个 960 GB 英特尔® 固态盘 DC S4500;网络设备:1 个 10 Gb 英特尔® 以太网网络适配器 X722,网络速度:10 GbE,ucode:0x043,操作系统/软件:CentOS* Linux 版本 7.5.1804;四个工作节点:2 个英特尔® 至强® 金牌 6148 处理器,英特尔® 服务器主板 S2600WFT,总内存:384 GB,12 个插槽/32 GB/2,666 次兆传输/秒 (MT/s) DDR4 RDIMM,英特尔® HT 技术禁用,英特尔® 睿频加速技术启用;存储(启动):1 个 240 GB 英特尔® 固态盘 DC S4500;存储:4 个 3.8 TB 英特尔® 固态盘 DC S4500;网络设备:1 个 10 Gb 英特尔® 以太网网络适配器 X722,网络速度:10 GbE,ucode:0x043,操作系统/软件:CentOS* Linux 版本 7.5.1804。