BigDL有什么特性

介绍

本篇内容介绍了“BigDL有什么特性”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

<强>特性:

<李>

丰富的深度学习支持.BigDL模仿火炬,提供对深度学习的全方位支持,包括数值计算(通过张量)和高层次神经网络。此外,用户可以使用,BigDL将预训练的咖啡或火炬模型加载到火花程序中。

<李>

极其高的性能。为了达到高性能,BigDL在每个火花任务中使用英特尔MKL和多线程编程,因此,它比单节点至强上的开箱即用的,咖啡,火炬或TensorFlow快几个数量级。

<李>

有效地横向扩展。BigDL可以通过利用Apache火花以及高效实施同步SGD,全面减少火花,上的通信,有效地向外扩展,以“大数据规模”执行数据分析。

<强>使用场景:

<李>

你想要在在大数据云(Hadoop/火花)分析(存储在如HDFS, HBase,蜂巢上的)海量数据。

<李>

你想向你的大数据(火花)程序和/或工作流添加深度学习功能(训练或者预测)。

<李>

你想利用已有的Hadoop/火花,集群来运行深度学习程序,然后可以与其他工作负载动态共享(例如,ETL、数据仓库,功能引擎,经典机器学习,图像分析等)。

BigDL有什么特性