分享好友 看资讯首页 频道列表
比cpu快50倍?英伟达用rapids开启机器学习的想象力空间
2024-05-14 03:41    7934 来源:网络

在10月10日的英伟达gtc大会上,该公司发布了rapids开源gpu加速平台,对于这家以“硬件”为主要标签的公司来说,创始人黄仁勋在gtc大会上花了很大的篇幅来介绍这款软件产品,以及这款产品之所以被推出的背景。

在不久后,在英伟达北京办公室召开了一次媒体讲解会,亚太区解决方案架构高级总监赵立威,就这款gpu加速平台上市的市场背景和重点技术细节进行了详细的沟通。

容易被忽视的200亿美金市场

“在数据科学领域中,虽然近两年谈得比较多的是人工智能和深度学习,但机器学习市场相对于深度学习市场存在的时间更长,在长达十几到二十几年的发展过程中,如今将会爆发很大的市场价值,市场容量将会在200亿美金左右。”赵立威说,“如果把数据分析(大数据分析)市场作为hpc的一个细分领域,这个市场会更大,差不多应该会在360亿美金左右。”

另一方面,“数据驱动”成了越来越多企业用来增强自己核心竞争力的手段。例如亚马逊,有三分之一左右的采购行为,是通过系统来推荐的。类似的案例还发生在零售、保险、金融等各个领域。“现在一旦离开数据,离开所谓的大数据决策支持系统,很多商业行为已经变得不可想象。”

那么,为什么英伟达选择在这个时间点推出这样一款产品?笔者在媒体介绍会中,梳理了关于rapids的几个关键词:1.它是开源的;2.它是一个软件的平台;3.它是面向数据科学以及机器学习市场的。

数据科学家:不是在喝咖啡,就是在喝咖啡的路上,然而这种生活将被rapids所终结

数据科学家是一个全世界每个人都想做的工作。因为他们以前有很多时间喝咖啡。他们不是在喝咖啡,就是在去喝咖啡的路上。因为在数据准备的阶段,要把数据集宕下来,可能动不动就是g或t级别的很大一个数据包。下载之后需要进行处理,etl数据抽取、数据转换和数据加载的过程,这时候就可以喝咖啡去了,因为基于整个数据的加载和数据的计算过程是非常耗时的。但对于数据科学家来说,有很多时间可以享受悠闲的咖啡生活。但对于it manager或者企业管理者来说,就不是一件让人开心的事情了。当你希望从一个数据里面找到一个决策过程支持结果的时候,如果需要花几十个小时、几天甚至于几周时间的时候,这对于企业的决策者来说是不可想象的。“这些判断应该是秒级甚至毫秒级的,每一次判断,当滑动过程的时候,就应该已经判断好了。”赵立威说。

rapids软件平台帮助数据科学家显著提高了工作绩效,“数据分析和机器学习是高性能计算市场中最大的细分市场,不过目前尚未实现加速,“nvidia创始人兼首席执行官黄仁勋在gpu技术大会主旨演讲中发布rapids时表示,”全球最大的行业均在海量上运行机器学习算法,目的在于了解所在市场和环境中的复杂模式,同时迅速、精准地做出将直接影响其基础的预测。 “数据科学家使用加速服务以后,数据加载处理等部分的过程就会变得很短了。数据科学家可以参与到要发挥他的主观能动性的分析过程中,而因为gpu加速还可以提高分析精度。

据网了解,rapids已为gpu加速分析和机器学习提供了一整套开源库,数据可视化即将是下一个目标。rapids第一次为数据科学家提供了他们需要用来在gpu上运行整个数据科学管线的工具。最初的rapids基准分析利用了xgboost机器学习算法在nvidia dgx-2™ 系统上进行训练,结果表明,与仅有cpu的系统相比,其速度能加快50倍。这可帮助数据科学家将典型训练时间从数天减少到数小时,或者从数小时减少到数分钟,具体取决于其数据集的规模。

“开源”的两大含义

据了解,rapids构建于apache arrow、pandas和scikit-learn等流行的开源项目之上,为最流行的数据科学工具链带来了gpu提速。为了将更多的机器学习库和功能引入rapids,nvidia广泛地与开源生态系统贡献者展开合作 ,其中包括anaconda、blazingdb、databricks、quansight、scikit-learn、ursa labs 负责人兼apache arrow缔造者wes mckinney以及迅速增长的python数据科学库pandas等等。 而据赵立威介绍,开源有两大含义,除了rapids跟很多开源社区所保持的紧密合作关系,其次,rapids平台本身是开源的,“我们希望通过这种方式,可以有更多开源的朋友,来贡献他们的代码、分享智慧,不断的完善整个平台上面新的、丰富它的基础特性,未来服务更多的场景。”

另据了解,除了英伟达的dgx-2、dgx-1、dgx station,rapids还支撑多款基于hgx-1、hgx-2这两种架构的服务器产品。

来源:网络

以上是网络信息转载,信息真实性自行斟酌。

版权/免责声明:
一、本文图片及内容来自网络,不代表本站的观点和立场,如涉及各类版权问题请联系及时删除。
二、凡注明稿件来源的内容均为转载稿或由企业用户注册发布,本网转载出于传递更多信息的目的;如转载稿涉及版权问题,请作者联系我们,同时对于用户评论等信息,本网并不意味着赞同其观点或证实其内容的真实性。
三、转载本站原创文章请注明来源:中华厨具网

免责声明:

本站所有页面所展现的企业/商品/服务内容、商标、费用、流程、详情等信息内容均由免费注册用户自行发布或由企业经营者自行提供,可能存在所发布的信息并未获得企业所有人授权、或信息不准确、不完整的情况;本网站仅为免费注册用户提供信息发布渠道,虽严格审核把关,但无法完全排除差错或疏漏,因此,本网站不对其发布信息的真实性、准确性和合法性负责。 本网站郑重声明:对网站展现内容(信息的真实性、准确性、合法性)不承担任何法律责任。

温馨提醒:中华厨具网提醒您部分企业可能不开放加盟/投资开店,请您在加盟/投资前直接与该企业核实、确认,并以企业最终确认的为准。对于您从本网站或本网站的任何有关服务所获得的资讯、内容或广告,以及您接受或信赖任何信息所产生之风险,本网站不承担任何责任,您应自行审核风险并谨防受骗。

中华厨具网对任何使用或提供本网站信息的商业活动及其风险不承担任何责任。

中华厨具网存在海量企业及店铺入驻,本网站虽严格审核把关,但无法完全排除差错或疏漏。如您发现页面有任何违法/侵权、错误信息或任何其他问题,请立即向中华厨具网举报并提供有效线索,我们将根据提供举报证据的材料及时处理或移除侵权或违法信息。