AI前沿PyTorch 指南:17个技巧让你的深度学习模型训练变得飞快! 如果你正在 pytorch 中训练深度学习模型,那么如何能够加快模型训练速度呢? 在本文中,我会介绍一些改动最小、影响最大的在pytorch中加速深度学习模型的方法。对于每种方法,我会对其思路进行简要介绍,然后预估提升速度并讨论其限制。我会... AI君 2年前 (2021-01-27) 29℃ 7喜欢
AI前沿如何在PyTorch和TensorFlow中训练图像分类模型 介绍 图像分类是计算机视觉的最重要应用之一。它的应用范围包括从自动驾驶汽车中的物体分类到医疗行业中的血细胞识别,从制造业中的缺陷物品识别到建立可以对戴口罩与否的人进行分类的系统。在所有这些行业中,图像分类都以一种或另一种方式使用。他们是如... AI君 3年前 (2020-10-27) 42℃ 1喜欢
AI前沿调参侠看过来!两个提高深度学习训练效率的绝技 1. 训练的瓶颈在哪里 GPU利用率低:模型训练时GPU显存沾满了,但是GPU的利用率比较不稳定,有时候0%,有时候90%,忽高忽低。 训练的数据量大:训练数据大,在百万/千万的量级,训练一个Epoch需要很长时间,模型... AI君 3年前 (2020-09-23) 49℃ 0喜欢
AI前沿DevOps二三事:用持续集成构建自动模型训练系统的理论和实践指南 本文转载自公众号“读芯术”(ID:AI_Discovery)。 近几年来,机器学习飞速发展,开展机器学习试验变成小事一桩。有了scikit-learn和Keras这样的资源库,只需几行代码,就能创建模型。 然而,把数据科学项目转变成有意义的... AI君 3年前 (2020-08-10) 47℃ 0喜欢
AI前沿机器学习模型训练全流程! 周末在家无聊闲逛github,发现一个很有趣的开源项目,作者用手绘图的方式讲解了机器学习模型构建的全流程,逻辑清晰、生动形象。同时,作者也对几张图进行了详细的讲解,学习之后,收获很多,于是将其翻译下来,和大家一起学习。 地址:https:... AI君 3年前 (2020-08-10) 49℃ 1喜欢
AI前沿PyTorch如何加速数据并行训练?分布式秘籍大揭秘 在芯片性能提升有限的今天,分布式训练成为了应对超大规模数据集和模型的主要方法。本文将向你介绍流行深度学习框架 PyTorch 最新版本( v1.5)的分布式数据并行包的设计、实现和评估。 论文地址:https://arxiv.org... AI君 3年前 (2020-07-13) 54℃ 0喜欢
AI前沿人工智能训练师这一职业它到底香不香呢? 即将开播:4月29日,民生银行郭庆谈商业银行金融科技赋能的探索与实践 人工智能大家都知道,但是对于人工智能训练师你又了解多少呢? 近年来,人工智能技术的加快应用让人们的工作效率大大提升、行业转型升级步伐不断加快。在这背后,离不开人工智能训... AI君 3年前 (2020-04-28) 57℃ 0喜欢
AI前沿10倍!微软开源史上最大NLG模型,可训练1000亿参数的模型 人工智能的最新趋势是,更大的自然语言模型可以提供更好的准确性,但是由于成本、时间和代码集成的障碍,较大的模型难以训练。 微软日前开源了一个深度学习优化库 DeepSpeed,通过提高规模、速度、可用性并降低成本,可以在当前一代的 GPU 集... AI君 3年前 (2020-02-24) 383℃ 1喜欢
AI前沿将sklearn训练速度提升100多倍,美国「返利网」开源sk-dist框架 在本文中,Ibotta(美国版「返利网」)机器学习和数据科学经理 Evan Harris 介绍了他们的开源项目 sk-dist。这是一个分配 scikit-learn 元估计器的 Spark 通用框架,它结合了 Spark 和 scikit... AI君 4年前 (2019-09-26) 354℃ 0喜欢
AI前沿制定机器学习训练数据策略的6个技巧 人工智能(AI)和机器学习(ML)如今已经十分常见。AI指的是机器模仿人类进行认知的概念,ML是一种用于构建AI的方法。如果AI是指计算机可以根据指令执行一组任务,那么ML就是机器从数据中摄取、解析和学习的能力,以便更精确地完成任务。 汽车... AI君 4年前 (2019-09-03) 246℃ 1喜欢
AI前沿滴滴开源自然语言理解模型训练平台DELTA 当地时间7月28日至8月2日,自然语言处理领域顶级会议ACL2019在意大利佛罗伦萨召开,会上滴滴正式宣布开源基于深度学习的语音和自然语言理解模型训练平台DELTA,以进一步帮助AI开发者创建、部署自然语言处理和语音模型,构建高效的解... AI君 4年前 (2019-08-03) 562℃ 1喜欢
AI前沿半天2k赞火爆推特,李飞飞高徒发布33条神经网络训练秘技 本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 同学,现在有一份33条神经网络训练秘笈,摆在你面前。 AI大佬Andrej Karpathy (简称AK) ,刚刚发布了一篇长长长长博客,苦口婆心地列举了33条... AI君 4年前 (2019-04-28) 494℃ 3喜欢