介绍梯度下降算法是工业中最常用的机器学习算法之一，但也是很多新手难以理解的算法之一。如果你刚刚接触机器学习，那么梯度下降算法背后的数学原理是比较难理解的。在本文中，我将帮...

介绍在这篇文章中,我们将了解什么是真正的梯度下降法,为什么它成为非常流行的机器学习算法,为什么AI和ML中的大多数算法都遵循这种技术。柯西在1847年提出了梯度下降算法,...

在今年的GTC大会上，英伟达CEO黄仁勋邀请了Transformer的七位作者（Niki Parmar因故临时未能出席）参与圆桌论坛的讨论，这是Transformer团队...

梯度下降是有时会吓到初学者和从业者的话题之一。大多数人在听到梯度这个词时,他们试图在不了解其背后的数学的情况下完成该主题。本文,将从一个非常基础的层面解释梯度下降,并用简...

介绍人工神经网络是受人类神经元工作启发的计算系统。它是深度学习的支柱，在几乎所有领域取得了更大的里程碑，从而带来了我们解决问题的进化。因此，每个有抱负的数据科学家和机器学...

在CVPR 2020上，刘祥龙老师团队提出了一种旨在优化前后向传播中信息流的实用、高效的网络二值化新算法IR－Net。本文首次从统一信息的角度研究了二值网络的前向和后向传...

深度学习这一想法本身并不新颖，早在1959年就被讨论过。当时受限于算法、硬件水平及数据量的限制，没有得到很好的发展。近60年，随着硬件水平的不断提升，数据量的爆炸式增长，...

2012年多伦多大学的研究人员首次使用深度学习在ImageNet大规模视觉识别挑战赛中获胜，深度学习渐渐被人们所熟知。而对于AI行业的从业者来说，深度学习下的计算机视觉，...

?人工智能机器学习有关算法内容，请参见公众号“科技优化生活”之前相关文章。人工智能之机器学习主要有三大类:1)分类;2)回归;3)聚类。今天我们重点探讨一下ICA算法。

前言：人工智能机器学习有关算法内容，请参见公众号之前相关文章。人工智能之机器学习主要有三大类：1）分类；2）回归；3）聚类。今天我们重点探讨一下回归模型（RM）。

近日，中国工程物理研究院应用电子学研究所报道了四路板条激光的相干合成，输出功率达到400W。

在主振荡功率放大器结构的光纤激光相干合成系统中，模拟了随机并行梯度下降(SPGD)算法校正七路激光阵列间时变倾斜相差的动态过程，分析了不同倾斜相差幅值和频率对校正能力的影...

在互联网红利基本散尽的时代，未来到底属于web3、元宇宙，还是碳中和？到底什么样的革命性技术可以引领人类社会走出经济衰退、疫情和战争的影响，并将全球经济体量再向上推动数十...

导言:  自2012年AlexNet在ImageNet比赛上获得冠军,卷积神经网络逐渐取代传统算法成为了处理计算机视觉任务的核心。  在这几年,研究人...

前言:归一化相关技术已经经过了几年的发展,目前针对不同的应用场合有相应的方法,在本文将这些方法做了一个总结,介绍了它们的思路,方法,应用场景。主要涉及到:LRN,BN,L...

如果我们将今天基于深度学习的目标检测技术比作一场“热兵器革命”，那么回顾20年前的技术时即可窥探“冷兵器”时代的智慧。

在这篇文章中，我们将去学习神经网络的基础知识。

在CVPR 2020上，商汤研究院链接与编译团队、高性能计算团队和北航刘祥龙老师团队合作提出了用于加速卷积神经网络训练过程的INT8训练技术。该工作通过将网络的输入、权重...

导 读
大家好，今天介绍的是暑期我在微软实习期间主要做的工作，关于自然语言模型对抗训练的问题，也就是使用更好的对抗训练的方式增强transformer－...

前言：人工智能机器学习有关算法内容，人工智能之机器学习主要有三大类：1）分类；2）回归；3）聚类。今天我们重点探讨一下GAN算法。