深度学习的实践与发展——杰弗里·辛顿在人工智能领域留下的遗产
杰弗里·辛顿被誉为“人工智能之父”。 我们刚刚在 freeCodeCamp.org 的YouTube频道上发布了一门课程,这门课程通过重现杰弗里·辛顿的开创性研究成果,帮助您掌握现代神经网络的相关知识。该课程涵盖了他的主要论文,让您能够了解这些理念是如何在几十年的发展过程中逐渐演变的——从玻尔兹曼机、反向传播算法,到深度信念网络、t-SNE技术、AlexNet模型、Dropout机制、知识蒸馏技术、胶囊网络、层归一化方法,以及前向传播算法等等。 在这门时长为27小时的课程中,穆罕默德·阿布拉赫将会详细解释每项研究背后的动机、所解决的问题、论文中提出的核心理念,并将这些理论与使用PyTorch实
杰弗里·辛顿被誉为“人工智能之父”。
我们刚刚在freeCodeCamp.org的YouTube频道上发布了一门课程,这门课程通过重现杰弗里·辛顿的开创性研究成果,帮助您掌握现代神经网络的相关知识。该课程涵盖了他的主要论文,让您能够了解这些理念是如何在几十年的发展过程中逐渐演变的——从玻尔兹曼机、反向传播算法,到深度信念网络、t-SNE技术、AlexNet模型、Dropout机制、知识蒸馏技术、胶囊网络、层归一化方法,以及前向传播算法等等。
在这门时长为27小时的课程中,穆罕默德·阿布拉赫将会详细解释每项研究背后的动机、所解决的问题、论文中提出的核心理念,并将这些理论与使用PyTorch实现的实践应用联系起来进行讲解。
本教程涵盖的内容包括:
杰弗里·辛顿在深度学习领域的研究历程
玻尔兹曼机如何通过基于能量的模型实现学习功能
如何利用反向传播算法来学习数据表示
分布式表示技术以及自适应局部专家混合模型
亥姆霍兹机与Wake-Sleep算法
随机邻居嵌入技术与t-SNE的基础原理
深度玻尔兹曼机
修正线性单元如何帮助改进受限玻尔兹曼机
利用深度卷积神经网络(AlexNet)进行ImageNet分类
Dropout机制在减少过拟合中的作用
层归一化方法
胶囊网络中的动态路由机制
视觉表示的对比学习方法
前向传播算法
有助于理解相关算法的可视化演示与实验
这些历史性研究理论与现代人工智能架构之间的联系
深度信念网络及贪婪式逐层预训练方法
知识蒸馏技术及神经网络之间的知识迁移
这些核心理念在PyTorch中的实际应用案例
请访问freeCodeCamp.org的YouTube频道观看这门完整的课程(时长27小时)。
相关文章
交互式学习Python
Python依然是科技领域中最通用、应用最广泛的编程语言之一。由于其语法与日常英语极为相似,因此对于初学者来说,它绝对是开始学习编程的最佳选择。 我们刚刚在freeCodeCamp.org的YouTube频道上发布了一门内容全面、注重实践的Python课程。这门课程会引导你从编写第一行代码开始,逐步构建出三个功能完备、可用于展示自己技能的终端应用程序。负责教授这门课程的是Scrimba的Treasure Porth。 你将通过完成一些能够解决实际问题的项目来学习Python: “PayUp”费用分摊工具 学习变量、用户输入处理、数据类型转换以及算术运算符等基础知识,从而制作出一个可以公平分配账
阅读全文
技术债务其实具有社会性;它其实就是通过实践来学习所必须付出的代价。
“技术债务”并不一定意味着工程设计存在缺陷;它其实可能是通过实际使用的软件来获取经验所必须付出的代价。随着人工智能技术的快速发展,代码生成的速度已经超出了我们理解和分析这些代码的能力,因此“技术债务”逐渐成为一种社会技术层面的挑战。 作者:本·林德斯
阅读全文
演讲主题:社会技术团队与工程师在架构设计、文化变革及组织转型中的作用
Vanessa Formicola阐述了技术领导者如何通过实践全面的社会技术工程方法来超越那些纯粹基于主观愿望而制定的架构设计。她指出,工程领导者必须考虑组织的成熟度、奖励机制、地缘政治环境以及团队内部的互动关系,并将“员工作为重要组成部分”这一理念视为创造有利于技术发展的条件,而不仅仅是选择某些工具而已。 作者:Vanessa Formicola
阅读全文
Docker呼吁采取隔离措施并加强管理,以保障人工智能代理的安全性。
Docker发布了一份指南,指出了在允许人工智能代理在有限的人类监督下浏览网页、运行代码或调用各种工具时可能出现的五种安全风险。他们认为,正是这些代理所具备的自主性使得传统的应用程序安全防护措施变得无效;因此,将隔离机制与治理措施作为主要防御手段,而非仅仅改进相关算法模型,才是解决问题的关键。 作者:马特·桑德斯
阅读全文