DanaMackenzie:流体神经网络如何突破数学极限

DanaMackenzie:流体神经网络如何突破数学极限

将卵石投入流动的水流,可能不会大幅度改变流型。但是若将卵石扔到其他位置,则可能会发生很大变化。谁能进行预测呢?

答案:神经网络可以。美国帕萨迪纳加利福尼亚理工学院(CaliforniaInstituteofTechnology,Caltech)的计算机科学家和数学家,通过展示神经网络可自学如何比以往任何一种计算机程序更快、更准确解决一大类流体流动问题,为人工智能(AI)开辟了新的舞台。

加利福尼亚理工学院的计算与数学科学教授、科学人工智能(AI4Science)联合负责人AnimashreeAnandkumar表示:“当我们的小组两年前聚在一起时,我们讨论了人工智颠覆哪些科学领域的时机已经成熟。我们认为,如果能找出一个强大的框架来解算偏微分方程,那么我们就能产生广泛的影响。”

他们的首个目标是二维纳维-斯托克斯方程(Navier-Stokesequation),该方程描述了无限薄的一层水的运动情况(图1)。他们的神经网络(他们称之为“傅里叶神经算子”)在解决这类问题时,其性能(速度提高了400倍,精度提高了30%)大大优于以前的任何微分方程解算器。

偏微分方程(PDE)是牛顿运动定律自然而然产生的一类方程。为此,偏微分方程是科学的基础,解算这些方程取得的任何重大进展都会产生广泛影响。Anandkumar表示:“我们正与各行业以及学术界和国家实验室的众多团队进行讨论。我们已在进行三维流体流动实验。”

Anandkumar表示,一个很好的应用案例是核聚变建模方程式。她补充道:“另一个应用案例是材料设计,尤其是塑性与弹性材料设计。在此领域中,团队成员,即力学与材料科学教授KaushikBhattacharya具有丰富的经验。”

在第二次世界大战期间,计算机应运而生的部分原因是使用微分方程来预测炮弹运动。从那时起,计算机一直用于解算微分方程,具有一定的准确性和成功率。但是以往的方法,无论涉及传统计算机编程或人工智能,始终是一次只能处理一个方程。例如,计算机可弄清楚扔到一个位置的一颗卵石如何影响水流动。然后,计算机就可学习扔到其他位置的卵石如何改变水流动。但计算机并不会进一步理解扔到任何位置的卵石如何改变水流动。这是加利福尼亚理工学院傅里叶神经算子背后的宏伟目标。

但无论你拥有多少训练数据,你都可能无法探索无限维空间中最微小的部分。你无法尝试将卵石放入水流中的所有位置。此外,若无任何事先假设,则不能保证你的网络能正确预测将卵石扔到新位置时会发生什么事情。

特别是,Stuart知道线性偏微分方程(最简单的偏微分方程类型)可以通过著名的格林函数方法来解算,这是用于解算这些常见问题和偏微分方程的一种策略,而其他方法可能无法解决这些问。基本上,它为方程的适当解提供了一个模板。该模板可在有限维空间中进行近似求解,因此,可将问题从无限维减少到有限维。

纳维-斯托克斯方程为非线性方程,因此,其尚无此类模板。但是,若纳维-斯托克斯方程存在类似于格林函数的东西,即非线性方程(不过其仍存在有限维模板),那么神经网络应该能够对其进行学习。虽然无法保证这样做会奏效,但Stuart称其为“见多识广的冒险”。他表示,经验一次又一次地表明,神经网络非常适合学习有限维空间中的非线性映射。

美国加利福尼亚大学圣克鲁兹分校的应用数学系助理教授DanieleVenturi表示,学习无限维空间之间的非线性算子是计算科学领域的“圣杯”(holygrail)。Venturi的研究涉及微分方程和无限维函数空间,他表示不相信加利福尼亚理工学院团队已经做到了这一点。他说:“通常,在有限数量的输入-输出对基础上学习无限维空间之间的非线性映射是不可能的,但能够对其进行近似求解。实际上,主要问题在于这种近似求解的计算成本及其准确性和效率。他们展示的结果确实令人印象深刻。”

改编原文:

DanaMackenzie.PushingMathematicalLimits,aNeuralNetworkLearnsFluidFlow[J].Engineering,2021,7(5):550-551.

THE END
1.练习构建和训练神经网络在本单元中,你将使用 Keras 构建和训练分析文本情绪的神经网络。 若要训练神经网络,你需要数据来对其进行训练。 你将使用 Keras 随附的IMDB 电影评论情绪分类数据集,无需下载外部数据集。 IMDB 数据集包含 50,000 条电影评论,并且已分别对这些评论进行正面 (1) 或负面 (0) 的评分。 该数据集中的 25,0https://docs.microsoft.com/zh-cn/learn/modules/analyze-review-sentiment-with-keras/2-build-and-train-a-neural-network/
2.生信自学网神经网络GEO基础生信自学课堂生信自学网神经网络 GEO基础 GEO转录组 分子亚型 非肿瘤m6A WGCNA筛选 多芯片联合 GEO单基因 GEO免疫浸润 单细胞测序 geoBatch联合分析 肿瘤微环境 环状RNA芯片 长非编码RNA miRNA芯片 甲基化免疫 GEO精品 自噬基因 多芯片联合 氧化应激 节律基因 细胞衰老 铜死亡 https://ke.biowolf.cn/brand-68-c297.html
3.猎豹傅盛:为什么一款聊天软件可以带来生产力变革?参加学院第二条路是神经网络“自学”,所谓自学,就是给神经网络足够多的文本,神经网络会自动发现词与词之间的关系,这些关系简单理解就是参数。所以这是一个自动发现文本规律的路径。 第一条路更符合我们对语言学习的逻辑理解,就像人类学习外语,而且开始投入就能见到效果,所以绝大部分公司选择这条路线。但问题是,系统达到一定https://www.shangyexinzhi.com/article/8367219.html
4.MATLAB神经网络应用设计.pdf应用MATLAB设计神经网络.pdf 立即下载 上传者: u013883025 时间: 2021-11-02 Matlab神经网络自学笔记.pdf 。 立即下载 上传者: G11176593 时间: 2023-03-01 MATLAB神经网络30个案例分析.史峰.扫描版.pdf BP神经网络的数据分类,BP神经网络的非线性系统建模,遗传算法优化BP神经网络,神经网络遗传算法函数https://www.iteye.com/resource/wsf551-1554587
5.《深度学习基础》课程教学大纲.docx常用的概率分布 / 讲授 / 自学资料 5 第二章深度学习基础 / 4 讲授、上机 12 自学资料 6 2.1 深度学习发展历程介绍国内深度学习的进展和祖国深度学习领域取得的成就 M1,M4,M5 / 讲授 / 自学资料 7 2.2 感知机感知机的起源;感知机的局限性 M3,M4 / 讲授 / 自学资料 8 2.3 前馈神经网络神经元;网络结构https://m.book118.com/html/2022/1127/6043033235005021.shtm
6.自学神经网络总结神经网络自学因为OpenAI近期的活跃表现,对人工智能产生了兴趣。咨询了学习计算机科学的同学,了解到神经网络是人工智能较为重要的一块,所以抱着试一试的心态想要自学相关内容。以下是目前自学后的总结,主要是当给自己留个“努力过”的证明,如果有大佬看到了本文,还希望能多多批判,帮助笔者进步。https://blog.csdn.net/2401_82776339/article/details/136224406
7.吴恩达神经网络和深度学习课程自学笔记(二)之神经网络基础2,因为如果不用非线性激励函数,每一层都是上一层的线性函数,无论神经网络多少层,输出都是输入的线性组合,与只有一个隐藏层效果一样。相当于多层感知机了。所以引入非线性激励函数,深层网络就变得有意义了吴恩达神经网络和深度学习课程自学笔记(一)之深度学习概论 一:什么是神经网络? 拿房价预测举例:中间那https://www.pianshen.com/article/78361453767/
8.8个学习AI的网站(免费自学人工智能必备)学吧导航DeepLearningAI网站也是由人工智能和机器学习领域的权威吴恩达教授创建的在线学习平台,该网站提供与深度学习相关的各种课程和资源,深度学习是机器学习的一个子领域,专注于人工神经网络和深度神经网络。课程设计为初学者和有经验的实践者都可以使用,分为入门、中级、高级三个层次,涵盖一系列与深度学习有关的主题,包括神经https://www.xue8nav.com/2090.html
9.人民日报“阿尔法狗”为什么厉害AlphaGo背后是一群杰出的计算机科学家,确切地说,是机器学习领域的专家。科学家利用神经网络算法,将棋类专家的比赛记录输入给计算机,并让计算机自己与自己进行比赛,在这个过程中不断学习训练。某种程度上可以这么说,AlphaGo的棋艺不是开发者教给它的,而是‘自学成才’的。”王飞跃说。https://www.cas.cn/cm/201603/t20160321_4550032.shtml
10.机械专业工程师论文6篇(全文)模糊数学的实际应用是模糊控制器。最近开发出的高性能模糊控制器具有自学习功能,可在控制过程中不断获取新的信息并自动地对控制量作调整,使系统性能大为改善,其中尤其以基于人工神经 网络的自学方法更起人们极大的关注。 (三)工智能、专家系统及智能传感器技术 https://www.99xueshu.com/w/fileobal4g6u.html
11.神经网络控制《神经网络控制》是2009年年7月电子工业出版社出版的教材,作者是徐丽娜。[1] 该书共分五章,主要包括了神经网络理论基础,基于神经网络的动态系统模型、逆模型及其辨识问题,神经网络控制的多种结构及其设计问题,遗传算法的寻优机理,遗传算法与系统辨识、遗传算法与神经控制问题。[1] https://baike.sogou.com/v6372408.htm
12.“符号数学”终于向“神经网络”屈服:AI学会数学证明了?70多年前,作为思考大脑工作机制的一种革命性的手段,处在人工智能研究前沿的研究人员引入了神经网络。在人的大脑里,数十亿个互连的神经元网络会处理感知的数据,让我们能够从经验中学习。人工神经网络还可以按照它们自学而来的规则,通过互连的层过滤大量数据,从而预测和识别模式。 https://www.36kr.com/p/722866675812231
13.像大脑一样思考:深度学习如何让人工神经网络重现生机界面新闻但是,随着科学技术的发展,对控制系统智能化的要求也越来越高,基于串行计算的Von Neumann计算机面对复杂的智能控制系统逐渐显现出运作困难与其本身的局限性。而人工神经网络则采用并行计算方法,加之其对复杂的、不确定的问题拥有自适应性和自学能力,使人工神经网络为自动控制摆脱困境提供了一条可行的道路。https://www.jiemian.com/article/425375.html