数算学习七大查找算法

查找是在大量的信息中寻找一个特定的信息元素,在计算机应用中,查找是常用的基本运算,例如编译程序中符号表的查找。本文简单概括性的介绍了常见的七种查找算法,说是七种,其实二分查找、插值查找以及斐波那契查找都可以归为一类——插值查找。插值查找和斐波那契查找是在二分查找的基础上的优化查找算法。树表查找和哈希查找会在后续的博文中进行详细介绍。

查找定义:根据给定的某个值,在查找表中确定一个其关键字等于给定值的数据元素(或记录)。

查找算法分类:

1)静态查找和动态查找;

注:静态或者动态都是针对查找表而言的。动态表指查找表中有删除和插入操作的表。

2)无序查找和有序查找。

无序查找:被查找数列有序无序均可;

有序查找:被查找数列必须为有序数列。

平均查找长度(AverageSearchLength,ASL):需和指定key进行比较的关键字的个数的期望值,称为查找算法在查找成功时的平均查找长度。

对于含有n个数据元素的查找表,查找成功的平均查找长度为:ASL=Pi*Ci的和。Pi:查找表中第i个数据元素的概率。Ci:找到第i个数据元素时已经比较过的次数。

说明:顺序查找适合于存储结构为顺序存储或链接存储的线性表。

基本思想:顺序查找也称为线形查找,属于无序查找算法。从数据结构线形表的一端开始,顺序扫描,依次将扫描到的结点关键字与给定值k相比较,若相等则表示查找成功;若扫描结束仍没有找到关键字等于k的结点,表示查找失败。

复杂度分析:

说明:元素必须是有序的,如果是无序的则要先进行排序操作。

基本思想:也称为是折半查找,属于有序查找算法。用给定值k先与中间结点的关键字比较,中间结点把线形表分成两个子表,若相等则查找成功;若不相等,再根据k与该中间结点关键字的比较结果确定下一步查找哪个子表,这样递归进行,直到查找到或查找结束发现表中没有这样的结点。

注:折半查找的前提条件是需要有序表顺序存储,对于静态查找表,一次排序后不再变化,折半查找能得到不错的效率。但对于需要频繁执行插入或删除操作的数据集来说,维护有序的排序会带来不小的工作量,那就不建议使用。——《大话数据结构》

在介绍插值查找之前,首先考虑一个新问题,为什么上述算法一定要是折半,而不是折四分之一或者折更多呢?

打个比方,在英文字典里面查“apple”,你下意识翻开字典是翻前面的书页还是后面的书页呢?如果再让你查“zoo”,你又怎么查?很显然,这里你绝对不会是从中间开始查起,而是有一定目的的往前或往后翻。

同样的,比如要在取值范围1~10000之间100个元素从小到大均匀分布的数组中查找5,我们自然会考虑从数组下标较小的开始查找。

经过以上分析,折半查找这种查找方式,不是自适应的(也就是说是傻瓜式的)。二分查找中查找点计算如下:

mid=(low+high)/2,即mid=low+1/2*(high-low);

通过类比,我们可以将查找的点改进为如下:

mid=low+(key-a[low])/(a[high]-a[low])*(high-low),

也就是将上述的比例参数1/2改进为自适应的,根据关键字在整个有序表中所处的位置,让mid值的变化更靠近关键字key,这样也就间接地减少了比较次数。

基本思想:基于二分查找算法,将查找点的选择改进为自适应选择,可以提高查找效率。当然,差值查找也属于有序查找。

注:对于表长较大,而关键字分布又比较均匀的查找表来说,插值查找算法的平均性能比折半查找要好的多。反之,数组中如果分布非常不均匀,那么插值查找未必是很合适的选择。

在介绍斐波那契查找算法之前,我们先介绍一下很它紧密相连并且大家都熟知的一个概念——黄金分割。

黄金比例又称黄金分割,是指事物各部分间一定的数学比例关系,即将整体一分为二,较大部分与较小部分之比等于整体与较大部分之比,其比值约为1:0.618或1.618:1。

0.618被公认为最具有审美意义的比例数字,这个数值的作用不仅仅体现在诸如绘画、雕塑、音乐、建筑等艺术领域,而且在管理、工程设计等方面也有着不可忽视的作用。因此被称为黄金分割。

大家记不记得斐波那契数列:1,1,2,3,5,8,13,21,34,55,89…….(从第三个数开始,后边每一个数都是前两个数的和)。然后我们会发现,随着斐波那契数列的递增,前后两个数的比值会越来越接近0.618,利用这个特性,我们就可以将黄金比例运用到查找技术中。

基本思想:也是二分查找的一种提升算法,通过运用黄金比例的概念在数列中选择查找点进行查找,提高查找效率。同样地,斐波那契查找也属于一种有序查找算法。

相对于折半查找,一般将待比较的key值与第mid=(low+high)/2位置的元素比较,比较结果分三种情况:

1)相等,mid位置的元素即为所求

2)>,low=mid+1;

3)<,high=mid-1。

斐波那契查找与折半查找很相似,他是根据斐波那契序列的特点对有序表进行分割的。他要求开始表中记录的个数为某个斐波那契数小1,及n=F(k)-1;

开始将k值与第F(k-1)位置的记录进行比较(及mid=low+F(k-1)-1),比较结果也分为三种

2)>,low=mid+1,k-=2;

说明:low=mid+1说明待查找的元素在[mid+1,high]范围内,k-=2说明范围[mid+1,high]内的元素个数为n-(F(k-1))=Fk-1-F(k-1)=Fk-F(k-1)-1=F(k-2)-1个,所以可以递归的应用斐波那契查找。

3)<,high=mid-1,k-=1。

说明:low=mid+1说明待查找的元素在[low,mid-1]范围内,k-=1说明范围[low,mid-1]内的元素个数为F(k-1)-1个,所以可以递归的应用斐波那契查找。

5.1最简单的树表查找算法——二叉树查找算法。

基本思想:二叉查找树是先对待查找的数据进行生成树,确保树的左分支的值小于右分支的值,然后在就行和每个节点的父节点比较大小,查找最适合的范围。这个算法的查找效率很高,但是如果使用这种查找方法要首先创建树。

二叉查找树(BinarySearchTree,也叫二叉搜索树,或称二叉排序树BinarySortTree)或者是一棵空树,或者是具有下列性质的二叉树:

1)若任意节点的左子树不空,则左子树上所有结点的值均小于它的根结点的值;

2)若任意节点的右子树不空,则右子树上所有结点的值均大于它的根结点的值;

3)任意节点的左、右子树也分别为二叉查找树。

二叉查找树性质:对二叉查找树进行中序遍历,即可得到有序的数列。

不同形态的二叉查找树如下图所示:

有关二叉查找树的查找、插入、删除等操作的详细讲解,请移步浅谈算法和数据结构:七二叉查找树。

下图为二叉树查找和顺序查找以及二分查找性能的对比图:

基于二叉查找树进行优化,进而可以得到其他的树表查找算法,如平衡树、红黑树等高效算法。

5.2平衡查找树之2-3查找树(2-3Tree)

2-3查找树定义:和二叉树不一样,2-3树运行每个节点保存1个或者两个的值。对于普通的2节点(2-node),他保存1个key和左右两个自己点。对应3节点(3-node),保存两个Key,2-3查找树的定义如下:

1)要么为空,要么:

2)对于2节点,该节点保存一个key及对应value,以及两个指向左右节点的节点,左节点也是一个2-3节点,所有的值都比key要小,右节点也是一个2-3节点,所有的值比key要大。

3)对于3节点,该节点保存两个key及对应value,以及三个指向左中右的节点。左节点也是一个2-3节点,所有的值均比两个key中的最小的key还要小;中间节点也是一个2-3节点,中间节点的key值在两个跟节点key值之间;右节点也是一个2-3节点,节点的所有key值比两个key中的最大的key还要大。

2-3查找树的性质:

1)如果中序遍历2-3查找树,就可以得到排好序的序列;

2)在一个完全平衡的2-3查找树中,根节点到每一个为空节点的距离都相同。(这也是平衡树中“平衡”一词的概念,根节点到叶节点的最长距离对应于查找算法的最坏情况,而平衡树中根节点到叶节点的距离都一样,最坏情况也具有对数复杂度。)

性质2)如下图所示:

距离来说,对于1百万个节点的2-3树,树的高度为12-20之间,对于10亿个节点的2-3树,树的高度为18-30之间。

对于插入来说,只需要常数次操作即可完成,因为他只需要修改与该节点关联的节点即可,不需要检查其他节点,所以效率和查找类似。下面是2-3查找树的效率:

5.3平衡查找树之红黑树(Red-BlackTree)

基本思想:红黑树的思想就是对2-3查找树进行编码,尤其是对2-3查找树中的3-nodes节点添加额外的信息。红黑树中将节点之间的链接分为两种不同类型,红色链接,他用来链接两个2-nodes节点来表示一个3-nodes节点。黑色链接用来链接普通的2-3节点。特别的,使用红色链接的两个2-nodes来表示一个3-nodes节点,并且向左倾斜,即一个2-node是另一个2-node的左子节点。这种做法的好处是查找的时候不用做任何修改,和普通的二叉查找树相同。

红黑树的定义:

红黑树是一种具有红色和黑色链接的平衡查找树,同时满足:

下图可以看到红黑树其实是2-3树的另外一种表现形式:如果我们将红色的连线水平绘制,那么他链接的两个2-node节点就是2-3树中的一个3-node节点了。

红黑树的性质:整个树完全黑色平衡,即从根节点到所以叶子结点的路径上,黑色链接的个数都相同(2-3树的第2)性质,从根节点到叶子节点的距离都相等)。

复杂度分析:最坏的情况就是,红黑树中除了最左侧路径全部是由3-node节点组成,即红黑相间的路径长度是全黑路径长度的2倍。

下图是一个典型的红黑树,从中可以看到最长的路径(红黑相间的路径)是最短路径的2倍:

红黑树这种数据结构应用十分广泛,在多种编程语言中被用作符号表的实现,如:

5.4B树和B+树(BTree/B+Tree)

平衡查找树中的2-3树以及其实现红黑树。2-3树种,一个节点最多有2个key,而红黑树则使用染色的方式来标识这两个key。

B树定义:

B树可以看作是对2-3查找树的一种扩展,即他允许每个节点有M-1个子节点。

下图是一个M=4阶的B树:

可以看到B树是2-3树的一种扩展,他允许一个节点有多于2个的元素。B树的插入及平衡化操作和2-3树很相似,这里就不介绍了。下面是往B树中依次插入

6104145111532121788636215151563223456578654

的演示动画:

B+树定义:

B+树是对B树的一种变形树,它与B树的差异在于:

如下图,是一个B+树:

下图是B+树的插入动画:

B和B+树的区别在于,B+树的非叶子结点只包含导航信息,不包含实际的值,所有的叶子结点和相连的节点使用链表相连,便于区间查找和遍历。

B+树的优点在于:

但是B树也有优点,其优点在于,由于B树的每一个节点都包含key和value,因此经常访问的元素可能离根节点更近,因此访问也更迅速。

下面是B树和B+树的区别图:

树表查找总结:

除此之外,2-3查找树的另一个扩展——B/B+平衡树,在文件系统和数据库系统中有着广泛的应用。

什么是哈希表(Hash)?

什么是哈希函数?

算法思想:哈希的思路很简单,如果所有的键都是整数,那么就可以使用一个简单的无序数组来实现:将键作为索引,值即为其对应的值,这样就可以快速访问任意键的值。这是对于简单的键的情况,我们将其扩展到可以处理更加复杂的类型的键。

算法流程:

1)用给定的哈希函数构造哈希表;

2)根据选择的冲突处理方法解决地址冲突;

常见的解决冲突的方法:拉链法和线性探测法。详细的介绍可以参见:浅谈算法和数据结构:十一哈希表。

3)在哈希表的基础上执行哈希查找。

单纯论查找复杂度:对于无冲突的Hash表而言,查找复杂度为O(1)(注意,在查找之前我们需要构建相应的Hash表)。

使用Hash,我们付出了什么?我们在实际编程中存储一个大规模的数据,最先想到的存储结构可能就是map,也就是我们常说的KVpair,经常使用Python的博友可能更有这种体会。使用map的好处就是,我们在后续处理数据处理时,可以根据数据的key快速的查找到对应的value值。map的本质就是Hash表,那我们在获取了超高查找效率的基础上,我们付出了什么?

THE END
1.最优化导论全局搜索算法全局搜索算法有哪些全局搜索算法 1. 引言 全局意义上的搜索方法能够在整个可行集上开展搜索,以找到极小点。这些方法只需要计算函数目标值,不需要对目标函数进行求导。这类方法的适用面更加广阔,在某些情况下,这些方法产生的解可以作为如梯度方法、牛顿法等迭代方法的“较好”的初始点。 https://blog.csdn.net/qq_33414271/article/details/100026094
2.科技前沿什么是AI搜索?与传统搜索有何区别?AI搜索与传统搜索有什么区别? AI搜索和传统搜索的区别主要在于,其使用了更为先进的人工智能技术,使其具有更强的理解能力、更精准的回答以及更高效的信息获取。 在传统搜索中,用户查询某些关键词,得到一些网页之后,他需要主动的去阅读这些内容,还要进行甄别https://mp.weixin.qq.com/s?__biz=MzIyOTQwMDkxNQ==&mid=2247592047&idx=3&sn=08dc1eaa18c18eb9fb69ba8a20d2933b&chksm=e96e59eb172bb6ba25fe928a814f496023ba89f092199a1b90146b828aa73a6b34d5a0752a6a&scene=27
3.编程中常见的算法介绍在编程中,有许多常见的算法可以用来解决各种问题。以下是一些常见的算法:①.线性搜索算法(Linear Search):按顺序查找列表中的元素,直到找到目标元素或遍历完整个列表。线性搜索算法是最简单的搜索算法之一。它从列表的第一个元素开始逐个向后查找,直到找到目标元素或遍历完整个列表。该算法的时间复杂度为O(n),https://baijiahao.baidu.com/s?id=1798899821822273065&wfr=spider&for=pc
4.数组的搜索算法有哪些?C++数组的搜索算法有哪些? 数组搜索算法大全:线性搜索:遍历数组,时间复杂度 o(n)。二分搜索(仅限有序数组):将数组二分,时间复杂度 o(log n)。哈希表:使用键值快速查找,时间复杂度 o(1)。 数组搜索算法大全 在计算机科学中,数组搜索算法用于在有序或无序数组中找到特定元素。本文将探讨各种数组搜索算法,包括其https://www.php.cn/faq/802377.html
5.搜索引擎算法的种类有哪些?搜索引擎算法是促进互联网搜索能力发展的关键力量。它是一种专业的算法,负责收集、筛选和排序从网络上搜索到的信息,以满足用户的查询需求。在做SEO优化的过程中,也需要符合搜索引擎的算法,这样网站才能获得一个理想的排名。 那么,搜索引擎算法的种类有哪些? 1、内容https://www.batmanit.cn/blog/e/128.html
6.搜索策略架构搜索策略有哪些bingfeng的技术博客OPEN表:类似NPS表,记录了已生成但其子状态待考察的节点。宽度优先搜索算法中OPEN表是队列结构,其中状态的排列次序就是搜索的次序。 CLOSED表:相当于PS表和NSS表的合并,记录了已被生成扩展过的状态。 宽度优先搜索过程: 把起始节点放到OPEN表中。 如果OPEN是个空表,则没有解, 失败退出,否则继续。 https://blog.51cto.com/u_13229/8894941
7.做百度SEO不行了?SEO如何转行与转行方向有哪些?3、百度自然搜索结果被快排把控,惊雷算法真的有心无力? 关于快排这个,我很久以前有误解,觉得快排就是不好的,但跟朋友聊了以后才发现,之所以产生这个LOUDONG,归根结底还是所谓用户数据的锅,真是成也萧何,败了萧何。 百度排名,给了用户搜索点击很大权重,那么,用户搜索什么词的点击,而这个点击行为被快排行业从业解密https://lusongsong.com/reed/14403.html
8.C#刷遍Leetcode面试题系列连载(1)入门与工具简介刷LeetCode有哪些好处? 计算机中有很多抽象的数据结构,比如: List、Stack(栈)、Linked List(链表)、Hash Table(哈希表)、Heap(堆)、Tree等等,而LeetCode 上的大量高质量算法题基本上涵盖了所有这些数据结构的应用。怎么将这些题抽象成数学模型,转化为具体数据结构的应用,则是我们需要提升的地方,而这恰恰帮我们极大https://www.shangyexinzhi.com/article/details/id-258758
9.JVM高频面试题合集我们可以看到,三个对象各自指向循环中的另一个对象,但是没有其他引用指向这三个对象,那这三个对象就属于“一堆垃圾”。 那现在我们上面所说的引用计数就不能解决这个该问题,这时我们就需要使用另外一种定位方式——Root Searching(根可达算法或根搜索算法)。 https://www.tulingxueyuan.cn/tlzx/javamst/5513.html
10.常见的搜索算法有哪几种?全国分支限界算法(Branch-and-boundSearchAlgorithm)https://www.1633.com/ask/150851.html
11.算法与言论——美国的理论与实践在一定程度上,搜索王案有些类似冷战时期爆发在“边缘”地区的代理人战争:它虽然只发生在俄克拉荷马州的一家地区法院(而非联邦巡回法院或最高法院),但它背后则是两种力量和两大阵营的集结和较量。双方围绕算法规制展开的第一场较量,是以言论自由开始并以言论自由的胜利而告终的。https://ciss.tsinghua.edu.cn/info/xzgd/119
12.搜索引擎有哪几种算法?SEO必知的搜索引擎九大算法解析网站优化作为SEOER的你,还不知道就out啦,本文将提供SEO必知的九大搜索引擎算法解析供大家了解,希望对大家有所帮助和启发 GPT4.0+Midjourney绘画+国内大模型 会员永久免费使用! 【如果你想靠AI翻身,你先需要一个靠谱的工具!】 搜索引擎发展至今,已公布了多种算法。了解算法知识并不懂得如何把算法实践于SEO工作的你,还是处于https://www.jb51.net/yunying/459656.html
13.常见算法5广度优先搜索BreadthFirstSearch广度优先搜索(Breadth-First Search)是最简便的图的搜索算法之一,又称宽度优先搜索,这一算法也是很多重要的图算法的原型。广度优先搜索属于一种盲目搜寻法,目的是系统地展开并检查图中的所有节点,以找寻结果。换句话说,它并不考虑结果的可能位置,彻底地搜索整张图,直到找到结果为止。 https://www.jianshu.com/p/c6b89506e5c5
14.自动驾驶路径规划五大常用算法汽车技术Dijkstra算法不同之处在于,A* 算法是一个“启发式”算法,它已经有了一些我们告诉它的先验知识,如“朝着终点的方向走更可能走到”。它不仅关注已走过的路径,还会对未走过的点或状态进行预测。因此A* 算法相较于Dijkstra而言,调整了进行BFS的顺序,少搜索了哪些“不太可能经过的点”,更快地找到目标点的最短路径。https://www.auto-testing.net/news/show-116633.html
15.程序员应该知道的十个基础算法腾讯云开发者社区2.快速排序:快速排序是一种常用且高效的排序算法。它采用递归的方式将问题划分为更小的子问题,并使用一个基准元素进行排序。 3.归并排序:归并排序采用分治策略,将问题逐步细化并通过合并操作得到最终的有序结果。 二. 搜索算法 1.二分查找:二分查找适用于有序数组,它将目标值与数组的中间元素进行比较,从而缩小搜https://cloud.tencent.com/developer/article/2352039
16.搜推广算法关键知识点尽管不同召回算法有不同的loss,但是背后基于Pairwise LTR的思想都是共通,这一点与排序时采用binary cross entropy loss有较大的不同。 比如Youtube/DSSM模型使用(Sampled) Softmax。但经过Negative Sampling之后,同样是针对同一个用户,一个d+要配置若干个d?,与Pairwise思路类似 而想让u在d+上的得分最高,同样https://zhuanlan.zhihu.com/p/689575936