【强化学习】近端策略优化算法(PPO)万字详解（附代码） PPO（Proximal Policy Optimization）是一种强化学习算法，设计的目的是在复杂任务中既保证性能提升，又让算法更稳定和高效。以下用通俗易懂的方式介绍其核心概念和流程。PPO 是 OpenAI 在 2017 年提出的一种策略优化算法，专注于简化训练过程，克服传统策略梯度方法（如TRPO）的计算复杂性，同时保证训练效果。问题：在强化学习中，直接优化策略会导致不稳定的训练，模型可能因为过大的参数更新而崩溃。解决方案：PPO通过限制策略更新幅度，使

阅读 3.4w

282赞

收藏 489
【算法】二分查找经典例题 该模板为最朴素的二分查找模板，适用范围一般限制较多，后续会总结左右边界的判断模板，为万能模板，适用范围更广非递减顺序排列就是递增序列或不变画星部分不用特意去记，根据题意分析二段性就可以得出，求中间值的方法可以这么想，当求左端点时，当数组元素为偶数个数时中间值有两个，mid落在左边那个，对应的计算方法就不要+1，反之求右端点时mid落在中间值右边那个，计算方法要+1，循环判断条件都相同。更万能的记忆的方法，当if条件语句中出现了减法，那么中间值的计算就要+1。

阅读 1.2k

48赞

收藏 50
枚举算法练习 枚举算法，二进制枚举

阅读 502

4赞

收藏 12
优选算法精品课--滑动窗口算法（一） 这道题也需要我们转换一下思路，如果我们来按照题目中的方法来左右一个一个删除的话，情况太多了，所以我们可以来找反面，正所谓“正难则反”嘛，所以我们就去找中间的区间，让中间的区间元素和为数组总元素和与x之差相等，再用一次滑动窗口求解出这个区间即可。这道题需要我们转换一下思路，如果我们老老实实的按照题目中的那样先将一个0翻转为1，再找一个0翻转为1，那就太复杂了，那我们转换一下思路，我们是不是可以找一个区间，这个区间里0的个数为题目中的k，然后求这个区间最大的长度即可。解法二：根据规律，使用滑动窗口来解决问题。

阅读 2.9k

120赞

收藏 94
【算法】【优选算法】优先级队列 堆在算法题中的使用

阅读 2.0w

219赞

收藏 65
我爱学算法之—— 前缀和（下） 本文介绍了三道LeetCode题目及其解法： 974. 和可被K整除的子数组：使用前缀和与哈希表优化，利用同余定理统计满足条件的子数组数量，处理负数余数问题。 525. 连续数组：将0视为-1转化为求和为0的最长子数组问题，通过哈希表记录前缀和首次出现位置来寻找最长子数组。 1314. 矩阵区域和：通过预处理二维前缀和，快速计算任意子矩阵的和，处理边界情况后直接应用前缀和公式求解。 三题均采用前缀和思想，结合哈希表或预处理技术优化时间复杂度，分别解决了特定条件下的子数组/子矩阵统计问题。

阅读 975

43赞

收藏 59
【DPFSP问题】基于人工旅鼠算法ALA求解分布式置换流水车间调度DPFSP研究（Matlab代码实现） ALA采用。

阅读 998

25赞

收藏 25
【算法深练】BFS：“由近及远”的遍历艺术，广度优先算法题型全解析 本文介绍了宽度优先搜索（BFS）算法的原理与应用。BFS通过逐层扩展的方式遍历图结构，适合求解最短路径问题。文章通过多个LeetCode例题（如迷宫最短出口、二进制矩阵最短路径等）展示了BFS的经典实现方法，包括单源和多源BFS应用。特别强调了BFS与深度优先搜索（DFS）的区别：BFS保证找到最短路径，而DFS更适合检查路径存在性。对于复杂问题（如蛇梯棋、高尔夫砍树等），文章详细解析了如何调整BFS策略，包括三维状态记录和多轮次BFS的应用。

阅读 2.6k

50赞

收藏 65
【leetcode题解】算法练习 解法：用两个栈来模拟（细节：字符串这个栈中，先放入一个空串）策略一：计算当前元素后面，有多少元素的两倍比我小（降序）策略二：计算当前元素之前，有多少元素的一半比我大（升序）左右部分的下标已被重新排序，下标已经不是原来的下标了。解法：利用栈进行模拟（直接用数组就可以模拟栈结构）策略：当前元素的后面，有多少个比较小（降序）1. 左半部分的个数+右半部分的个数+策略一：找出该数之前，有多少个数比我大。策略二：找出该数之后，有多少个数比我小。，如果是降序，会有元素被重复统计。，如果是升序，会有元素被重复统计。

阅读 812

26赞

收藏 17
算法魅力-双指针之滑动窗口的叛逆 滑动窗口是一种双指针算法的特例，主要用于处理连续区间的问题，特别是在字符串或数组上寻找满足某些条件的连续子区间。在滑动窗口中，通常有两个指针，分别称为“窗口的起始指针”和“窗口的结束指针”，它们一起构成一个“窗口”，在数组或字符串上移动。滑动窗口的几个关键特点1.动态调整大小：窗口的大小和位置会根据问题的需求动态地调整。2.连续性：窗口内的元素是连续的。3.方向性：窗口通常从数组的左端开始，向右移动。滑动窗口算法的步骤。

阅读 2.4k

128赞

收藏 109
当算法遇上Python：TheAlgorithms仓库的奇妙之旅（以及为什么它能救你于水火之中） 别再对着干巴巴的伪代码抓耳挠腮了！也别再被那些炫技但不解释的代码吓退了。TheAlgorithms/Python 就是一座为你而建的算法“游乐场”。在这里，你可以观察、可以运行、可以修改、可以学习。把它加入你的书签（或者直接Star🌟），下次遇到算法难题时，记得回来看看。相信我，它会是你技术工具箱里最值得信赖的伙伴之一。去吧，探索它，学习它，甚至贡献它！让算法成为你解决问题的超能力，而不是拦路虎。编程的乐趣，不正是在于这种不断学习和突破的过程吗？🚀。

阅读 787

26赞

收藏 10
作者推荐
热爱编程的通信人
白天办公室打杂，晚上实验室码字。
关注
培风图南以星河揽胜
穷源溯流，昂霄耸壑； 至道嘉猷，静水流深。
关注
船长Q
因为相信所以看见，时代不会辜负长期主义者。
关注
MATLAB卡尔曼
所有代码如运行有问题，可私信博主
关注
岁忧
（目前更新LeetCode每日一题ing）记录一些平时做的题目，写些小小的心得。
关注
Tisfy
LetMeFly
关注
此星光明
博士，地图制图和地理信息工程专业，主要涉及Google Earth Engine、PIE-Engine、Planetary Computer、AI Earth、中科星图等云平台的遥感生态云计算研究（多源遥感和机器学习相结合），适用建筑、气象、农业、水利等各个专业云计算。2022年云计算领域博客之星TOP3，2023年CSDN博客之星TOP13，华为云云享专家、MVP，阿里云社区、51CTO博客专家博主。
关注
qystca
记录日常学习
关注
Seal^_^
涉浅水者得鱼虾，入深水者得蛟龙。
关注
秋说
欢迎订阅优质入门专栏 1、网络安全新手快速入门(附漏洞挖掘案例) 2、BurpSuite入门教程(附实战图文) 3、CTF新手入门实战教程 4、网安渗透工具使用教程(全) 5、前后端项目开发(新手必知必会) | 商务合作、项目毕设、产品推广可私信
关注