强化学习之Q-Learing基础
强化学习之Q-Learing基础
文章目录
- 强化学习之Q-Learing基础
- 马尔可夫决策过程MDP
- 1)部分可观察马尔可夫决策过程POMDPs
- 2)Markov Games:
- 总结
- 强化学习之Q-Learning
马尔可夫决策过程MDP
MDP 是一个离散时间随机控制过程。MDP提供了用于建模决策问题的数学框架,在该决策中,结果是部分随机的,并且受决策者或代理商的控制。MDP对于研究可以通过动态编程和强化学习技术解决的优化问题很有用。
- 通常MDP可以用这样的元组来定义:
:- S:state set 状态集合
- A:action set动作集合
- p:状态s通过动作a转化为a’的转移概率,又称状态转移概率
- r:动作a执行后立即获得的奖励。
我们把π表示为一个“策略policy”,它是从一个状态s到一个动作a的映射。
MDP的目标就是找到一个最优的策略,使奖励函数最大化
最优策略 可以作为一个”黑匣子“,也可以比作是机器学习中训练好的模型,通过下一时刻输入的状态就可以根据其内部映射(s->a)
将应该采取的动作给求出来
1)部分可观察马尔可夫决策过程POMDPs
在MDPs中,我们假设系统状态完全可以被代理观察到。然而,在很多情况下,agent只能观察系统的一部分状态,因此部分可观察的马尔可夫决策过程(POMDPs)也常用于在通信中建模决策问题。
典型的POMDP模型由6-tuple定义:
- Ω 是一组观察结果集,就是代理的传感器获得的环境数据;
- O 是条件观察概率,就是代理在观察到环境数据 o 时,有多大概率确定自己处于状态s
- γ∈[0,1]是折扣因子。决定了最近的收益和未来的收益哪个对机器人影响更大
- γ=0 表示机器人只关心下一次行动中选择哪个动作可以获得最大收益,因为之后的动作收益均为0;
- γ=1 表示机器人更关心接下来所有动作的收益和。
算法工作流程:
(1) 在每个时间段 T内,代理agent的当前状态是s,根据其对当前状态s的置信度b(s)(条件观察概率)选择动作a
(2) 基于对当前状态b(s)的观察o及其置信度,代理随后更新其对新状态s′的置信度即b(s′):
-
- : agent在状态s处执行动作a,其状态转移到了s′,然后在状态s’下的agent获得观测值o的概率
(3) 与MDP模型相似,POMDP中的agent也致力于寻找最优策略 ,以使其期望的长期折扣报酬
最大化.
2)Markov Games:
定义:
在博弈论中,马尔可夫博弈或随机博弈是一种动态游戏,具有多个参与者(即ML代理)进行的概率转变。典型的马尔可夫博弈模型由如下元组定义:
- 是一组代理(agents set)
- 是所有代理的全局状态空间 是代理i的状态空间
- 是agents的动作空间集合,是agent_i的动作空间
- 是系统的转移概率函数。
- 是agents的收益函数,即执行了所有动作后获得的回报
解释
在Markov博弈中,代理从初始状态开始。在观察当前状态之后,所有的代理同时选择他们的行为,他们将获得相应的奖励和他们自己的新观察。同时,系统将以概率 跃迁到一个新的状态。该过程在新状态下重复,并持续有限或无限个阶段。在这个博弈中,所有的代理都试图找到他们的最优策略来最大化他们自己期望的长期平均回报,即
这个博弈中的所有最优策略,即
的集合,已知为该博弈的均衡。如果存在有限个参与者,并且状态集和动作集是有限的,那么马尔可夫博弈在有限个阶段下总是具有纳什均衡。对于具有无限阶段的Markov博弈也是如此,但是代理的总回报是贴现和(discounted sum)。
贴现和是总回报与折扣因子作用的结果
总结
MDP模型是为了解决机器人轨迹规划中动作带来结果的不确定性的问题,POMDP模型是为了解决机器人轨迹规划中对环境观测的不确定性的问题。
POMDP模型就是多了一步对机器人当前所处状态的判断,因为在实际问题中,机器人对环境的观测是有局限性的,不准确的;所以根据环境观测信息来判断自己的状态也是有偏差的,这种偏差用概率来表示就是机器人有对自己目前所处状态的可信度有多大。
强化学习之Q-Learning
强化学习是机器学习的一个重要分支,是解决MDP问题的有效工具,在文献中得到了广泛的应用。在强化学习过程中,agent可以通过与环境的交互来学习其最优策略。
具体而言,如图(a)所示,代理首先观察其当前状态state
,然后采取动作action
,并接收其即时奖励reward
以及其新状态new state。所观察到的信息,即即时奖励和新状态,被用来调整代理的策略policy,并且这个过程将被重复,直到代理的策略接近最优策略为止。在强化学习中,Q-学习是最有效的方法,在文献中得到了广泛的应用。在下面,我们将讨论Q-学习算法及其对高级MDP模型的扩展。
在MDP中,我们的目标是找到一个最优策略,使系统的长期报酬函数期望最大化。因此,我们首先定义了值函数,它表示通过按照策略π从每个状态s∈S获得的期望值。策略π的价值函数通过infinite horizon and discounted MDP
来量化策略π的价值,可以表示如下:
由于我们的目标是寻找最优策略π*,所以通过
表示的最优值函数可以找到每个状态下的最优作用。
定义 作为所有state-action pair
(状态-动作对)的最优Q-funcation
,那么最优值函数就可以定义为 ,现在,问题被简化为寻找所有state-action pair
对应的Q-function的最优值,即,这可以通过迭代过程来实现:
这个迭代过程的核心思想就是找出预测的- value即与其当前的Q-value之间的时间差(TD)。其中(学习率)被用来决定新的环境信息对现有Q-value的影响程度。学习率可以选择为常数,也可以在学习过程中动态调整。然而,它必须满足假设1才能保证Q-学习算法的收敛性。
Assumption 1:
学习率(步长)是确定的,非负的,并且满足以下条件:
步长自适应是强化学习中最常用的例子之一。算法1给出了Q-学习算法的细节。
Algorithm 1 The Q -Learning Algorithm:
对于每个状态动作对(s,a)
,初始化Q-value表条目 Q(s,a)
如为零。观察当前状态s
,为学习率和折扣系数 初始化一个值
for t:=1 to T do
从当前状态-动作对(s,a)
,执行动作a
并立即获得奖励 r
和一个新的状态 s′
。
基于状态 s′
选择一个动作 a'
然后更新Q值表条目Q(s,a)
如下:
更新状态Replace s←s′
end for
一旦所有的Q-value
收敛或达到一定的迭代次数,算法将终止。然后,该算法产生的最佳策略就可以用于指导DRL代理(机器人)在每种状态下要采取的措施,使得对于状态空间的所有状态的最大化,即 。
值得注意的是,与值函数不同,Q函数是无模型学习算法的一个示例,该算法不需要代理(agent,可以理解为机器人)预先知道系统模型参数(例如状态转换和奖励模型)即可预先估计(state-action)
所对应的value
。具体来说,Q函数的核心思想是通过与环境相互作用过程中获得的样本来逼近状态-动作对的值。此外,当值函数根据策略π取所有动作的期望值时,Q函数只关注特定状态下的特定动作。因此,使用Q函数的学习算法比使用值函数的学习算法复杂。然而,从抽样的角度来看,Q函数的维数高于值函数的维数,因此Q函数可能更难获得足够多的样本,即状态-动作对。因此,如果系统模型预先可用,则值函数通常更可取。
互作用过程中获得的样本来逼近状态-动作对的值。此外,当值函数根据策略π取所有动作的期望值时,Q函数只关注特定状态下的特定动作。因此,使用Q函数的学习算法比使用值函数的学习算法复杂。然而,从抽样的角度来看,Q函数的维数高于值函数的维数,因此Q函数可能更难获得足够多的样本,即状态-动作对。因此,如果系统模型预先可用,则值函数通常更可取。
还有一篇个人觉得讲的不错的博客
如若内容造成侵权/违法违规/事实不符,请联系编程学习网邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
相关文章
- 一秒10行高效编写HTML代码(Emmet语法使用)
运用Emmet快速编写HTML代码 学习视频链接黑马-万少简介什么是Emmet呢?简单来说就是 快速生成对应的 HTML 结构或者 CSS 代码的快捷语法!Webstorm编辑器 和 VScode 都内置了Emmet语法,所以不需要安装插件,但是 sublime text 需要自行安装。需要的可以自行百度。话不多说,下…...
2024/4/27 21:56:03 - 关于软件项目管理的一些问题
1. 项目管理计划书的制作过程确定项目范围可交付成果,wbs项目资源项目进度计划角色、责任、项目组织结构成本和预算风险2. 怎么确定项目范围把客户的需求转变为对项目产品的定义通过wbs,把项目产品的定义转化为对项目工作范围的说明项目干系人认可并接受项目范围授权与执行项…...
2024/4/28 1:08:05 - python 归一化混音
wav音频文件要求:单通道、S16_LE、采样率一致。import scipy.io.wavfile as wav import numpy as npMAX = 2**15 - 1 MIN = -2**15def mix(sr, ns, sigma=1.0):tmp = 0f = 1.0mix_audio = np.zeros((len(sr)), dtype=np.int16)for i, (s, n) in enumerate(zip(sr, ns)):tmp = …...
2024/4/16 3:12:45 - IDEA中java程序如何打JAR包,以及导入JAR包
打JAR包 点击idea右上角的项目结构按钮然后点击Artifacts,点击加号,选择JAR 选择第二行的From modules 选项点确定完成之后,点击构建,选择Build Artifacts会生成一个小窗口,点击Build,就生成了JAR包;在工程的out目录下可以看到生成的Jar包,点击show in Expolorer打开ja…...
2024/4/27 23:26:55 - php 使用phpexcel实现数据导出
先做一个简单的数据的导入导出,明天将图片打包下载,oss移动文件,和数据导出完善, namespace app\admin\controller;use think\Controller; use think\Request; use PHPExcel; use PHPExcel_IOFactory;class Demo extends Controller {public function index(){# sql查询$d…...
2024/4/25 15:51:33 - 操作系统第31讲段页式存储管理,可重入代码
连续式管理 离散式管理 页是系统按照物理页的大小划分的 页的大小512K-8M 段的大小不相同 页是一维的,段是二维的 段实现信息共享 可重入代码 又称为纯代码,一种允许多个进程同时访问但是不允许任何进程对他进行修改的代码 纯代码:语言的编译器 两个进程共用了一个编译器就是…...
2024/4/28 5:19:59 - Netty(三)关于NioEventLoopGroup
学一学Netty中的NioEventLoopGroup一个Netty程序启动时,至少要指定一个EventLoopGroup 假如我们使用NIO,那我们通常使用NioEventLoopGroup 使用BIO,那我们可以初始化OioEventLoopGroup官方DOC上图时Netty(4.1.6)中EventLoopGroup的解释 在事件循环期间可对EventExecutorGr…...
2024/4/28 0:51:42 - tab栏切换(新手多看,tab栏)
<script>//获取元素var spanList = document.querySelectorAll("span");var liList = document.querySelectorAll("li");//遍历每个spanfor (let i = 0; i < spanList.length; i++) {// 注册事件spanList[i].onclick = function () {for (let j =…...
2024/4/26 10:10:34 - vivo春招在线编程题
1 题目一现给定任意正整数 n,请寻找并输出最小的正整数 m(m>9),使得 m 的各位(个位、十位、百位 … …)之乘积等于n,若不存在则输出 -1。题目一解答 class Solution { public:/*** 输入一个整形数值,返回一个整形值* @param n int整型 n>9* @return int整型*/int…...
2024/4/24 11:24:02 - 西瓜视频
前言 最近有好多小伙伴们在说要西瓜的解析原理,通过我不断的努力终于找到了一种下载西瓜视频去除水印的方法,该方法不是通过接口,还是和抖音一样通过分析源码来的。 更多精彩 join("q_qun",1071834648); 说明 本次解析不是针对所有西瓜上的视频,针对的是这种静态…...
2024/4/28 1:54:44 - win系统 socket编程,可同时多个客户端连接,随时接收消息不用阻塞 ----C++实现--多线程简单
刚学这个,写的可能不够规范,如果有错误还请指出 关于这个tcp助手,网上有很多, 如果你需要请在下面留言,我发给你 看图:我是用tcp助手测试的注意我是在Clion下编译运行的,如果你也是别忘在CMakeLists.txt下加一行代码 set(CMAKE_CXX_STANDARD 11)两个线程 一个负责监听来自客户端…...
2024/4/24 11:24:00 - javascript正则验证密码 (包括数字大小写字母)8-16位
正则验证密码 (包括数字大小写字母)8-16位 /^(?=\D+[0-9])(?=.*[a-z])(?=.*[A-Z])[a-zA-Z0-9]{8,16}$/...
2024/4/24 11:24:02 - HTTP相关
HTTPMIMEMIME(Multipurpose Internet Mail Extensions): 多用途互联网邮件扩展类型.用途在于设定某种扩展名的文件用一种特殊的应用程序所打开特地的文件 对应的MIME类型RTF文本rtf appliation/rtf普通文本txt txt/plaingif图形 image/gitau声音文件 audio/basicavi文件 video/…...
2024/4/24 11:23:58 - 二叉树的遍历 - DFS、BFS+Python实现
这篇博客介绍二叉树的遍历,包括深度优先遍历和广度优先遍历。 二叉树的遍历 树的遍历是树的一种重要的运算。所谓遍历是指对树中所有节点的信息的访问。即依次对树中每个结点访问一次且仅访问一次。我们把这种对所有节点的访问称为遍历(traveral)。那么树的两种重要的遍历模…...
2024/4/24 11:23:57 - Android | 如何在项目中使用 github 上的已有项目
最近在弄android结课设计,想弄一个实时记录体重的app,所以需要有图表的控件。如果啥啥都要自己来弄也太累了,还没人家弄得好。于是在 github 上找到一个关于图表的优质开源项目:https://github.com/PhilJay/MPAndroidChart。本人现在android开发小白一枚,算是第一次使用组…...
2024/4/24 11:24:04 - Ubuntu14 安装搜狗输入法教程
安装 fcitx-table-wbpy 工具sudo apt-get install fcitx-table-wbpy安装成功后,打开 系统设置–>语言支持,将键盘输入改为 fcitx ,如果没有此选项,那么 fcitx-table-wbpy 安装不成功,请再次运行步骤一指令。浏览器搜索 sougou for linux,下载搜狗 linux版本,并根据自…...
2024/4/24 11:23:55 - Mongoose学习
Mongoose学习Mongoose是位于MongoDB与NodeJS之间的,做了很多抽象,大大简化了使用MongoDB的难度。Schema | Model | Entity Mongoose 里,一切都始于Schema。 Schema :一种以文件形式存储的数据库模型骨架,不具备数据库的操作能力Model :由Schema发布生成的模型,具有抽象属…...
2024/4/24 11:23:55 - 数据库查询事务隔离级别时,报错误代码:Unknown system variable tx_isolation解决办法
我用的数据库版本是8.0.19 cmd进入dos命令窗口 第一种 mysql -u用户名 -p密码 回车 第二种 输入: mysql -u用户名 -p 回车 然后输入密码 回车 就可以看到版本信息,一般的低版本可以用户名密码一起输入,高版本以后为了安全 需要用密文形式输入使用下面这个语句查询事务隔离级别…...
2024/4/24 11:23:53 - 经典算法题1-输入一个矩阵,按照从外向里以顺时针的顺序依次打印出每一个数字
话不多说,代码如下: public class Text3 {public static void main(String[] args) {Scanner sc = new Scanner(System.in);int[][] arr = new int[100][100];System.out.print("输入矩阵的列数:");int line = sc.nextInt();System.out.print("输入矩阵的行数:&…...
2024/4/24 8:53:28 - C语言编译器学习
手把手教你写C语言编译器: https://cpp.ctolib.com/docs/sfile/diy-c-compiler/1.html自己动手写编译器链接器(收费视频):https://edu.csdn.net/course/detail/1418...
2024/4/15 5:09:32
最新文章
- WebSocket通信协议
WebSocket是一种网络通信协议.RFC6455定义了它的通信标准 WebSocket是HTML5开始提供的一种在单个TCP连接上进行全双向通信的协议 HTTP协议是一种无状态的,无连接的,单向的应用层协议.它采用了请求,响应的模式.通信请求只能由客户端发起,服务端对请求做出应答处理. 这种模型有…...
2024/4/28 7:16:04 - 梯度消失和梯度爆炸的一些处理方法
在这里是记录一下梯度消失或梯度爆炸的一些处理技巧。全当学习总结了如有错误还请留言,在此感激不尽。 权重和梯度的更新公式如下: w w − η ⋅ ∇ w w w - \eta \cdot \nabla w ww−η⋅∇w 个人通俗的理解梯度消失就是网络模型在反向求导的时候出…...
2024/3/20 10:50:27 - Django实现的登录注册功能
1 前言 在Web开发中,用户登录和注册是最基本且必不可少的功能。Django,作为一个高级的Python Web框架,为我们提供了强大的工具和库来快速实现这些功能。下面,我将详细介绍如何使用Django来实现用户登录和注册功能。 2 功能介绍 …...
2024/4/23 6:25:06 - Topaz Video AI for Mac v5.0.0激活版 视频画质增强软件
Topaz Video AI for Mac是一款功能强大的视频处理软件,专为Mac用户设计,旨在通过人工智能技术为视频编辑和增强提供卓越的功能。这款软件利用先进的算法和深度学习技术,能够自动识别和分析视频中的各个元素,并进行智能修复和增强&…...
2024/4/27 12:49:51 - 【外汇早评】美通胀数据走低,美元调整
原标题:【外汇早评】美通胀数据走低,美元调整昨日美国方面公布了新一期的核心PCE物价指数数据,同比增长1.6%,低于前值和预期值的1.7%,距离美联储的通胀目标2%继续走低,通胀压力较低,且此前美国一季度GDP初值中的消费部分下滑明显,因此市场对美联储后续更可能降息的政策…...
2024/4/26 18:09:39 - 【原油贵金属周评】原油多头拥挤,价格调整
原标题:【原油贵金属周评】原油多头拥挤,价格调整本周国际劳动节,我们喜迎四天假期,但是整个金融市场确实流动性充沛,大事频发,各个商品波动剧烈。美国方面,在本周四凌晨公布5月份的利率决议和新闻发布会,维持联邦基金利率在2.25%-2.50%不变,符合市场预期。同时美联储…...
2024/4/28 3:28:32 - 【外汇周评】靓丽非农不及疲软通胀影响
原标题:【外汇周评】靓丽非农不及疲软通胀影响在刚结束的周五,美国方面公布了新一期的非农就业数据,大幅好于前值和预期,新增就业重新回到20万以上。具体数据: 美国4月非农就业人口变动 26.3万人,预期 19万人,前值 19.6万人。 美国4月失业率 3.6%,预期 3.8%,前值 3…...
2024/4/26 23:05:52 - 【原油贵金属早评】库存继续增加,油价收跌
原标题:【原油贵金属早评】库存继续增加,油价收跌周三清晨公布美国当周API原油库存数据,上周原油库存增加281万桶至4.692亿桶,增幅超过预期的74.4万桶。且有消息人士称,沙特阿美据悉将于6月向亚洲炼油厂额外出售更多原油,印度炼油商预计将每日获得至多20万桶的额外原油供…...
2024/4/27 4:00:35 - 【外汇早评】日本央行会议纪要不改日元强势
原标题:【外汇早评】日本央行会议纪要不改日元强势近两日日元大幅走强与近期市场风险情绪上升,避险资金回流日元有关,也与前一段时间的美日贸易谈判给日本缓冲期,日本方面对汇率问题也避免继续贬值有关。虽然今日早间日本央行公布的利率会议纪要仍然是支持宽松政策,但这符…...
2024/4/27 17:58:04 - 【原油贵金属早评】欧佩克稳定市场,填补伊朗问题的影响
原标题:【原油贵金属早评】欧佩克稳定市场,填补伊朗问题的影响近日伊朗局势升温,导致市场担忧影响原油供给,油价试图反弹。此时OPEC表态稳定市场。据消息人士透露,沙特6月石油出口料将低于700万桶/日,沙特已经收到石油消费国提出的6月份扩大出口的“适度要求”,沙特将满…...
2024/4/27 14:22:49 - 【外汇早评】美欲与伊朗重谈协议
原标题:【外汇早评】美欲与伊朗重谈协议美国对伊朗的制裁遭到伊朗的抗议,昨日伊朗方面提出将部分退出伊核协议。而此行为又遭到欧洲方面对伊朗的谴责和警告,伊朗外长昨日回应称,欧洲国家履行它们的义务,伊核协议就能保证存续。据传闻伊朗的导弹已经对准了以色列和美国的航…...
2024/4/28 1:28:33 - 【原油贵金属早评】波动率飙升,市场情绪动荡
原标题:【原油贵金属早评】波动率飙升,市场情绪动荡因中美贸易谈判不安情绪影响,金融市场各资产品种出现明显的波动。随着美国与中方开启第十一轮谈判之际,美国按照既定计划向中国2000亿商品征收25%的关税,市场情绪有所平复,已经开始接受这一事实。虽然波动率-恐慌指数VI…...
2024/4/27 9:01:45 - 【原油贵金属周评】伊朗局势升温,黄金多头跃跃欲试
原标题:【原油贵金属周评】伊朗局势升温,黄金多头跃跃欲试美国和伊朗的局势继续升温,市场风险情绪上升,避险黄金有向上突破阻力的迹象。原油方面稍显平稳,近期美国和OPEC加大供给及市场需求回落的影响,伊朗局势并未推升油价走强。近期中美贸易谈判摩擦再度升级,美国对中…...
2024/4/27 17:59:30 - 【原油贵金属早评】市场情绪继续恶化,黄金上破
原标题:【原油贵金属早评】市场情绪继续恶化,黄金上破周初中国针对于美国加征关税的进行的反制措施引发市场情绪的大幅波动,人民币汇率出现大幅的贬值动能,金融市场受到非常明显的冲击。尤其是波动率起来之后,对于股市的表现尤其不安。隔夜美国股市出现明显的下行走势,这…...
2024/4/25 18:39:16 - 【外汇早评】美伊僵持,风险情绪继续升温
原标题:【外汇早评】美伊僵持,风险情绪继续升温昨日沙特两艘油轮再次发生爆炸事件,导致波斯湾局势进一步恶化,市场担忧美伊可能会出现摩擦生火,避险品种获得支撑,黄金和日元大幅走强。美指受中美贸易问题影响而在低位震荡。继5月12日,四艘商船在阿联酋领海附近的阿曼湾、…...
2024/4/28 1:34:08 - 【原油贵金属早评】贸易冲突导致需求低迷,油价弱势
原标题:【原油贵金属早评】贸易冲突导致需求低迷,油价弱势近日虽然伊朗局势升温,中东地区几起油船被袭击事件影响,但油价并未走高,而是出于调整结构中。由于市场预期局势失控的可能性较低,而中美贸易问题导致的全球经济衰退风险更大,需求会持续低迷,因此油价调整压力较…...
2024/4/26 19:03:37 - 氧生福地 玩美北湖(上)——为时光守候两千年
原标题:氧生福地 玩美北湖(上)——为时光守候两千年一次说走就走的旅行,只有一张高铁票的距离~ 所以,湖南郴州,我来了~ 从广州南站出发,一个半小时就到达郴州西站了。在动车上,同时改票的南风兄和我居然被分到了一个车厢,所以一路非常愉快地聊了过来。 挺好,最起…...
2024/4/28 1:22:35 - 氧生福地 玩美北湖(中)——永春梯田里的美与鲜
原标题:氧生福地 玩美北湖(中)——永春梯田里的美与鲜一觉醒来,因为大家太爱“美”照,在柳毅山庄去寻找龙女而错过了早餐时间。近十点,向导坏坏还是带着饥肠辘辘的我们去吃郴州最富有盛名的“鱼头粉”。说这是“十二分推荐”,到郴州必吃的美食之一。 哇塞!那个味美香甜…...
2024/4/25 18:39:14 - 氧生福地 玩美北湖(下)——奔跑吧骚年!
原标题:氧生福地 玩美北湖(下)——奔跑吧骚年!让我们红尘做伴 活得潇潇洒洒 策马奔腾共享人世繁华 对酒当歌唱出心中喜悦 轰轰烈烈把握青春年华 让我们红尘做伴 活得潇潇洒洒 策马奔腾共享人世繁华 对酒当歌唱出心中喜悦 轰轰烈烈把握青春年华 啊……啊……啊 两…...
2024/4/26 23:04:58 - 扒开伪装医用面膜,翻六倍价格宰客,小姐姐注意了!
原标题:扒开伪装医用面膜,翻六倍价格宰客,小姐姐注意了!扒开伪装医用面膜,翻六倍价格宰客!当行业里的某一品项火爆了,就会有很多商家蹭热度,装逼忽悠,最近火爆朋友圈的医用面膜,被沾上了污点,到底怎么回事呢? “比普通面膜安全、效果好!痘痘、痘印、敏感肌都能用…...
2024/4/27 23:24:42 - 「发现」铁皮石斛仙草之神奇功效用于医用面膜
原标题:「发现」铁皮石斛仙草之神奇功效用于医用面膜丽彦妆铁皮石斛医用面膜|石斛多糖无菌修护补水贴19大优势: 1、铁皮石斛:自唐宋以来,一直被列为皇室贡品,铁皮石斛生于海拔1600米的悬崖峭壁之上,繁殖力差,产量极低,所以古代仅供皇室、贵族享用 2、铁皮石斛自古民间…...
2024/4/28 5:48:52 - 丽彦妆\医用面膜\冷敷贴轻奢医学护肤引导者
原标题:丽彦妆\医用面膜\冷敷贴轻奢医学护肤引导者【公司简介】 广州华彬企业隶属香港华彬集团有限公司,专注美业21年,其旗下品牌: 「圣茵美」私密荷尔蒙抗衰,产后修复 「圣仪轩」私密荷尔蒙抗衰,产后修复 「花茵莳」私密荷尔蒙抗衰,产后修复 「丽彦妆」专注医学护…...
2024/4/26 19:46:12 - 广州械字号面膜生产厂家OEM/ODM4项须知!
原标题:广州械字号面膜生产厂家OEM/ODM4项须知!广州械字号面膜生产厂家OEM/ODM流程及注意事项解读: 械字号医用面膜,其实在我国并没有严格的定义,通常我们说的医美面膜指的应该是一种「医用敷料」,也就是说,医用面膜其实算作「医疗器械」的一种,又称「医用冷敷贴」。 …...
2024/4/27 11:43:08 - 械字号医用眼膜缓解用眼过度到底有无作用?
原标题:械字号医用眼膜缓解用眼过度到底有无作用?医用眼膜/械字号眼膜/医用冷敷眼贴 凝胶层为亲水高分子材料,含70%以上的水分。体表皮肤温度传导到本产品的凝胶层,热量被凝胶内水分子吸收,通过水分的蒸发带走大量的热量,可迅速地降低体表皮肤局部温度,减轻局部皮肤的灼…...
2024/4/27 8:32:30 - 配置失败还原请勿关闭计算机,电脑开机屏幕上面显示,配置失败还原更改 请勿关闭计算机 开不了机 这个问题怎么办...
解析如下:1、长按电脑电源键直至关机,然后再按一次电源健重启电脑,按F8健进入安全模式2、安全模式下进入Windows系统桌面后,按住“winR”打开运行窗口,输入“services.msc”打开服务设置3、在服务界面,选中…...
2022/11/19 21:17:18 - 错误使用 reshape要执行 RESHAPE,请勿更改元素数目。
%读入6幅图像(每一幅图像的大小是564*564) f1 imread(WashingtonDC_Band1_564.tif); subplot(3,2,1),imshow(f1); f2 imread(WashingtonDC_Band2_564.tif); subplot(3,2,2),imshow(f2); f3 imread(WashingtonDC_Band3_564.tif); subplot(3,2,3),imsho…...
2022/11/19 21:17:16 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机...
win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”问题的解决方法在win7系统关机时如果有升级系统的或者其他需要会直接进入一个 等待界面,在等待界面中我们需要等待操作结束才能关机,虽然这比较麻烦,但是对系统进行配置和升级…...
2022/11/19 21:17:15 - 台式电脑显示配置100%请勿关闭计算机,“准备配置windows 请勿关闭计算机”的解决方法...
有不少用户在重装Win7系统或更新系统后会遇到“准备配置windows,请勿关闭计算机”的提示,要过很久才能进入系统,有的用户甚至几个小时也无法进入,下面就教大家这个问题的解决方法。第一种方法:我们首先在左下角的“开始…...
2022/11/19 21:17:14 - win7 正在配置 请勿关闭计算机,怎么办Win7开机显示正在配置Windows Update请勿关机...
置信有很多用户都跟小编一样遇到过这样的问题,电脑时发现开机屏幕显现“正在配置Windows Update,请勿关机”(如下图所示),而且还需求等大约5分钟才干进入系统。这是怎样回事呢?一切都是正常操作的,为什么开时机呈现“正…...
2022/11/19 21:17:13 - 准备配置windows 请勿关闭计算机 蓝屏,Win7开机总是出现提示“配置Windows请勿关机”...
Win7系统开机启动时总是出现“配置Windows请勿关机”的提示,没过几秒后电脑自动重启,每次开机都这样无法进入系统,此时碰到这种现象的用户就可以使用以下5种方法解决问题。方法一:开机按下F8,在出现的Windows高级启动选…...
2022/11/19 21:17:12 - 准备windows请勿关闭计算机要多久,windows10系统提示正在准备windows请勿关闭计算机怎么办...
有不少windows10系统用户反映说碰到这样一个情况,就是电脑提示正在准备windows请勿关闭计算机,碰到这样的问题该怎么解决呢,现在小编就给大家分享一下windows10系统提示正在准备windows请勿关闭计算机的具体第一种方法:1、2、依次…...
2022/11/19 21:17:11 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”的解决方法...
今天和大家分享一下win7系统重装了Win7旗舰版系统后,每次关机的时候桌面上都会显示一个“配置Windows Update的界面,提示请勿关闭计算机”,每次停留好几分钟才能正常关机,导致什么情况引起的呢?出现配置Windows Update…...
2022/11/19 21:17:10 - 电脑桌面一直是清理请关闭计算机,windows7一直卡在清理 请勿关闭计算机-win7清理请勿关机,win7配置更新35%不动...
只能是等着,别无他法。说是卡着如果你看硬盘灯应该在读写。如果从 Win 10 无法正常回滚,只能是考虑备份数据后重装系统了。解决来方案一:管理员运行cmd:net stop WuAuServcd %windir%ren SoftwareDistribution SDoldnet start WuA…...
2022/11/19 21:17:09 - 计算机配置更新不起,电脑提示“配置Windows Update请勿关闭计算机”怎么办?
原标题:电脑提示“配置Windows Update请勿关闭计算机”怎么办?win7系统中在开机与关闭的时候总是显示“配置windows update请勿关闭计算机”相信有不少朋友都曾遇到过一次两次还能忍但经常遇到就叫人感到心烦了遇到这种问题怎么办呢?一般的方…...
2022/11/19 21:17:08 - 计算机正在配置无法关机,关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机...
关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!关机提示 windows7 正在配…...
2022/11/19 21:17:05 - 钉钉提示请勿通过开发者调试模式_钉钉请勿通过开发者调试模式是真的吗好不好用...
钉钉请勿通过开发者调试模式是真的吗好不好用 更新时间:2020-04-20 22:24:19 浏览次数:729次 区域: 南阳 > 卧龙 列举网提醒您:为保障您的权益,请不要提前支付任何费用! 虚拟位置外设器!!轨迹模拟&虚拟位置外设神器 专业用于:钉钉,外勤365,红圈通,企业微信和…...
2022/11/19 21:17:05 - 配置失败还原请勿关闭计算机怎么办,win7系统出现“配置windows update失败 还原更改 请勿关闭计算机”,长时间没反应,无法进入系统的解决方案...
前几天班里有位学生电脑(windows 7系统)出问题了,具体表现是开机时一直停留在“配置windows update失败 还原更改 请勿关闭计算机”这个界面,长时间没反应,无法进入系统。这个问题原来帮其他同学也解决过,网上搜了不少资料&#x…...
2022/11/19 21:17:04 - 一个电脑无法关闭计算机你应该怎么办,电脑显示“清理请勿关闭计算机”怎么办?...
本文为你提供了3个有效解决电脑显示“清理请勿关闭计算机”问题的方法,并在最后教给你1种保护系统安全的好方法,一起来看看!电脑出现“清理请勿关闭计算机”在Windows 7(SP1)和Windows Server 2008 R2 SP1中,添加了1个新功能在“磁…...
2022/11/19 21:17:03 - 请勿关闭计算机还原更改要多久,电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机怎么办...
许多用户在长期不使用电脑的时候,开启电脑发现电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机。。.这要怎么办呢?下面小编就带着大家一起看看吧!如果能够正常进入系统,建议您暂时移…...
2022/11/19 21:17:02 - 还原更改请勿关闭计算机 要多久,配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以...
配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!配置windows update失败 还原更改 请勿关闭计算机&#x…...
2022/11/19 21:17:01 - 电脑配置中请勿关闭计算机怎么办,准备配置windows请勿关闭计算机一直显示怎么办【图解】...
不知道大家有没有遇到过这样的一个问题,就是我们的win7系统在关机的时候,总是喜欢显示“准备配置windows,请勿关机”这样的一个页面,没有什么大碍,但是如果一直等着的话就要两个小时甚至更久都关不了机,非常…...
2022/11/19 21:17:00 - 正在准备配置请勿关闭计算机,正在准备配置windows请勿关闭计算机时间长了解决教程...
当电脑出现正在准备配置windows请勿关闭计算机时,一般是您正对windows进行升级,但是这个要是长时间没有反应,我们不能再傻等下去了。可能是电脑出了别的问题了,来看看教程的说法。正在准备配置windows请勿关闭计算机时间长了方法一…...
2022/11/19 21:16:59 - 配置失败还原请勿关闭计算机,配置Windows Update失败,还原更改请勿关闭计算机...
我们使用电脑的过程中有时会遇到这种情况,当我们打开电脑之后,发现一直停留在一个界面:“配置Windows Update失败,还原更改请勿关闭计算机”,等了许久还是无法进入系统。如果我们遇到此类问题应该如何解决呢࿰…...
2022/11/19 21:16:58 - 如何在iPhone上关闭“请勿打扰”
Apple’s “Do Not Disturb While Driving” is a potentially lifesaving iPhone feature, but it doesn’t always turn on automatically at the appropriate time. For example, you might be a passenger in a moving car, but your iPhone may think you’re the one dri…...
2022/11/19 21:16:57