如何设计类似Google drive的系统?-Google Drive的系统设计分析
系统设计是软件工程中最重要和最令人担忧的方面之一。这种观点来自我自己在r架构课程中的学习经验。当我开始架课程时,我很难理解设计系统的想法。
主要原因之一是,一开始很难理解软件体系结构书籍中使用的术语,并且没有明确的分步指南。 每个人似乎都有不同的方法。 当然,还有一个心理障碍是这些可能本来就很难理解。
因此,我根据自己学习架构课程的经验着手设计一个系统。第一个是关于Google Auto Suggestion的。为此,让我们设计一种云文件存储服务,例如Google Drive。它是一个文件存储 和同步服务,使用户可以将其数据存储在远程服务器上。
现在,那些已经使用过Google Drive的人知道我们可以从任何设备上传任何大小的文件,并且可以在我们的手机,笔记本电脑,个人计算机等设备上找到这些文件。我们很多人想知道该系统如何处理如此大量的文件。在本文中,我们将设计一个Google Drive服务!!
★系统定义
我们需要澄清系统的目标。 系统设计是一个巨大的话题。如果我们不将其范围缩小到特定目的,那么设计系统就会变得复杂,尤其是对于新手。
用户应该能够从任何设备上载和下载文件/照片。并且文件将在用户登录的所有设备中同步。
如果考虑到服务中有1000万用户,每天有1亿个请求,那么写入和读取操作的数量将是巨大的。为简化起见,我们仅设计Google云端硬盘存储空间。换句话说,用户可以上传和下载文件,从而有效地将它们存储在云中。
★系统要求
在这一部分中,我们决定系统的功能。我们可以将这些要求分为两部分:
-
功能要求:
用户应该能够从任何设备上载和下载文件。并且文件将在用户登录的所有设备中同步。
这些是系统的主要目标。这是系统必须交付的要求。 -
非功能需求NFR:
现在分析的更关键的要求。让我们定义我们的NFR:
用户可以从任何设备上载和下载文件。该服务应支持存储最大1 GB的单个大文件。服务应在设备之间自动同步;如果一个文件是从设备上传的,则应在用户登录的所有设备上同步该文件。
★服务器端组件设计
对于系统设计的新手,请记住:“如果您对从哪里开始系统设计感到困惑,请尝试从数据流开始。”
我们在该系统中的用户可以上传和下载文件。用户从客户端应用程序/浏览器上载文件,服务器将存储它们。用户可以从服务器下载更新的文件。因此,让我们看看我们如何为如此大量的用户处理文件的上传和下载。
上传/下载文件:
从图中可以看到,如果我们上传完整大小的文件,则会浪费我们的存储和带宽。而且,延迟会增加以完成上载或下载。
图:完整文件传输需要更多时间,存储空间和带宽。
高效处理文件传输:
我们可以将每个文件分成较小的块。然后,我们只能更改数据的小片段,而不是整个文件。万一数据上传失败,该策略也将有所帮助。我们需要将每个文件划分为固定大小,例如2 MB。
图:将文件分成较小的块以优化存储利用率和带宽
我们的块大小需要更小。这将有助于优化空间利用率,而网络带宽是做出决定时的另一个考虑因素。元数据应包括每个文件的块信息的记录。
我们可以假设文件需要存储在2 MB的小块中。如果进程失败,则在文件较小的部分重试操作的情况下,我们也会受益。 如果未上传文件,则仅重试失败的块。
客户端和云存储之间较少的数据传输量将帮助我们获得更好的响应时间。不用发送整个文件,我们只需要发送文件的修改后的块。
图:仅传输更新的块
在这种情况下,文件的更新部分将被传输。我们将把文件分成2MB的块,并仅传输文件的修改部分,如下图所示。
从上图可以看到,我们没有更新整个10 MB的文件,而是更新了文件的修改后的2MB部分。它将为用户减少带宽消耗和云存储。最重要的是,响应时间将更快。
客户端离线时会发生什么?
客户端组件Watcher将观察客户端文件夹。如果用户发生任何更改,它将通知索引控制器(Index Controller,另一个客户端组件)有关用户操作的信息。它还将监视其他客户端(设备)是否发生任何更改,这些更改由Notification Server广播。
当元数据服务收到更新/上传请求时,它需要检查元数据数据库的一致性,然后继续进行更新。 之后,将向所有订阅的设备发送通知以报告文件更新。
元数据数据库:
我们需要一个负责保存有关文件,用户等信息的数据库。它可以是关系数据库,例如MySQL或NoSQL,例如MongoDB。我们需要将数据块,文件,用户信息等保存在数据库中。
众所周知, 我们必须在两种类型的数据库(SQL或NoSQL)之间进行选择。无论我们选择什么,我们都需要确保数据的一致性。
使用SQL数据库可以为我们提供同步实现的好处,因为它们支持ACID属性。
NoSQL数据库不支持ACID属性。但是它们提供了对可伸缩性和性能的支持。因此,我们需要在Metadata Server的逻辑中以编程方式为此类数据库提供对ACID属性的支持。
同步:
现在,客户端从设备更新文件。需要有一个组件来处理更新并将更改应用到其他设备。它需要同步客户端的本地数据库和远程元数据数据库。MetaData服务器可以执行这项工作来管理元数据并同步用户的文件。
消息队列:
现在考虑一下;如此大量的用户正在同时上传文件,服务器如何处理如此大量的请求。为了能够处理如此大量的请求,我们可能在客户端和服务器之间使用消息队列。
图:消息传递队列提供可伸缩的请求排队和更改通知,以使用pull或push策略支持大量客户端。
当目标程序忙或未连接时,消息队列提供临时消息存储。它提供了异步通信协议。它 是一种将消息放入队列并且不需要立即响应即可继续处理的系统。RabbitMQ,Apache Kafka等是消息传递队列的一些示例。
如果是消息队列,则一旦客户端接收到消息,就会从队列中删除消息。因此,我们需要为客户端的每个订阅的设备创建几个响应队列。
图:每种设备类型的响应消息队列
对于大量用户,我们需要一个可伸缩的消息队列,该队列支持客户端和同步服务之间基于异步消息的通信。该服务应该能够在高度可用,可靠和可伸缩的队列中有效地存储任意数量的消息。例如:apache Kafka,rabbitMQ等。
云储存:
如今,有许多平台和操作系统,例如智能手机,笔记本电脑,个人计算机等。它们可随时随地提供移动访问。
如果您将文件保存在笔记本电脑的本地存储中,并且出门在外但想在手机上使用它,那么如何获取数据?这就是为什么我们需要云存储作为解决方案。
它存储用户上传的文件(块)。客户端可以通过文件处理服务器与存储进行交互,以从存储发送和接收对象。它只保存文件;元数据DB保留块大小和文件编号的数据。
文件处理工作流程:
客户端A将块上传到云存储。客户端A使用元数据服务器更新元数据并提交对MetadataDB的更改。客户端得到确认,并将通知发送到同一用户的其他设备。其他设备接收元数据更改并从云存储下载更新的块。
图:客户端A的文件处理工作流程
★可扩展性
我们需要对元数据数据库进行分区,以便可以存储约100万用户和数十亿个文件/块的信息。我们可以对数据进行分区,以在服务器上分配读写请求。
元数据分区:
- 我们可以基于文件路径的首字母将文件块存储在分区中。例如,我们将所有以字母“ A”开头的文件保留在一个分区中,并将所有以字母“ B”开头的文件保留在另一个分区中,依此类推。这称为基于范围的分区。不太频繁出现的字母(例如“ Z”或“ Y”),我们可以将它们组合成一个分区。
主要问题是,某些字母在首字母的情况下很常见。例如,如果我们将所有以字母“ A”开头的文件放入一个数据库分区中,而我们有太多以字母“ A”开头的文件,那么我们就无法将它们放入一个数据库分区中。 - 我们也可以基于文件’fileId’的哈希值进行分区。我们的哈希函数将随机生成一个服务器号,并将文件存储在该服务器中。 但是我们可能需要要求所有服务器找到列表,然后将它们合并在一起以得到结果。因此,响应时间延迟可能会增加。
如果我们使用这种方法,它仍然会导致分区过载,这可以通过使用“一致性哈希”来解决。
缓存:
众所周知,缓存是提高性能的常用技术。这对于降低延迟非常有帮助。服务器可以在访问数据库之前检查缓存服务器,以查看搜索列表是否已在缓存中。我们不能将所有数据都保存在缓存中。
当缓存已满时,我们需要用一个更新的块替换一个块。Least Recently Used(LRU)可以用于此系统。在这种方法中,首先从高速缓存中删除最近最少使用的块。
★安全性:
在文件共享服务中,用户数据的私密性和安全性至关重要。为了解决这个问题,我们可以将每个文件的权限存储在元数据数据库中,哪些文件可由哪个用户查看或修改。
★客户端:
客户端应用程序(Web或移动设备)传输用户上传到云存储中的所有文件。该应用程序将上传,下载或修改文件到云存储。客户端可以更新元数据,例如重命名文件名,编辑文件等。
客户端应用程序功能包括上传,下载文件。如上所述,我们将每个文件分成2MB的较小块,以便仅传输修改后的块,而不传输整个文件。
如果由于用户的离线状态而引起任何冲突,则应用需要对其进行处理。现在,我们可以在客户端保留元数据的本地副本,以使我们能够进行脱机更新。
客户端应用程序需要检测客户端文件夹中的文件是否已更改。我们可能有一个组件Watcher。它将检查客户端是否发生任何文件更改。
★客户如何知道云存储已完成更改?
客户端可以定期与服务器核对是否有任何更改,这是一项手动策略。但是,如果客户端经常检查服务器的更改,则会给服务器带来压力,使服务器繁忙。
我们可以使用HTTP 长时间轮询 技术。 在这种技术中,服务器不会立即响应客户端请求。服务器不发送空响应,而是使请求保持打开状态。 一旦准备好新信息,服务器就会向客户端发送响应。
图:客户端应用程序向元数据服务器请求更新元数据信息
我们可以将客户端应用程序分为以下几部分:
- 本地数据库将跟踪客户端系统中的所有文件,块,目录路径等。
- 块控制器会将文件分割成较小的部分。它还将负责从其块中重建整个文件。这部分将有助于确定文件的最新修改块。而且仅将文件的已修改块发送到服务器,这将节省带宽和服务器计算时间。
- 守望者会观察客户端文件夹,如果用户发生任何变化,它会通知索引控制器对用户的作用。它还将监视由同步服务广播的其他客户端(设备)上是否发生了任何更改。
- 索引控制器将处理从观察程序收到的事件,并更新有关已修改文件块信息的本地数据库。它将与元数据服务通信,以将更改传送到其他设备并更新元数据数据库。该请求将通过消息请求队列发送到元数据服务。
下面是系统的完整图:
图:Google驱动器的系统设计
★结论:
在此系统中,我们未考虑UI部分。系统中也未考虑更新和脱机编辑的历史记录。移动客户端可以按需同步以节省用户的带宽和空间。在这里,我们没有使用其他服务器进行同步。元数据服务器正在执行该任务。
我们决定将文件分成较小的块,以节省存储空间,带宽使用并减少延迟。 我们添加了Loadbalancer,以在后端服务器之间平均分配传入请求。如果服务器停止工作了,则LB将停止向其发送任何请求。
在云架构中,用户数据的隐私和安全性至关重要。我们可以将每个文件的权限存储在元数据数据库中,以检查哪些文件对哪个用户可见或可以修改。
参见原文.
Charles @ Shenzhen,
2020-sep-23
如若内容造成侵权/违法违规/事实不符,请联系编程学习网邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
相关文章
- 编程的学习过程永远不会结束
务必牢记:你的学习过程永远不会结束。高速发展的软件产业,会导致新技术和新进展几乎每天都会出现。一旦你学会了编程,你就必须花时间去学习适应这些新的进步。你不能依靠你的工作来为你提供这种培训。只有你自己负责自己的职业发展࿰…...
2024/4/21 22:14:07 - 笔记--》①Linux 文件与目录管理②Linux用户和用户组管理③Linux磁盘管理④Linux vi/vim⑤Linux apt 命令⑥软连接和硬连接
Linux 文件与目录管理 绝对路径:路径的写法,由根目录 / 写起 相对路径:路径的写法,不是由 / 写起 处理目录的常用命令 ls(英文全拼:list files): 列出目录及文件名–ls 选项 目录名称 选项&am…...
2024/4/27 4:35:33 - 上海哪里可以开餐饮费发票
上海哪里可以开餐饮费发票正规税务业务代理处【电微13428911867】【公司财务做账、报销、冲账第一选择】【点数从优】【验证后付款】【全行最低价】【欢迎咨询】在Word中点bai 编辑 替换 上面输入 ? 下面输入^du&和一个空格。 注意zh…...
2024/4/17 4:59:07 - Linux全笔记(1)
ls -a -l -d 目录处理 如果查找某个目录的详细信息的话 ls -ld /xxx mkdir 创建 然后加上-p就可以允许在没有目录的情况下进行递归创建 也就是无中生有 cp -rp 原文件 目标目录 但是属性时间是不一样的 如果想copy后保存原来属性的话就用 -p 然后-r就是复制目录 mv即是删除&am…...
2024/4/22 19:25:31 - vue-router导航守卫
为什么使用导航守卫? 在一个SPA应用中,如何改变网页的标题? 网页标题是...
2024/4/21 15:13:14 - PostGIS中的拓扑关系及函数(二)
PostGIS提供了若干拓扑关系函数,本文介绍如下函数: 1. ST_LineCrossingDirection #线之间的交叉方向 2. ST_Disjoint #不相交 3. ST_Equals #相等ST_LineCrossingDirection-线之间的交叉方向 定义 integer ST_LineCrossin…...
2024/4/30 9:07:13 - ConcurrentLinkedDeque
本篇文章是【Java集合系列】文章队列篇的第二篇,本系列将会逐个分析 Java 中的常用集合的特性及实现,然后对比不同场景下应该选择哪种集合使用。 List 系列 ArrayListLinkedListCopyOnWriteArrayList Queue系列 ArrayDequeConcurrentLinkedDequeLink…...
2024/4/9 7:33:35 - 基于单片机的电子密码锁设计
基于单片机控制的电子密码锁 摘要:本系统由单片机系统、矩阵键盘、LED显示和报警系统组成。系统能完成开锁、超时报警、超次锁定、管理员解密、修改用户密码基本的密码锁的功能。除上述基本的密码锁功能外,还具有调电存储、声光提示等功能…...
2024/4/26 12:04:07 - task07字典打卡《python基础》p80-p88
字典 什么是字典? ~键(key) ~值(value) ~key-value对 如何创建字典 ~直接创建 ~利用dict函数 >>> aInfo {Wangdachui: 3000, Niuyun:2000, Linling:4500, Tianqi:8000} >>> info [(Wangdachui,…...
2024/4/30 12:07:09 - 2020工具钳工(中级)模拟考试题库及工具钳工(中级)理论考试
题库来源:安全生产模拟考试一点通公众号小程序 2020工具钳工(中级)模拟考试题库及工具钳工(中级)理论考试,包含工具钳工(中级)模拟考试题库答案解析及工具钳工(中级&…...
2024/4/29 23:18:37 - nginx部署vue-admin-template
nginx部署vue-admin-template (当前在windows本机部署) Linux服务器部署可参照该过程1、安装nginx 下载nginx压缩包 http://nginx.org/en/download.html下载完成后解压缩包,进入nginx根目录、使用命令启动nginx: start nginx 浏览器输入localhost:80,若页面跳转n…...
2024/4/26 22:43:40 - 剑指offer-24 -- 二叉树中和为某一值的路径 - C++
题目描述 输入一颗二叉树的根节点和一个整数,按字典序打印出二叉树中结点值的和为输入整数的所有路径。路径定义为从树的根结点开始往下一直到叶结点所经过的结点形成一条路径。 题解 题目抽象:给定一颗二叉树,找出满足从根节点到叶子节点…...
2024/4/25 15:44:36 - HTML的文本框文字进行垂直对齐的方法
HTML的文本框文字进行垂直对齐的效果如图: 所采用的方法是用表格的方法 代码如下: <!DOCTYPE html> <html> <head> <meta charset"UTF-8"> <title>Insert title here</title> <style type"text/…...
2024/4/30 11:13:48 - SpringCloud———Eureka注册中心实现高可用
spring-cloud为基础的微服务架构,所有的微服务都需要注册到注册中心,如果这个注册中心阻塞或者崩了,那么整个系统都无法继续正常提供服务,所以,这里就需要对注册中心进行集群,换言之,高可用。 …...
2024/4/17 5:08:48 - 上海哪里可以开建材发票
上海哪里可以开建材发票正规税务业务代理处【电微13428911867】【公司财务做账、报销、冲账第一选择】【点数从优】【验证后付款】【全行最低价】【欢迎咨询】在Word中点bai 编辑 替换 上面输入 ? 下面输入^du&和一个空格。 注意zhi&am…...
2024/4/10 14:22:47 - ThreadLocal一次性解决老大难问题
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 ThreadLocalThreadlocal使用场景一、故事从两个线程开始二、线程池来帮忙,却好心帮坏事1. 10个线程打印日期2、1000个线程打印日期3.使用Synchronized解决线程安全…...
2024/4/21 14:31:44 - 《MySQL 入门教程》第 30 篇 数据库索引
文章目录 30.1 创建索引30.2 查看索引30.3 修改索引30.4 删除索引数据库索引(Index)就像书籍后面的关键字索引,按照关键字进行排序,并且提供了指向具体内容的页码。索引可以用于提高数据库的查询性能;但是索引需要占用额外的磁盘空间,修改数据时也需要进行索引的维护。了…...
2024/4/12 21:27:07 - 在配置类上写@CompentScan注解来进行包扫描
Configuration ComponentScan(basePackages {"com.leon.testcompentscan"}) public class MainConfig {}...
2024/4/26 9:21:50 - 2020土建方向-通用基础(施工员)复审模拟考试及土建方向-通用基础(施工员)模拟考试系统
题库来源:安全生产模拟考试一点通公众号小程序 2020土建方向-通用基础(施工员)复审模拟考试及土建方向-通用基础(施工员)模拟考试系统,包含土建方向-通用基础(施工员)复审模拟考试答案解析及土建方向-通用基础(施工员)模拟考试系统练习。由安全生产模拟…...
2024/4/26 1:19:06 - centos7 python3+django+uwsgi+nginx配置,部署
1、安装uwsgi pip3 install uwsgi2、新建一个uwsgi.ini /djangotestvi uwsgi.ini:wq这里是uwsgi.ini的内容 # uwsgi.ini file [uwsgi] socket 127.0.0.1:5555 # 项目目录 chdir /djangotest/demosite # 项目目录下的djangos 文件服务器文件 module demosite.wsgi # 主进程…...
2024/4/16 0:22:58
最新文章
- 【记录】Springboot项目集成docker实现一键部署
公司管理平台完成后,为了方便其他不懂开发的同事部署和测试,集成docker进行一键部署,也为后面自动化部署做准备。本文做个简单记录。 1、安装docker yum install https://download.docker.com/linux/fedora/30/x86_64/stable/Packages/cont…...
2024/5/2 11:53:00 - 梯度消失和梯度爆炸的一些处理方法
在这里是记录一下梯度消失或梯度爆炸的一些处理技巧。全当学习总结了如有错误还请留言,在此感激不尽。 权重和梯度的更新公式如下: w w − η ⋅ ∇ w w w - \eta \cdot \nabla w ww−η⋅∇w 个人通俗的理解梯度消失就是网络模型在反向求导的时候出…...
2024/3/20 10:50:27 - 基于AI智能识别技术的智慧展览馆视频监管方案设计
一、建设背景 随着科技的不断进步和社会安全需求的日益增长,展览馆作为展示文化、艺术和科技成果的重要场所,其安全监控系统的智能化升级已成为当务之急。为此,旭帆科技(TSINGSEE青犀)基于视频智能分析技术推出了展览…...
2024/4/30 17:11:11 - 【Web爬虫】爬⾍⿊⻰江省与四川省农机补贴以及数据分析
目录 一、实验目的 二、实验内容 2.1 实验爬取数据选择 2.2python代码爬取数据 2.3数据处理与分析 三、实验原理 3.1 python 连接网页的两种方式 3.1.1 使用requests连接网页 3.1.2 使用from selenium import webdriver连接网页,创建网页测试 3.2 python …...
2024/5/1 4:00:52 - 416. 分割等和子集问题(动态规划)
题目 题解 class Solution:def canPartition(self, nums: List[int]) -> bool:# badcaseif not nums:return True# 不能被2整除if sum(nums) % 2 ! 0:return False# 状态定义:dp[i][j]表示当背包容量为j,用前i个物品是否正好可以将背包填满ÿ…...
2024/5/2 11:19:01 - 【Java】ExcelWriter自适应宽度工具类(支持中文)
工具类 import org.apache.poi.ss.usermodel.Cell; import org.apache.poi.ss.usermodel.CellType; import org.apache.poi.ss.usermodel.Row; import org.apache.poi.ss.usermodel.Sheet;/*** Excel工具类** author xiaoming* date 2023/11/17 10:40*/ public class ExcelUti…...
2024/5/1 13:20:04 - Spring cloud负载均衡@LoadBalanced LoadBalancerClient
LoadBalance vs Ribbon 由于Spring cloud2020之后移除了Ribbon,直接使用Spring Cloud LoadBalancer作为客户端负载均衡组件,我们讨论Spring负载均衡以Spring Cloud2020之后版本为主,学习Spring Cloud LoadBalance,暂不讨论Ribbon…...
2024/5/1 21:18:12 - TSINGSEE青犀AI智能分析+视频监控工业园区周界安全防范方案
一、背景需求分析 在工业产业园、化工园或生产制造园区中,周界防范意义重大,对园区的安全起到重要的作用。常规的安防方式是采用人员巡查,人力投入成本大而且效率低。周界一旦被破坏或入侵,会影响园区人员和资产安全,…...
2024/5/2 9:47:31 - VB.net WebBrowser网页元素抓取分析方法
在用WebBrowser编程实现网页操作自动化时,常要分析网页Html,例如网页在加载数据时,常会显示“系统处理中,请稍候..”,我们需要在数据加载完成后才能继续下一步操作,如何抓取这个信息的网页html元素变化&…...
2024/5/2 9:47:31 - 【Objective-C】Objective-C汇总
方法定义 参考:https://www.yiibai.com/objective_c/objective_c_functions.html Objective-C编程语言中方法定义的一般形式如下 - (return_type) method_name:( argumentType1 )argumentName1 joiningArgument2:( argumentType2 )argumentName2 ... joiningArgu…...
2024/5/2 6:03:07 - 【洛谷算法题】P5713-洛谷团队系统【入门2分支结构】
👨💻博客主页:花无缺 欢迎 点赞👍 收藏⭐ 留言📝 加关注✅! 本文由 花无缺 原创 收录于专栏 【洛谷算法题】 文章目录 【洛谷算法题】P5713-洛谷团队系统【入门2分支结构】🌏题目描述🌏输入格…...
2024/5/2 9:47:30 - 【ES6.0】- 扩展运算符(...)
【ES6.0】- 扩展运算符... 文章目录 【ES6.0】- 扩展运算符...一、概述二、拷贝数组对象三、合并操作四、参数传递五、数组去重六、字符串转字符数组七、NodeList转数组八、解构变量九、打印日志十、总结 一、概述 **扩展运算符(...)**允许一个表达式在期望多个参数࿰…...
2024/5/1 11:24:00 - 摩根看好的前智能硬件头部品牌双11交易数据极度异常!——是模式创新还是饮鸩止渴?
文 | 螳螂观察 作者 | 李燃 双11狂欢已落下帷幕,各大品牌纷纷晒出优异的成绩单,摩根士丹利投资的智能硬件头部品牌凯迪仕也不例外。然而有爆料称,在自媒体平台发布霸榜各大榜单喜讯的凯迪仕智能锁,多个平台数据都表现出极度异常…...
2024/5/2 5:31:39 - Go语言常用命令详解(二)
文章目录 前言常用命令go bug示例参数说明 go doc示例参数说明 go env示例 go fix示例 go fmt示例 go generate示例 总结写在最后 前言 接着上一篇继续介绍Go语言的常用命令 常用命令 以下是一些常用的Go命令,这些命令可以帮助您在Go开发中进行编译、测试、运行和…...
2024/5/1 20:22:59 - 用欧拉路径判断图同构推出reverse合法性:1116T4
http://cplusoj.com/d/senior/p/SS231116D 假设我们要把 a a a 变成 b b b,我们在 a i a_i ai 和 a i 1 a_{i1} ai1 之间连边, b b b 同理,则 a a a 能变成 b b b 的充要条件是两图 A , B A,B A,B 同构。 必要性显然࿰…...
2024/5/2 9:47:28 - 【NGINX--1】基础知识
1、在 Debian/Ubuntu 上安装 NGINX 在 Debian 或 Ubuntu 机器上安装 NGINX 开源版。 更新已配置源的软件包信息,并安装一些有助于配置官方 NGINX 软件包仓库的软件包: apt-get update apt install -y curl gnupg2 ca-certificates lsb-release debian-…...
2024/5/2 9:47:27 - Hive默认分割符、存储格式与数据压缩
目录 1、Hive默认分割符2、Hive存储格式3、Hive数据压缩 1、Hive默认分割符 Hive创建表时指定的行受限(ROW FORMAT)配置标准HQL为: ... ROW FORMAT DELIMITED FIELDS TERMINATED BY \u0001 COLLECTION ITEMS TERMINATED BY , MAP KEYS TERMI…...
2024/5/2 0:07:22 - 【论文阅读】MAG:一种用于航天器遥测数据中有效异常检测的新方法
文章目录 摘要1 引言2 问题描述3 拟议框架4 所提出方法的细节A.数据预处理B.变量相关分析C.MAG模型D.异常分数 5 实验A.数据集和性能指标B.实验设置与平台C.结果和比较 6 结论 摘要 异常检测是保证航天器稳定性的关键。在航天器运行过程中,传感器和控制器产生大量周…...
2024/5/2 8:37:00 - --max-old-space-size=8192报错
vue项目运行时,如果经常运行慢,崩溃停止服务,报如下错误 FATAL ERROR: CALL_AND_RETRY_LAST Allocation failed - JavaScript heap out of memory 因为在 Node 中,通过JavaScript使用内存时只能使用部分内存(64位系统&…...
2024/5/2 9:47:26 - 基于深度学习的恶意软件检测
恶意软件是指恶意软件犯罪者用来感染个人计算机或整个组织的网络的软件。 它利用目标系统漏洞,例如可以被劫持的合法软件(例如浏览器或 Web 应用程序插件)中的错误。 恶意软件渗透可能会造成灾难性的后果,包括数据被盗、勒索或网…...
2024/5/2 9:47:25 - JS原型对象prototype
让我简单的为大家介绍一下原型对象prototype吧! 使用原型实现方法共享 1.构造函数通过原型分配的函数是所有对象所 共享的。 2.JavaScript 规定,每一个构造函数都有一个 prototype 属性,指向另一个对象,所以我们也称为原型对象…...
2024/5/1 14:33:22 - C++中只能有一个实例的单例类
C中只能有一个实例的单例类 前面讨论的 President 类很不错,但存在一个缺陷:无法禁止通过实例化多个对象来创建多名总统: President One, Two, Three; 由于复制构造函数是私有的,其中每个对象都是不可复制的,但您的目…...
2024/5/1 11:51:23 - python django 小程序图书借阅源码
开发工具: PyCharm,mysql5.7,微信开发者工具 技术说明: python django html 小程序 功能介绍: 用户端: 登录注册(含授权登录) 首页显示搜索图书,轮播图࿰…...
2024/5/2 7:30:11 - 电子学会C/C++编程等级考试2022年03月(一级)真题解析
C/C++等级考试(1~8级)全部真题・点这里 第1题:双精度浮点数的输入输出 输入一个双精度浮点数,保留8位小数,输出这个浮点数。 时间限制:1000 内存限制:65536输入 只有一行,一个双精度浮点数。输出 一行,保留8位小数的浮点数。样例输入 3.1415926535798932样例输出 3.1…...
2024/5/1 20:56:20 - 配置失败还原请勿关闭计算机,电脑开机屏幕上面显示,配置失败还原更改 请勿关闭计算机 开不了机 这个问题怎么办...
解析如下:1、长按电脑电源键直至关机,然后再按一次电源健重启电脑,按F8健进入安全模式2、安全模式下进入Windows系统桌面后,按住“winR”打开运行窗口,输入“services.msc”打开服务设置3、在服务界面,选中…...
2022/11/19 21:17:18 - 错误使用 reshape要执行 RESHAPE,请勿更改元素数目。
%读入6幅图像(每一幅图像的大小是564*564) f1 imread(WashingtonDC_Band1_564.tif); subplot(3,2,1),imshow(f1); f2 imread(WashingtonDC_Band2_564.tif); subplot(3,2,2),imshow(f2); f3 imread(WashingtonDC_Band3_564.tif); subplot(3,2,3),imsho…...
2022/11/19 21:17:16 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机...
win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”问题的解决方法在win7系统关机时如果有升级系统的或者其他需要会直接进入一个 等待界面,在等待界面中我们需要等待操作结束才能关机,虽然这比较麻烦,但是对系统进行配置和升级…...
2022/11/19 21:17:15 - 台式电脑显示配置100%请勿关闭计算机,“准备配置windows 请勿关闭计算机”的解决方法...
有不少用户在重装Win7系统或更新系统后会遇到“准备配置windows,请勿关闭计算机”的提示,要过很久才能进入系统,有的用户甚至几个小时也无法进入,下面就教大家这个问题的解决方法。第一种方法:我们首先在左下角的“开始…...
2022/11/19 21:17:14 - win7 正在配置 请勿关闭计算机,怎么办Win7开机显示正在配置Windows Update请勿关机...
置信有很多用户都跟小编一样遇到过这样的问题,电脑时发现开机屏幕显现“正在配置Windows Update,请勿关机”(如下图所示),而且还需求等大约5分钟才干进入系统。这是怎样回事呢?一切都是正常操作的,为什么开时机呈现“正…...
2022/11/19 21:17:13 - 准备配置windows 请勿关闭计算机 蓝屏,Win7开机总是出现提示“配置Windows请勿关机”...
Win7系统开机启动时总是出现“配置Windows请勿关机”的提示,没过几秒后电脑自动重启,每次开机都这样无法进入系统,此时碰到这种现象的用户就可以使用以下5种方法解决问题。方法一:开机按下F8,在出现的Windows高级启动选…...
2022/11/19 21:17:12 - 准备windows请勿关闭计算机要多久,windows10系统提示正在准备windows请勿关闭计算机怎么办...
有不少windows10系统用户反映说碰到这样一个情况,就是电脑提示正在准备windows请勿关闭计算机,碰到这样的问题该怎么解决呢,现在小编就给大家分享一下windows10系统提示正在准备windows请勿关闭计算机的具体第一种方法:1、2、依次…...
2022/11/19 21:17:11 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”的解决方法...
今天和大家分享一下win7系统重装了Win7旗舰版系统后,每次关机的时候桌面上都会显示一个“配置Windows Update的界面,提示请勿关闭计算机”,每次停留好几分钟才能正常关机,导致什么情况引起的呢?出现配置Windows Update…...
2022/11/19 21:17:10 - 电脑桌面一直是清理请关闭计算机,windows7一直卡在清理 请勿关闭计算机-win7清理请勿关机,win7配置更新35%不动...
只能是等着,别无他法。说是卡着如果你看硬盘灯应该在读写。如果从 Win 10 无法正常回滚,只能是考虑备份数据后重装系统了。解决来方案一:管理员运行cmd:net stop WuAuServcd %windir%ren SoftwareDistribution SDoldnet start WuA…...
2022/11/19 21:17:09 - 计算机配置更新不起,电脑提示“配置Windows Update请勿关闭计算机”怎么办?
原标题:电脑提示“配置Windows Update请勿关闭计算机”怎么办?win7系统中在开机与关闭的时候总是显示“配置windows update请勿关闭计算机”相信有不少朋友都曾遇到过一次两次还能忍但经常遇到就叫人感到心烦了遇到这种问题怎么办呢?一般的方…...
2022/11/19 21:17:08 - 计算机正在配置无法关机,关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机...
关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!关机提示 windows7 正在配…...
2022/11/19 21:17:05 - 钉钉提示请勿通过开发者调试模式_钉钉请勿通过开发者调试模式是真的吗好不好用...
钉钉请勿通过开发者调试模式是真的吗好不好用 更新时间:2020-04-20 22:24:19 浏览次数:729次 区域: 南阳 > 卧龙 列举网提醒您:为保障您的权益,请不要提前支付任何费用! 虚拟位置外设器!!轨迹模拟&虚拟位置外设神器 专业用于:钉钉,外勤365,红圈通,企业微信和…...
2022/11/19 21:17:05 - 配置失败还原请勿关闭计算机怎么办,win7系统出现“配置windows update失败 还原更改 请勿关闭计算机”,长时间没反应,无法进入系统的解决方案...
前几天班里有位学生电脑(windows 7系统)出问题了,具体表现是开机时一直停留在“配置windows update失败 还原更改 请勿关闭计算机”这个界面,长时间没反应,无法进入系统。这个问题原来帮其他同学也解决过,网上搜了不少资料&#x…...
2022/11/19 21:17:04 - 一个电脑无法关闭计算机你应该怎么办,电脑显示“清理请勿关闭计算机”怎么办?...
本文为你提供了3个有效解决电脑显示“清理请勿关闭计算机”问题的方法,并在最后教给你1种保护系统安全的好方法,一起来看看!电脑出现“清理请勿关闭计算机”在Windows 7(SP1)和Windows Server 2008 R2 SP1中,添加了1个新功能在“磁…...
2022/11/19 21:17:03 - 请勿关闭计算机还原更改要多久,电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机怎么办...
许多用户在长期不使用电脑的时候,开启电脑发现电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机。。.这要怎么办呢?下面小编就带着大家一起看看吧!如果能够正常进入系统,建议您暂时移…...
2022/11/19 21:17:02 - 还原更改请勿关闭计算机 要多久,配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以...
配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!配置windows update失败 还原更改 请勿关闭计算机&#x…...
2022/11/19 21:17:01 - 电脑配置中请勿关闭计算机怎么办,准备配置windows请勿关闭计算机一直显示怎么办【图解】...
不知道大家有没有遇到过这样的一个问题,就是我们的win7系统在关机的时候,总是喜欢显示“准备配置windows,请勿关机”这样的一个页面,没有什么大碍,但是如果一直等着的话就要两个小时甚至更久都关不了机,非常…...
2022/11/19 21:17:00 - 正在准备配置请勿关闭计算机,正在准备配置windows请勿关闭计算机时间长了解决教程...
当电脑出现正在准备配置windows请勿关闭计算机时,一般是您正对windows进行升级,但是这个要是长时间没有反应,我们不能再傻等下去了。可能是电脑出了别的问题了,来看看教程的说法。正在准备配置windows请勿关闭计算机时间长了方法一…...
2022/11/19 21:16:59 - 配置失败还原请勿关闭计算机,配置Windows Update失败,还原更改请勿关闭计算机...
我们使用电脑的过程中有时会遇到这种情况,当我们打开电脑之后,发现一直停留在一个界面:“配置Windows Update失败,还原更改请勿关闭计算机”,等了许久还是无法进入系统。如果我们遇到此类问题应该如何解决呢࿰…...
2022/11/19 21:16:58 - 如何在iPhone上关闭“请勿打扰”
Apple’s “Do Not Disturb While Driving” is a potentially lifesaving iPhone feature, but it doesn’t always turn on automatically at the appropriate time. For example, you might be a passenger in a moving car, but your iPhone may think you’re the one dri…...
2022/11/19 21:16:57