通过Monstache实时同步MongoDB数据到Elasticsearch
当您的业务数据存储在MongoDB中,并且需要进行语义分析和大图展示时,可借助Elasticsearch实现全文搜索、语义分析、可视化展示等。本文介绍如何通过Monstache将MongoDB数据实时同步至Elasticsearch,并对数据进行分析及展示。
本文以解析及统计热门电影数据为例,提供的解决方案可以帮助您完成以下需求:
- 通过Monstache快速同步及订阅全量或增量数据。
- 将MongoDB数据实时同步至高版本Elasticsearch。
- 解读Monstache常用配置参数,应用于更多的业务场景。
本文以阿里云Elasticsearch和MongoDB为例,为您介绍数据同步的方法。阿里云Elasticsearch兼容开源Elasticsearch的功能,以及Security、Machine Learning、Graph、APM等商业功能,致力于数据分析、数据搜索等场景服务。支持5.5.3、6.3.2、6.7.0、6.8.0和7.4.0等版本,并提供了商业插件X-Pack服务。在开源Elasticsearch的基础上提供企业级权限管控、安全监控告警、自动报表生成等功能。阿里云Elasticsearch为您提供1个月的免费试用活动,单击此处即可免费试用。
与开源Elasticsearch相比,阿里云Elasticsearch提供了高可用性、高可靠性、高安全性等功能特性。并且提供Elasticsearch和Kibana的全托管服务,您可以按需付费,即买即用。在此基础上,还对内核性能进行了优化,提供独立的index build服务、存储计算分离、智能运维、达摩院分词器、商业插件等功能。
方案优势
- MongoDB、Elasticsearch及Monstache服务部署在专有网络内,所有数据私网通信,高速且安全。
- Monstache基于MongoDB的oplog实现实时数据同步及订阅,支持MongoDB与高版本Elasticsearch之间的数据同步,同时支持MongoDB的变更流和聚合管道功能,并且拥有丰富的特性。
- Monstache不仅支持软删除和硬删除,还支持数据库删除和集合删除,能够确保Elasticsearch端实时与源端数据保持一致。
操作流程
-
准备工作
准备同一专有网络VPC下的阿里云MongoDB、阿里云Elasticsearch和ECS实例。其中ECS实例用来安装Monstache。
注意 请准备版本兼容的Monstache工具、阿里云Elasticsearch和MongoDB实例,版本兼容性详情请参见Monstache version。 -
步骤一:搭建Monstache环境
在ECS实例中安装Monstache,用来将MongoDB中的数据同步至阿里云Elasticsearch。安装前需要先配置Go环境变量。
-
步骤二:配置实时同步任务
修改默认的Monstache配置文件,在配置文件中指定MongoDB和Elasticsearch的访问地址、待同步的集合、Elasticsearch的用户名和密码等参数值。配置完成后,运行Monstache服务,即可将MongoDB中的数据实时同步至阿里云Elasticsearch中。
-
步骤三:验证结果
分别在MongoDB数据库中添加、更新、删除数据,验证数据是否实时同步。
-
步骤四:通过Kibana分析并展示数据
在Kibana控制台中,分析数据并使用Pie图展示分析结果。
准备工作
-
创建阿里云Elasticsearch实例,并开启实例的自动创建索引功能。
具体操作步骤请参见创建阿里云Elasticsearch实例和开启自动创建索引。本文使用的实例版本为通用商业版6.7.0。
-
创建阿里云MongoDB实例,并准备测试数据。
具体操作步骤请参见[MongoDB快速入门](https://help.aliyun.com/document_detail/26572.html}。本文以4.2版本的副本集MongoDB实例为例,部分数据如下。
注意 MongoDB实例必须是副本集或分片集架构,不支持单节点架构。
-
创建ECS实例。
具体操作步骤请参见使用向导创建实例。该ECS实例用来安装Monstache,需要与阿里云Elasticsearch实例在同一VPC下。
步骤一:搭建Monstache环境
-
连接ECS实例。
具体操作步骤请参见连接ECS实例。
-
安装Go,并配置环境变量。
说明 由于Monstache数据同步依赖于Go语言,因此需要先在ECS中准备Go环境。
-
下载Go安装包并解压。
wget https://dl.google.com/go/go1.14.4.linux-amd64.tar.gz tar -C /usr/local -xzf go1.14.4.linux-amd64.tar.gz
-
配置环境变量。
使用
vim /etc/profile
命令打开环境变量配置文件,并将如下内容写入该文件中。其中GOPROXY
用来指定阿里云Go模块代理。export GOROOT=/usr/local/go export GOPATH=/home/go/ export PATH=$PATH:$GOROOT/bin:$GOPATH/bin export GOPROXY=https://mirrors.aliyun.com/goproxy/
-
应用环境变量配置。
source /etc/profile
-
-
安装Monstache。
-
进入安装路径。
cd /usr/local/
-
从Git库中下载安装包。
git clone https://github.com/rwynn/monstache.git
-
进入 monstache 目录。
cd monstache
-
切换版本。
本文以rel5版本为例。
git checkout rel5
-
安装Monstache。
go install
-
查看Monstache版本。
monstache -v
执行成功后,返回如下结果。
5.5.5
-
步骤二:配置实时同步任务
Monstache配置使用TOML格式,默认情况下,Monstache会使用默认端口连接本地主机上的Elasticsearch和MongoDB,并追踪MongoDB oplog。在Monstache运行期间,MongoDB的任何更改都会同步到Elasticsearch中。
由于本文使用阿里云MongoDB和Elasticsearch,并且需要指定同步对象(mydb数据库中的hotmovies和col集合),因此要修改默认的Monstache配置文件。修改方式如下:
-
进入Monstache安装目录,创建并编辑配置文件。
cd /usr/local/monstache/ vim config.toml
-
参考以下示例,修改配置文件。
简单的配置示例如下,详细配置请参见Monstache Usage。
# connection settings# connect to MongoDB using the following URL mongo-url = "mongodb://root:<your_mongodb_password>@dds-bp1aadcc629******.mongodb.rds.aliyuncs.com:3717" # connect to the Elasticsearch REST API at the following node URLs elasticsearch-urls = ["http://es-cn-mp91kzb8m00******.elasticsearch.aliyuncs.com:9200"]# frequently required settings# if you need to seed an index from a collection and not just listen and sync changes events # you can copy entire collections or views from MongoDB to Elasticsearch direct-read-namespaces = ["mydb.hotmovies","mydb.col"]# if you want to use MongoDB change streams instead of legacy oplog tailing use change-stream-namespaces # change streams require at least MongoDB API 3.6+ # if you have MongoDB 4+ you can listen for changes to an entire database or entire deployment # in this case you usually don't need regexes in your config to filter collections unless you target the deployment. # to listen to an entire db use only the database name. For a deployment use an empty string. #change-stream-namespaces = ["mydb.col"]# additional settings# if you don't want to listen for changes to all collections in MongoDB but only a few # e.g. only listen for inserts, updates, deletes, and drops from mydb.mycollection # this setting does not initiate a copy, it is only a filter on the change event listener #namespace-regex = '^mydb\.col$' # compress requests to Elasticsearch #gzip = true # generate indexing statistics #stats = true # index statistics into Elasticsearch #index-stats = true # use the following PEM file for connections to MongoDB #mongo-pem-file = "/path/to/mongoCert.pem" # disable PEM validation #mongo-validate-pem-file = false # use the following user name for Elasticsearch basic auth elasticsearch-user = "elastic" # use the following password for Elasticsearch basic auth elasticsearch-password = "<your_es_password>" # use 4 go routines concurrently pushing documents to Elasticsearch elasticsearch-max-conns = 4 # use the following PEM file to connections to Elasticsearch #elasticsearch-pem-file = "/path/to/elasticCert.pem" # validate connections to Elasticsearch #elastic-validate-pem-file = true # propogate dropped collections in MongoDB as index deletes in Elasticsearch dropped-collections = true # propogate dropped databases in MongoDB as index deletes in Elasticsearch dropped-databases = true # do not start processing at the beginning of the MongoDB oplog # if you set the replay to true you may see version conflict messages # in the log if you had synced previously. This just means that you are replaying old docs which are already # in Elasticsearch with a newer version. Elasticsearch is preventing the old docs from overwriting new ones. #replay = false # resume processing from a timestamp saved in a previous run resume = true # do not validate that progress timestamps have been saved #resume-write-unsafe = false # override the name under which resume state is saved #resume-name = "default" # use a custom resume strategy (tokens) instead of the default strategy (timestamps) # tokens work with MongoDB API 3.6+ while timestamps work only with MongoDB API 4.0+ resume-strategy = 0 # exclude documents whose namespace matches the following pattern #namespace-exclude-regex = '^mydb\.ignorecollection$' # turn on indexing of GridFS file content #index-files = true # turn on search result highlighting of GridFS content #file-highlighting = true # index GridFS files inserted into the following collections #file-namespaces = ["users.fs.files"] # print detailed information including request traces verbose = true # enable clustering mode cluster-name = 'es-cn-mp91kzb8m00******' # do not exit after full-sync, rather continue tailing the oplog #exit-after-direct-reads = false [[mapping]] namespace = "mydb.hotmovies" index = "hotmovies" type = "movies"[[mapping]] namespace = "mydb.col" index = "mydbcol" type = "collection"
参数 说明 mongo-url MongoDB实例的主节点访问地址。可在实例的基本信息页面获取,获取前需配置MongoDB实例的白名单,即在白名单中添加安装Monstache的ECS实例的内网IP地址,详情请参见设置白名单。 elasticsearch-urls 阿里云ES实例的访问地址,格式为 http://<阿里云Elasticsearch实例的内网地址>:9200
。阿里云Elasticsearch实例的内网地址可在实例的基本信息页面获取,详情请参见查看实例的基本信息。direct-read-namespaces 指定待同步的集合,详情请参见direct-read-namespaces。本文同步的数据集为mydb数据库下的hotmovies和col集合。 change-stream-namespaces 如果要使用MongoDB变更流功能,需要指定此参数。启用此参数后,oplog追踪会被设置为无效,详情请参见change-stream-namespaces。 namespace-regex 通过正则表达式指定需要监听的集合。此设置可以用来监控符合正则表达式的集合中数据的变化。 elasticsearch-user 访问阿里云Elasticsearch实例的用户名,默认为elastic。 注意 实际业务中不建议使用elastic用户,这样会降低系统安全性。建议使用自建用户,并给予自建用户分配相应的角色和权限,详情请参见创建角色和创建用户。 elasticsearch-password 对应用户的密码。elastic用户的密码在创建实例时指定,如果忘记可进行重置,重置密码的注意事项和操作步骤请参见重置实例访问密码。 elasticsearch-max-conns 定义连接Elasticsearch的线程数。默认为4,即使用4个Go线程同时将数据同步到Elasticsearch。 dropped-collections 默认为true,表示当删除MongoDB集合时,会同时删除Elasticsearch中对应的索引。 dropped-databases 默认为true,表示当删除MongoDB数据库时,会同时删除Elasticsearch中对应的索引。 resume 默认为false。设置为true,Monstache会将已成功同步到Elasticsearch的MongoDB操作的时间戳写入monstache.monstache集合中。当Monstache因为意外停止时,可通过该时间戳恢复同步任务,避免数据丢失。如果指定了cluster-name,该参数将自动开启,详情请参见resume。 resume-strategy 指定恢复策略。仅当resume为true时生效,详情请参见resume-strategy。 verbose 默认为false,表示不启用调试日志。 cluster-name 指定集群名称。指定后,Monstache将进入高可用模式,集群名称相同的进程将进行协调,详情请参见cluster-name。 mapping 指定Elasticsearch索引映射。默认情况下,数据从MongoDB同步到Elasticsearch时,索引会自动映射为 数据库名.集合名
。如果需要修改索引名称,可通过该参数设置,详情请参见Index Mapping。说明 Monstache支持丰富的参数配置,以上配置仅使用了部分参数完成数据实时同步,如果您有更复杂的同步需求,请参见Monstache config和Advanced进行配置。
-
运行Monstache。
monstache -f config.toml
说明 通过-f参数,您可以显式运行Monstache,系统会打印所有调试日志(包括对Elasticsearch的请求追踪)。
步骤三:验证结果
-
分别进入MongoDB的DMS控制台和阿里云Elasticsearch实例的Kibana控制台,查看同步前后对应文档的数量。
说明
- 登录DMS控制台的方法请参见通过DMS连接MongoDB副本集实例。
- 登录Kibana控制台的方法请参见登录Kibana控制台。
-
MongoDB
db.hotmovies.find().count()
执行成功后,返回如下结果。
[ 10000 ]
-
阿里云ES
GET hotmovies/_count
执行成功后,返回如下结果。
{"count" : 10000,"_shards" : {"total" : 5,"successful" : 5,"skipped" : 0,"failed" : 0} }
-
在MongoDB数据库中插入数据,查看该数据是否同步到阿里云Elasticsearch实例中。
-
MongoDB
db.hotmovies.insert({id: 11003,title: "乘风破浪的程序媛",overview: "一群IT高智商女人,如何打破传统逆序IT精英",original_language:"cn",release_date:"2020-06-17",popularity:67.654,vote_count:65487,vote_average:9.9})db.hotmovies.insert({id: 11004,title: "英姿飒爽的程序猿",overview: "一群IT高智商man,如何打破传统逆序IT精英",original_language:"cn",release_date:"2020-06-15",popularity:77.654,vote_count:85487,vote_average:11.9})
-
阿里云Elasticsearch
GET hotmovies/_search {"query": {"bool": {"should": [{"term":{"id":"11003"}},{"term":{"id":"11004"}}]}} }
-
在MongoDB数据库中更新数据,查看阿里云Elasticsearch实例中对应的数据是否会同步更新。
-
MongoDB
db.hotmovies.update({'title':'乘风破浪的程序媛'},{$set:{'title':'美女小姐姐'}})
-
阿里云Elasticsearch
GET hotmovies/_search {"query": {"match": {"id":"11003"}} }
-
-
在MongoDB数据库中删除数据,查看阿里云Elasticsearch实例中对应的数据是否会同步删除。
-
MongoDB
db.hotmovies.remove({id: 11003})db.hotmovies.remove({id: 11004})
-
阿里云Elasticsearch
GET hotmovies/_search {"query": {"bool": {"should": [{"term":{"id":"11003"}},{"term":{"id":"11004"}}]}} }
-
步骤四:通过Kibana分析并展示数据
-
登录目标阿里云Elasticsearch实例的Kibana控制台。
具体操作步骤请参见登录Kibana控制台。
-
创建索引模式。
-
在左侧导航栏,单击 Management 。
-
在 Kibana 区域,单击 Index Patterns 。
-
单击 Create index pattern 。
-
输入 Index pattern 名称,单击 Next step 。
-
从 Time Filter field name 中,选择时间过滤器字段名(本文选择 I don’t want to use the Time Filter )。
-
单击 Create index pattern 。
-
-
配置Kibana大图。
本文以配置最受欢迎的Top10电影的Pie图为例,操作步骤如下:
-
在左侧导航栏,单击 Visualize 。
-
在搜索框右侧,单击 + 。
-
在 New Visualization 对话框中,单击 Pie 。
-
单击 hotmovies 索引模式。
-
按照下图配置 Metrics 和 Buckets 。
-
单击运行图标,应用配置,查看数据展示结果。
-
如若内容造成侵权/违法违规/事实不符,请联系编程学习网邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
相关文章
- CSRF详解
原文链接 一、CSRF是什么? CSRF(Cross-site request forgery),中文名称:跨站请求伪造,也被称为:one click attack/session riding,缩写为:CSRF/XSRF。 二、CSRF可以做什么? 你这可以这么理解CSRF攻击:攻击者盗用了你的身份,以你的名义发送恶意请求。CSRF能够做的事…...
2024/5/4 11:55:00 - [狂神说Java系列视频]springboot--整合MyBatis-plus(条件构建器,代码生成器,复杂条件查询...)
视频地址 官网地址 MyBatis特性 无侵入:只做增强不做改变,引入它不会对现有工程产生影响,如丝般顺滑 损耗小:启动即会自动注入基本 CURD,性能基本无损耗,直接面向对象操作 强大的 CRUD 操作:内置通用 Mapper、通用 Service,仅仅通过少量配置即可实现单表大部分 CRUD 操…...
2024/4/22 15:12:28 - 熔喷布的鉴定标准是什么?
口罩生产和熔喷机息息相关,市面上已知的的熔喷机价格由数万到数百万不等。不同价格的熔喷机具备不同的产能,生产出的产品质量也会有着差异。那么合格的熔喷机都有哪些标准?熔喷布相关的标准又有哪些?华碧鉴定通过相关资料查询,整理了一些和熔喷布、熔喷机相关的现有标准。…...
2024/4/15 2:37:34 - 分布式任务定时框架elasticjob详解
序言如果你需要管理job,可以考虑使用elasticjob。如果你想动态添加job ,也可以考虑使用elasticjob。如果对系统可靠性,稳定性和服务器弹性等要求比较高,还可以考虑elasticjob。Elastic-Job是当当网基于Zookepper,Quartz开发并且开源的Java分布式定时任务,解决Quartz不支持…...
2024/4/23 14:21:00 - sublime Text3搭建salesforce开发环境
安装 sublime Text3 下载 sublime Text3,地址为:http://www.sublimetext.com/3。 下载完毕后直接进行安装,前面可能不需要激活码,但后面可能会让激活(不会影响代码编辑)。 安装 haoide打开编辑器,在工具栏里面找到 preferences 选项,点开找到 package control。 点击后会…...
2024/4/26 17:28:54 - 车用总线技术 | J1939协议实用指南与J1939数据记录方案
“没错,这是一份SAE J1939协议的简单、实用指南。”—虹科开篇:在这篇介绍中,我们介绍了J1939协议的基本知识,其中包括PGN和SPN。因为这是一篇偏向应用的简介,所以您还将会学习到如何通过DBC文件解码J1939数据、如何记录J1939、典型的应用案例和实用技巧。下面,来了解下这…...
2024/4/30 0:42:42 - 改变WordPress后台管理菜单排列顺序的两种方法
WordPress后台管理菜单顺序和定制,可以通过通过custom_menu_order和menu_order来实现。下面分享一下方法将代码添加到当前主题的 functions.php 文件:1、国外网站代码: 请注意,这适用于3.5,没有与任何其他版本测试。下面的代码可以放在一个插件或者放到functions.php文件中;…...
2024/4/9 23:12:33 - SpeeDx和Nepean医院获得联邦经费用于呼吸道病毒生物标记物检测
悉尼--(美国商业资讯)--创新分子诊断解决方案开发商SpeeDx Pty. Ltd.与Nepean蓝山地方卫生区(NBMLHD)的Nepean医院重症监护室研究人员合作,获得MTPConnect生物医学转化桥接(BTB)项目经费。经费将支持呼吸道病毒宿主应答检测的商品化,该检测是一种快速应答检测,可增强当前的C…...
2024/4/9 14:54:01 - 音视频 H.264格式介绍
名字解释:GOP (图像组)主要用作形容一个 i 帧 到下一个 i 帧之间的间隔了多少个帧。 增大图片组(GOP)能有效的减少编码后的视频体积,但是也会降低视频质量。 编码后视频的每一组图像(GOP,图像组)都给予了传输中的序列(PPS)和本身这个帧的图像参数(SPS)。 SPS(Sequen…...
2024/4/21 7:00:35 - “花呗还不起了,能不能把支付宝服务器炸掉?”
本文摘自:净整些没用的(假如有人把支付宝的服务器炸了, 存在支付宝里的钱是不是没了?)今天在知乎看到了一个问题《假如有人把支付宝存储服务器炸了(物理炸),大众在支付宝里的钱是不是就都没有了呢?我的花呗是不是就不用还了?》外行人问题。网站都是有服务器的,服务器…...
2024/5/4 22:08:33 - spring boot教程视频地址
关注公众号“简云笔记”,回复关键字“spring boot”...
2024/5/4 18:45:20 - php替换括号里面某些字符串
public function testReplace() {$post_xml_data=asdsa&(123123);// dd(preg_replace(/&(?!#?[a-z0-9]+;)/, &, $post_xml_data));$subject = asdsa&(123123)<Macro Name="XXX_EN_AUDIO_CODEC_TYPE" Value="(XXX_EN_AUDIO_FEATURE_XXX…...
2024/4/14 1:19:26 - Error(3, 30) java 程序包com.alibaba.druid.pool不存在
Error:(3, 30) java: 程序包com.alibaba.druid.pool不存在 Error:(5, 59) java: 程序包javax.servlet.http不存在 Error:(6, 45) java: 程序包javax.servlet.http不存在 Error:(6, 92) java: 程序包javax.servlet.http不存在 Error:(6, 143) java: 程序包javax.servlet不存在 E…...
2024/5/4 14:59:21 - Java跨平台性
为什么说Java具有跨平台性? windows和Linux内核不同,执行指令方式不同。显然:java程序不能直接和操作系统打交道。将java程序运行在一台虚拟机上(JVM——Java Virtual Machine),再让Java虚拟机和不同操作系统打交道,这样就实现了Java的跨平台性。...
2024/4/10 13:55:54 - IPFS/Filecoin未来发展动向
Filecoin是IPFS的激励层,Filecoin的挖矿是为了分布式存储市场。我们还知道,IPFS已经运行了大约5年半,到目前为止没有出现重大漏洞,相对稳定。此外,IPFS的官方协议实验室对IPFS的开发没有停止,而且仍在向前推进。 目前,Filecoin的热度特别高,中国有370多家大型和小型交易…...
2024/5/4 19:26:06 - select2 前端插件下载和使用
简介:Select2是一款基于JQuery的下拉列表插件,主要用来优化select,支持单选和多选,同时也支持分组显示、列表检索、远程获取数据等众多好用的功能 下载 链接:https://pan.baidu.com/s/1k6BxdFWFRIHEXI3wxsbCXA 提取码:5we2 使用 可以参考这些网址 1.select2插件设置选中值…...
2024/4/10 9:41:50 - ABPTTS内网端口映射
通过ABPTTS web脚本映射目标主机端口到本地,适用于exe文件不能落地,需要将端口转发到本地虚拟机:本机:本机生成webshell后,连接代理并映射3389端口到本机python abpttsclient.py -c webshell/config.txt -u http://10.211.55.6:8080/muma/abptts.jsp -f 0.0.0.0:33389/10.…...
2024/5/4 23:01:35 - 【Django】模型类一对多外键related_name关键字的使用
1.场景 图书馆要整理书籍,一本书里会出现多个人物,现有两个表,一个是book,一个是hero,分别记录书本 信息和人物信息。比如说《神雕侠侣》这本书里有杨过、小龙女、郭襄等人物,这是属于一(book)对多(hero)问题,我们可以把关系存在多的一方,即把外键存在hero表里 2.模…...
2024/5/4 23:59:06 - JS工作日常问题----JavaScript中apply()方法的理解
JavaScript中apply()方法的理解 JavaScript中apply()方法,就是将当前指定的方法应用到指定对象并执行,接受数组形式的参数。 W3School样例: var person = {fullName: function(city, country) {return this.firstName + " " + this.lastName + "," + ci…...
2024/5/5 1:30:01 - shiro教程视频地址
关注公众号“简云笔记”,回复关键字“shiro”...
2024/5/4 22:43:08
最新文章
- Python爬虫:XPath解析爬取豆瓣电影Top250示例
一、示例的函数说明: 函数processing():用于处理字符串中的空白字符,并拼接字符串。 主函数程序入口:每页显示25部影片,实现循环,共10页。通过format方法替换切换的页码的url地址。然后调用实现爬虫程序的…...
2024/5/5 22:38:59 - 梯度消失和梯度爆炸的一些处理方法
在这里是记录一下梯度消失或梯度爆炸的一些处理技巧。全当学习总结了如有错误还请留言,在此感激不尽。 权重和梯度的更新公式如下: w w − η ⋅ ∇ w w w - \eta \cdot \nabla w ww−η⋅∇w 个人通俗的理解梯度消失就是网络模型在反向求导的时候出…...
2024/3/20 10:50:27 - 算法打卡day29
今日任务: 1)1005.K次取反后最大化的数组和 2)134.加油站 3)135.分发糖果 1005.K次取反后最大化的数组和 题目链接:1005. K 次取反后最大化的数组和 - 力扣(LeetCode) 给定一个整数数组 A&…...
2024/4/30 15:22:05 - Linux mount用法
在Linux系统中,系统自动挂载了以下挂载点: /: xfs文件系统,根文件系统, 所有其他文件系统的挂载点。 /sys: sysfs文件系统,提供内核对象的信息和接口。 /proc: proc文件系统,提供进程和系统信息。 /dev: devtmpfs文件系…...
2024/5/5 8:38:45 - Spring集成MyBatis
基本准备 创建Dynamic Web Project 引入相关jar包 Spring框架相关jar包 MyBatis连接Spring相关jar包 连接MySQL驱动包 JSTL标签库包 添加db.properties文件,该属性文件配置连接数据库相关信息 drivercom.mysql.jdbc.Driver urljdbc:mysql://localhost:3306/myba…...
2024/5/5 1:55:52 - 416. 分割等和子集问题(动态规划)
题目 题解 class Solution:def canPartition(self, nums: List[int]) -> bool:# badcaseif not nums:return True# 不能被2整除if sum(nums) % 2 ! 0:return False# 状态定义:dp[i][j]表示当背包容量为j,用前i个物品是否正好可以将背包填满ÿ…...
2024/5/5 18:19:03 - 【Java】ExcelWriter自适应宽度工具类(支持中文)
工具类 import org.apache.poi.ss.usermodel.Cell; import org.apache.poi.ss.usermodel.CellType; import org.apache.poi.ss.usermodel.Row; import org.apache.poi.ss.usermodel.Sheet;/*** Excel工具类** author xiaoming* date 2023/11/17 10:40*/ public class ExcelUti…...
2024/5/5 12:22:20 - Spring cloud负载均衡@LoadBalanced LoadBalancerClient
LoadBalance vs Ribbon 由于Spring cloud2020之后移除了Ribbon,直接使用Spring Cloud LoadBalancer作为客户端负载均衡组件,我们讨论Spring负载均衡以Spring Cloud2020之后版本为主,学习Spring Cloud LoadBalance,暂不讨论Ribbon…...
2024/5/5 19:59:54 - TSINGSEE青犀AI智能分析+视频监控工业园区周界安全防范方案
一、背景需求分析 在工业产业园、化工园或生产制造园区中,周界防范意义重大,对园区的安全起到重要的作用。常规的安防方式是采用人员巡查,人力投入成本大而且效率低。周界一旦被破坏或入侵,会影响园区人员和资产安全,…...
2024/5/4 23:54:44 - VB.net WebBrowser网页元素抓取分析方法
在用WebBrowser编程实现网页操作自动化时,常要分析网页Html,例如网页在加载数据时,常会显示“系统处理中,请稍候..”,我们需要在数据加载完成后才能继续下一步操作,如何抓取这个信息的网页html元素变化&…...
2024/5/5 15:25:47 - 【Objective-C】Objective-C汇总
方法定义 参考:https://www.yiibai.com/objective_c/objective_c_functions.html Objective-C编程语言中方法定义的一般形式如下 - (return_type) method_name:( argumentType1 )argumentName1 joiningArgument2:( argumentType2 )argumentName2 ... joiningArgu…...
2024/5/4 23:54:49 - 【洛谷算法题】P5713-洛谷团队系统【入门2分支结构】
👨💻博客主页:花无缺 欢迎 点赞👍 收藏⭐ 留言📝 加关注✅! 本文由 花无缺 原创 收录于专栏 【洛谷算法题】 文章目录 【洛谷算法题】P5713-洛谷团队系统【入门2分支结构】🌏题目描述🌏输入格…...
2024/5/4 23:54:44 - 【ES6.0】- 扩展运算符(...)
【ES6.0】- 扩展运算符... 文章目录 【ES6.0】- 扩展运算符...一、概述二、拷贝数组对象三、合并操作四、参数传递五、数组去重六、字符串转字符数组七、NodeList转数组八、解构变量九、打印日志十、总结 一、概述 **扩展运算符(...)**允许一个表达式在期望多个参数࿰…...
2024/5/4 14:46:12 - 摩根看好的前智能硬件头部品牌双11交易数据极度异常!——是模式创新还是饮鸩止渴?
文 | 螳螂观察 作者 | 李燃 双11狂欢已落下帷幕,各大品牌纷纷晒出优异的成绩单,摩根士丹利投资的智能硬件头部品牌凯迪仕也不例外。然而有爆料称,在自媒体平台发布霸榜各大榜单喜讯的凯迪仕智能锁,多个平台数据都表现出极度异常…...
2024/5/5 18:50:00 - Go语言常用命令详解(二)
文章目录 前言常用命令go bug示例参数说明 go doc示例参数说明 go env示例 go fix示例 go fmt示例 go generate示例 总结写在最后 前言 接着上一篇继续介绍Go语言的常用命令 常用命令 以下是一些常用的Go命令,这些命令可以帮助您在Go开发中进行编译、测试、运行和…...
2024/5/4 14:46:11 - 用欧拉路径判断图同构推出reverse合法性:1116T4
http://cplusoj.com/d/senior/p/SS231116D 假设我们要把 a a a 变成 b b b,我们在 a i a_i ai 和 a i 1 a_{i1} ai1 之间连边, b b b 同理,则 a a a 能变成 b b b 的充要条件是两图 A , B A,B A,B 同构。 必要性显然࿰…...
2024/5/5 2:25:33 - 【NGINX--1】基础知识
1、在 Debian/Ubuntu 上安装 NGINX 在 Debian 或 Ubuntu 机器上安装 NGINX 开源版。 更新已配置源的软件包信息,并安装一些有助于配置官方 NGINX 软件包仓库的软件包: apt-get update apt install -y curl gnupg2 ca-certificates lsb-release debian-…...
2024/5/4 21:24:42 - Hive默认分割符、存储格式与数据压缩
目录 1、Hive默认分割符2、Hive存储格式3、Hive数据压缩 1、Hive默认分割符 Hive创建表时指定的行受限(ROW FORMAT)配置标准HQL为: ... ROW FORMAT DELIMITED FIELDS TERMINATED BY \u0001 COLLECTION ITEMS TERMINATED BY , MAP KEYS TERMI…...
2024/5/5 13:14:22 - 【论文阅读】MAG:一种用于航天器遥测数据中有效异常检测的新方法
文章目录 摘要1 引言2 问题描述3 拟议框架4 所提出方法的细节A.数据预处理B.变量相关分析C.MAG模型D.异常分数 5 实验A.数据集和性能指标B.实验设置与平台C.结果和比较 6 结论 摘要 异常检测是保证航天器稳定性的关键。在航天器运行过程中,传感器和控制器产生大量周…...
2024/5/4 13:16:06 - --max-old-space-size=8192报错
vue项目运行时,如果经常运行慢,崩溃停止服务,报如下错误 FATAL ERROR: CALL_AND_RETRY_LAST Allocation failed - JavaScript heap out of memory 因为在 Node 中,通过JavaScript使用内存时只能使用部分内存(64位系统&…...
2024/5/5 17:03:52 - 基于深度学习的恶意软件检测
恶意软件是指恶意软件犯罪者用来感染个人计算机或整个组织的网络的软件。 它利用目标系统漏洞,例如可以被劫持的合法软件(例如浏览器或 Web 应用程序插件)中的错误。 恶意软件渗透可能会造成灾难性的后果,包括数据被盗、勒索或网…...
2024/5/5 21:10:50 - JS原型对象prototype
让我简单的为大家介绍一下原型对象prototype吧! 使用原型实现方法共享 1.构造函数通过原型分配的函数是所有对象所 共享的。 2.JavaScript 规定,每一个构造函数都有一个 prototype 属性,指向另一个对象,所以我们也称为原型对象…...
2024/5/5 3:37:58 - C++中只能有一个实例的单例类
C中只能有一个实例的单例类 前面讨论的 President 类很不错,但存在一个缺陷:无法禁止通过实例化多个对象来创建多名总统: President One, Two, Three; 由于复制构造函数是私有的,其中每个对象都是不可复制的,但您的目…...
2024/5/4 23:54:30 - python django 小程序图书借阅源码
开发工具: PyCharm,mysql5.7,微信开发者工具 技术说明: python django html 小程序 功能介绍: 用户端: 登录注册(含授权登录) 首页显示搜索图书,轮播图࿰…...
2024/5/5 17:03:21 - 电子学会C/C++编程等级考试2022年03月(一级)真题解析
C/C++等级考试(1~8级)全部真题・点这里 第1题:双精度浮点数的输入输出 输入一个双精度浮点数,保留8位小数,输出这个浮点数。 时间限制:1000 内存限制:65536输入 只有一行,一个双精度浮点数。输出 一行,保留8位小数的浮点数。样例输入 3.1415926535798932样例输出 3.1…...
2024/5/5 15:25:31 - 配置失败还原请勿关闭计算机,电脑开机屏幕上面显示,配置失败还原更改 请勿关闭计算机 开不了机 这个问题怎么办...
解析如下:1、长按电脑电源键直至关机,然后再按一次电源健重启电脑,按F8健进入安全模式2、安全模式下进入Windows系统桌面后,按住“winR”打开运行窗口,输入“services.msc”打开服务设置3、在服务界面,选中…...
2022/11/19 21:17:18 - 错误使用 reshape要执行 RESHAPE,请勿更改元素数目。
%读入6幅图像(每一幅图像的大小是564*564) f1 imread(WashingtonDC_Band1_564.tif); subplot(3,2,1),imshow(f1); f2 imread(WashingtonDC_Band2_564.tif); subplot(3,2,2),imshow(f2); f3 imread(WashingtonDC_Band3_564.tif); subplot(3,2,3),imsho…...
2022/11/19 21:17:16 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机...
win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”问题的解决方法在win7系统关机时如果有升级系统的或者其他需要会直接进入一个 等待界面,在等待界面中我们需要等待操作结束才能关机,虽然这比较麻烦,但是对系统进行配置和升级…...
2022/11/19 21:17:15 - 台式电脑显示配置100%请勿关闭计算机,“准备配置windows 请勿关闭计算机”的解决方法...
有不少用户在重装Win7系统或更新系统后会遇到“准备配置windows,请勿关闭计算机”的提示,要过很久才能进入系统,有的用户甚至几个小时也无法进入,下面就教大家这个问题的解决方法。第一种方法:我们首先在左下角的“开始…...
2022/11/19 21:17:14 - win7 正在配置 请勿关闭计算机,怎么办Win7开机显示正在配置Windows Update请勿关机...
置信有很多用户都跟小编一样遇到过这样的问题,电脑时发现开机屏幕显现“正在配置Windows Update,请勿关机”(如下图所示),而且还需求等大约5分钟才干进入系统。这是怎样回事呢?一切都是正常操作的,为什么开时机呈现“正…...
2022/11/19 21:17:13 - 准备配置windows 请勿关闭计算机 蓝屏,Win7开机总是出现提示“配置Windows请勿关机”...
Win7系统开机启动时总是出现“配置Windows请勿关机”的提示,没过几秒后电脑自动重启,每次开机都这样无法进入系统,此时碰到这种现象的用户就可以使用以下5种方法解决问题。方法一:开机按下F8,在出现的Windows高级启动选…...
2022/11/19 21:17:12 - 准备windows请勿关闭计算机要多久,windows10系统提示正在准备windows请勿关闭计算机怎么办...
有不少windows10系统用户反映说碰到这样一个情况,就是电脑提示正在准备windows请勿关闭计算机,碰到这样的问题该怎么解决呢,现在小编就给大家分享一下windows10系统提示正在准备windows请勿关闭计算机的具体第一种方法:1、2、依次…...
2022/11/19 21:17:11 - 配置 已完成 请勿关闭计算机,win7系统关机提示“配置Windows Update已完成30%请勿关闭计算机”的解决方法...
今天和大家分享一下win7系统重装了Win7旗舰版系统后,每次关机的时候桌面上都会显示一个“配置Windows Update的界面,提示请勿关闭计算机”,每次停留好几分钟才能正常关机,导致什么情况引起的呢?出现配置Windows Update…...
2022/11/19 21:17:10 - 电脑桌面一直是清理请关闭计算机,windows7一直卡在清理 请勿关闭计算机-win7清理请勿关机,win7配置更新35%不动...
只能是等着,别无他法。说是卡着如果你看硬盘灯应该在读写。如果从 Win 10 无法正常回滚,只能是考虑备份数据后重装系统了。解决来方案一:管理员运行cmd:net stop WuAuServcd %windir%ren SoftwareDistribution SDoldnet start WuA…...
2022/11/19 21:17:09 - 计算机配置更新不起,电脑提示“配置Windows Update请勿关闭计算机”怎么办?
原标题:电脑提示“配置Windows Update请勿关闭计算机”怎么办?win7系统中在开机与关闭的时候总是显示“配置windows update请勿关闭计算机”相信有不少朋友都曾遇到过一次两次还能忍但经常遇到就叫人感到心烦了遇到这种问题怎么办呢?一般的方…...
2022/11/19 21:17:08 - 计算机正在配置无法关机,关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机...
关机提示 windows7 正在配置windows 请勿关闭计算机 ,然后等了一晚上也没有关掉。现在电脑无法正常关机以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!关机提示 windows7 正在配…...
2022/11/19 21:17:05 - 钉钉提示请勿通过开发者调试模式_钉钉请勿通过开发者调试模式是真的吗好不好用...
钉钉请勿通过开发者调试模式是真的吗好不好用 更新时间:2020-04-20 22:24:19 浏览次数:729次 区域: 南阳 > 卧龙 列举网提醒您:为保障您的权益,请不要提前支付任何费用! 虚拟位置外设器!!轨迹模拟&虚拟位置外设神器 专业用于:钉钉,外勤365,红圈通,企业微信和…...
2022/11/19 21:17:05 - 配置失败还原请勿关闭计算机怎么办,win7系统出现“配置windows update失败 还原更改 请勿关闭计算机”,长时间没反应,无法进入系统的解决方案...
前几天班里有位学生电脑(windows 7系统)出问题了,具体表现是开机时一直停留在“配置windows update失败 还原更改 请勿关闭计算机”这个界面,长时间没反应,无法进入系统。这个问题原来帮其他同学也解决过,网上搜了不少资料&#x…...
2022/11/19 21:17:04 - 一个电脑无法关闭计算机你应该怎么办,电脑显示“清理请勿关闭计算机”怎么办?...
本文为你提供了3个有效解决电脑显示“清理请勿关闭计算机”问题的方法,并在最后教给你1种保护系统安全的好方法,一起来看看!电脑出现“清理请勿关闭计算机”在Windows 7(SP1)和Windows Server 2008 R2 SP1中,添加了1个新功能在“磁…...
2022/11/19 21:17:03 - 请勿关闭计算机还原更改要多久,电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机怎么办...
许多用户在长期不使用电脑的时候,开启电脑发现电脑显示:配置windows更新失败,正在还原更改,请勿关闭计算机。。.这要怎么办呢?下面小编就带着大家一起看看吧!如果能够正常进入系统,建议您暂时移…...
2022/11/19 21:17:02 - 还原更改请勿关闭计算机 要多久,配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以...
配置windows update失败 还原更改 请勿关闭计算机,电脑开机后一直显示以以下文字资料是由(历史新知网www.lishixinzhi.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!配置windows update失败 还原更改 请勿关闭计算机&#x…...
2022/11/19 21:17:01 - 电脑配置中请勿关闭计算机怎么办,准备配置windows请勿关闭计算机一直显示怎么办【图解】...
不知道大家有没有遇到过这样的一个问题,就是我们的win7系统在关机的时候,总是喜欢显示“准备配置windows,请勿关机”这样的一个页面,没有什么大碍,但是如果一直等着的话就要两个小时甚至更久都关不了机,非常…...
2022/11/19 21:17:00 - 正在准备配置请勿关闭计算机,正在准备配置windows请勿关闭计算机时间长了解决教程...
当电脑出现正在准备配置windows请勿关闭计算机时,一般是您正对windows进行升级,但是这个要是长时间没有反应,我们不能再傻等下去了。可能是电脑出了别的问题了,来看看教程的说法。正在准备配置windows请勿关闭计算机时间长了方法一…...
2022/11/19 21:16:59 - 配置失败还原请勿关闭计算机,配置Windows Update失败,还原更改请勿关闭计算机...
我们使用电脑的过程中有时会遇到这种情况,当我们打开电脑之后,发现一直停留在一个界面:“配置Windows Update失败,还原更改请勿关闭计算机”,等了许久还是无法进入系统。如果我们遇到此类问题应该如何解决呢࿰…...
2022/11/19 21:16:58 - 如何在iPhone上关闭“请勿打扰”
Apple’s “Do Not Disturb While Driving” is a potentially lifesaving iPhone feature, but it doesn’t always turn on automatically at the appropriate time. For example, you might be a passenger in a moving car, but your iPhone may think you’re the one dri…...
2022/11/19 21:16:57