杭州开发票爬虫代码

代码v信_fh3488真实有效只是个空架子，是为了每次有任务的时候能够迅速进行开发。

python爬虫开发步骤：

查看网站是否需要登陆，不需要登陆的一般不需要cookies
确定网站的翻页特点
确定目标数据的xpath或json内容
写代码完成开发
一般前三个步骤完成之后，如果没有任何代码准备，从零开始写代码势必会影响开发的进度。
本篇主要是为了帮助第4个步骤进行快速开发，demo代码如下：

#!/usr/bin/env python

– coding:utf-8 –

@Time : 2020/5/11 0011 14:24

@File : python_demo.py

import json
import os
import random
import re
import requests
import threading
import time
import logging

from lxml import etree
from queue import Queue
from datetime import datetime
from openpyxl import Workbook

日志打印需要调试时用

logging.getLogger(“urllib3”).setLevel(logging.WARNING)
logging.getLogger(“chardet”).setLevel(logging.WARNING)
logging.getLogger(“requests”).setLevel(logging.WARNING)

logging.basicConfig(level=logging.DEBUG, format=’%(asctime)s - %(name)s - %(levelname)s: %(message)s’)

logging.basicConfig(level=logging.INFO, format=’%(asctime)s - %(name)s - %(levelname)s: %(message)s’)

logging.basicConfig(level=logging.WARNING, format=’%(asctime)s - %(name)s - %(levelname)s: %(message)s’)

logging.basicConfig(level=logging.ERROR, format=’%(asctime)s - %(name)s - %(levelname)s: %(message)s’)
LOGGER = logging.getLogger(‘python_demo’)

class PythonDemo:
“”"
很多网站用到的毫秒时间戳
cts = int(time.time() * 1000) - 5000
“”"
def init(self):

# 忽略取消验证时的提示
requests.packages.urllib3.disable_warnings(requests.packages.urllib3.exceptions.InsecureRequestWarning)# 所有代理接口
self.all_proxy = AllProxy(pool_type='only_new')# 所有user-agent接口
self.user_agent = UserAgent()# 请求数据队列
self.get_queue = Queue()# 保存数据队列
self.save_queue = Queue()thread_list = []# ''表示本地获取 new表示使用新获取的代理ip，pool表示使用代理池的代理ip
for i in range(10):t_shop = threading.Thread(target=self.demo_thread, args=(i, ''))thread_list.append(t_shop)for i in range(1):t_shop = threading.Thread(target=self.save_thread)thread_list.append(t_shop)for t in thread_list:t.setDaemon(True)  # 把子线程设置为守护线程，该线程不重要主线程结束，子线程结束t.start()

def demo(self, get_data, proxy, proxy_type=’’):
“”" 获取数据
“”"

print(get_data)# 尝试多少次
for i in range(5):# 生成请求链接url = get_dataprint(url)headers = {'Accept': '*/*','Accept-Encoding': 'gzip, deflate, br','Accept-Language': 'zh-CN,zh;q=0.9','Referer': '','Sec-Fetch-Mode': 'no-cors','Sec-Fetch-Site': 'same-site',# "User-Agent": 'Mozilla/5.0 (Linux; Android 5.1.1; KIW-AL10 Build/HONORKIW-AL10) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/35.0.1916.138 Mobile Safari/537.36 T7/6.4 baidubrowser/6.4.14.0 (Baidu; P1 5.1.1)',"User-Agent": self.user_agent.get_random_user_agent(),'Cookie': ''}# 转化成request可用的代理if proxy is not None:ip_port, proxies = proxy[0], proxy[1]else:ip_port, proxies = None, {}try:res = requests.get(url, headers=headers, proxies=proxies)print(res.status_code)if res.status_code == 200:# print(res.text)# 解析html数据html = etree.HTML(res.text)if html is not None:e_data = html.xpath('//li[@post_type="0"]/a/@href')# 处理html数据# 解析json数据json_data = json.loads(res.text)print(json_data)# 处理劲松数据# 获取成功 退出循环breakelse:# 重新获取代理if proxy_type == '':# time.sleep(random.randint(2, 5))time.sleep(1)else:proxy = self.all_proxy.get_proxy(proxy_type)except Exception as err:print(err)# 重新获取代理if proxy_type == '':# time.sleep(random.randint(2, 5))time.sleep(1)else:proxy = self.all_proxy.get_proxy(proxy_type)

def demo_thread(self, index, proxy_type=’’):
“”" 标准线程获取队列一般是链接或者可以直接生成链接的参数
“”"

proxy = self.all_proxy.get_proxy(proxy_type)while True:try:get_data = self.get_queue.get()self.get_queue.task_done()proxy = self.demo(get_data, proxy, proxy_type=proxy_type)time.sleep(random.randint(2, 5))except Exception as err:LOGGER.exception(err)time.sleep(1)

def save_thread(self):
“”" 保存数据表格文件，数据过多时分成多个文件
“”"

# 文件基础名
file_name_basic = 'demo_file'
# 第几个文件
file_index = 1wb = Workbook()
ws = wb.active
ws_cnt = 0
# 每个文件最多保存多少条数据
ws_cnt_max = 20000
# 当前文件名
file_name = file_name_basic + "_%s.xlsx" % file_index
file_index += 1while True:try:time.sleep(10)while True:try:data = self.save_queue.get_nowait()self.save_queue.task_done()ws.append(data)ws_cnt += 1except:break# 保存数据wb.save(file_name)print('save_data', ws_cnt)# 重新创建文件if ws_cnt >= ws_cnt_max:wb = Workbook()ws = wb.activews_cnt = 0file_name = file_name_basic + "%s.xlsx" % file_indexfile_index += 1except Exception as err:# LOGGER.exception(err)print(err)time.sleep(1)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37

def python_demo():

demo = PythonDemo()

while True:

time.sleep(10)# 循环打印demo中的相关信息，以监控爬虫的具体进度等情况
print(demo.get_queue.qsize())

1
2
3
4
5
6
7
8
def main():

python_demo()
1
if name == ‘main’:
main()

1
2
3
4
5
6
7
8
9
前面代码中的UserAgent()类如下：

#!/usr/bin/env python

– coding:utf-8 –

import random
import time
import requests
import user_agents

from openpyxl import load_workbook, Workbook
from datetime import datetime, timedelta

class UserAgent:

“”" 主要是从user-agent文件中加载user-agent
然后提供一个随机获取的接口
“”"
_user_agents_list = [

'Mozilla/5.0 (iPhone 6s; CPU iPhone OS 11_4_1 like Mac OS X) AppleWebKit/604.3.5 (KHTML, like Gecko) Version/11.0 MQQBrowser/8.3.0 Mobile/15B87 Safari/604.1 MttCustomUA/2 QBWebViewType/1 WKType/1',
'Mozilla/5.0 (iPhone; CPU iPhone OS 10_1 like Mac OS X) AppleWebKit/602.2.14 (KHTML, like Gecko) Version/10.0 MQQBrowser/8.8.2 Mobile/14B72c Safari/602.1 MttCustomUA/2 QBWebViewType/1 WKType/1',
'Mozilla/5.0 (iPhone; CPU iPhone OS 10_1_1 like Mac OS X) AppleWebKit/602.2.14 (KHTML, like Gecko) Version/10.0 MQQBrowser/8.8.2 Mobile/14B100 Safari/602.1 MttCustomUA/2 QBWebViewType/1 WKType/1',
'Mozilla/5.0 (iPhone; CPU iPhone OS 11_2 like Mac OS X) AppleWebKit/604.3.5 (KHTML, like Gecko) Version/11.0 MQQBrowser/8.8.2 Mobile/15B87 Safari/604.1 MttCustomUA/2 QBWebViewType/1 WKType/1',
'Mozilla/5.0 (Linux; Android 5.1.1; OPPO R9 Plustm A Build/LMY47V; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.12 baiduboxapp/10.12.0.12 (Baidu; P1 5.1.1)',
'Mozilla/5.0 (Linux; Android 6.0.1; OPPO A57 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/48.0.2564.116 Mobile Safari/537.36 T7/9.1 baidubrowser/7.18.21.0 (Baidu; P1 6.0.1)',
'Mozilla/5.0 (Linux; Android 6.0.1; OPPO A57 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.10 (Baidu; P1 6.0.1)',
'Mozilla/5.0 (Linux; Android 6.0.1; OPPO A57 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.10 (Baidu; P1 6.0.1)',
'Mozilla/5.0 (Linux; Android 7.1.1; OPPO R11 Build/NMF26X; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 7.1.1)',
'Mozilla/5.0 (Linux; Android 8.0.0; MI 6 Build/OPR1.170623.027) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/62.0.3202.84 Mobile Safari/537.36 Maxthon/3235',
'Mozilla/5.0 (Linux; Android 8.0.0; MI 6 Build/OPR1.170623.027; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.0.0)',
'Mozilla/5.0 (Linux; Android 8.0.0; SM-G9650 Build/R16NW; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.0.0)',
'Mozilla/5.0 (Linux; Android 8.0.0; SM-N9500 Build/R16NW; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.0.0)',
'Mozilla/5.0 (Linux; Android 8.1.0; ALP-AL00 Build/HUAWEIALP-AL00; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.1.0)',
'Mozilla/5.0 (Linux; Android 8.1.0; ALP-AL00 Build/HUAWEIALP-AL00; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.1.0)',
'Mozilla/5.0 (Linux; Android 8.1.0; PACM00 Build/O11019; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.1.0)',
'Mozilla/5.0 (Linux; Android 8.1.0; vivo Y71A Build/OPM1.171019.011; wv) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/63.0.3239.83 Mobile Safari/537.36 T7/10.13 baiduboxapp/10.13.0.11 (Baidu; P1 8.1.0)',
'Mozilla/5.0 (Linux; U; Android 4.1.2; zh-cn; HUAWEI MT1-U06 Build/HuaweiMT1-U06) AppleWebKit/534.30 (KHTML, like Gecko) Version/4.0 Mobile Safari/534.30 baiduboxapp/042_2.7.3_diordna_8021_027/IEWAUH_61_2.1.4_60U-1TM+IEWAUH/7300001a/91E050E40679F078E51FD06CD5BF0A43%7C544176010472968/1',
'Mozilla/5.0 (Linux; U; Android 4.1.2; zh-cn; HUAWEI MT1-U06 Build/HuaweiMT1-U06) AppleWebKit/534.30 (KHTML, like Gecko) Version/4.0 Mobile Safari/534.30 baiduboxapp/042_2.7.3_diordna_8021_027/IEWAUH_61_2.1.4_60U-1TM+IEWAUH/7300001a/91E050E40679F078E51FD06CD5BF0A43%7C544176010472968/1',
'Mozilla/5.0 (Linux; U; Android 5.1.1; zh-CN; SM-J3109 Build/LMY47X) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.8.0.960 UWS/2.12.1.18 Mobile Safari/537.36 AliApp(TB/7.5.4) UCBS/2.11.1.1 WindVane/8.3.0 720X1280',
'Mozilla/5.0 (Linux; U; Android 7.0; zh-cn; MI 5s Build/NRD90M) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/61.0.3163.128 Mobile Safari/537.36 XiaoMi/MiuiBrowser/10.2.2',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; BAC-AL00 Build/HUAWEIBAC-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.4.974 UWS/2.13.1.48 Mobile Safari/537.36 AliApp(DingTalk/4.5.11) com.alibaba.android.rimet/10487439 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; MHA-AL00 Build/HUAWEIMHA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/40.0.2214.89 UCBrowser/11.6.4.950 UWS/2.11.1.50 Mobile Safari/537.36 AliApp(DingTalk/4.5.8) com.alibaba.android.rimet/10380049 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; MHA-AL00 Build/HUAWEIMHA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/40.0.2214.89 UCBrowser/11.6.4.950 UWS/2.11.1.50 Mobile Safari/537.36 AliApp(DingTalk/4.5.8) com.alibaba.android.rimet/10380049 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; MHA-AL00 Build/HUAWEIMHA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/12.1.4.994 Mobile Safari/537.36',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; MHA-AL00 Build/HUAWEIMHA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/12.1.4.994 Mobile Safari/537.36',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-CN; MI 5 Build/OPR1.170623.032) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.8.9.969 Mobile Safari/537.36',
'Mozilla/5.0 (Linux; U; Android 8.0.0; zh-cn; Mi Note 2 Build/OPR1.170623.032) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/61.0.3163.128 Mobile Safari/537.36 XiaoMi/MiuiBrowser/10.1.1',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-CN; BLA-AL00 Build/HUAWEIBLA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.4.974 UWS/2.13.1.48 Mobile Safari/537.36 AliApp(DingTalk/4.5.11) com.alibaba.android.rimet/10487439 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-cn; BLA-AL00 Build/HUAWEIBLA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.132 MQQBrowser/8.9 Mobile Safari/537.36',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-cn; BLA-AL00 Build/HUAWEIBLA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.132 MQQBrowser/8.9 Mobile Safari/537.36',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-CN; EML-AL00 Build/HUAWEIEML-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.4.974 UWS/2.13.1.48 Mobile Safari/537.36 AliApp(DingTalk/4.5.11) com.alibaba.android.rimet/10487439 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-CN; EML-AL00 Build/HUAWEIEML-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.4.974 UWS/2.13.1.48 Mobile Safari/537.36 AliApp(DingTalk/4.5.11) com.alibaba.android.rimet/10487439 Channel/227200 language/zh-CN',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-CN; EML-TL00 Build/HUAWEIEML-TL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.4.974 UWS/2.14.0.13 Mobile Safari/537.36 AliApp(TB/7.10.4) UCBS/2.11.1.1 TTID/227200@taobao_android_7.10.4 WindVane/8.3.0 1080X2244',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-cn; Mi Note 3 Build/OPM1.171019.019) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/61.0.3163.128 Mobile Safari/537.36 XiaoMi/MiuiBrowser/10.0.2',
'Mozilla/5.0 (Linux; U; Android 8.1.0; zh-CN; vivo Y85 Build/OPM1.171019.011) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.108 UCBrowser/11.9.6.976 Mobile Safari/537.36',# 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; The World)',
# 'Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50 ',
# 'Mozilla/5.0 (Windows; U; Windows NT 6.1; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50',
# 'Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0',
# 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:2.0.1) Gecko/20100101 Firefox/4.0.1',
# 'Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; en) Presto/2.8.131 Version/11.11',
# 'Opera/9.80 (Windows NT 6.1; U; en) Presto/2.8.131 Version/11.11',
# 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_0) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Maxthon 2.0)',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; TencentTraveler 4.0)',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Trident/4.0; SE 2.X MetaSr 1.0; SE 2.X MetaSr 1.0; .NET CLR 2.0.50727; SE 2.X MetaSr 1.0)',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; 360SE)',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Avant Browser)',
# 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)',
# 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:54.0) Gecko/20100101 Firefox/54.0'

]

_user_agent_default = ‘Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36’

def init(self, filename=’./data/user-agent-mobile.txt’):

# self.user_agents_list = self._user_agents_load(filename)
self.user_agents_list = self._user_agents_load_xlsx('./data/user-agent-mobile.xlsx')
print('user_agents_list: %s' % len(self.user_agents_list))

def user_agents_load(self, filename):
“”" 从txt文档中加载user-agent到内存
“”"
try:
with open(filename) as fp:
data = [.strip() for _ in fp.readlines()]
except:
data = [self._user_agent_default]
return data

def _user_agents_load_xlsx(self, filename):
“”" 从xlsx文档中加载user-agent到内存
“”"
try:
wb = load_workbook(filename)
ws = wb.active
data_list = [ws.cell(row, 1).value for row in range(1, ws.max_row + 1)]
except Exception as err:
print(err)
data_list = self._user_agents_list
return data_list

def get_random_user_agent(self):
return random.choice(self.user_agents_list)

AllProxy() 的代码中包含上海开发票上海开发票一些代理平台的账号信息，就不详细提供了。AllProxy类的功能主要是启动一个线程自动获取代理ip保存到最新的代理队列或者代理池里面，然后提供一个接口供外部调用获取代理ip即可。

查看全文
如若内容造成侵权/违法违规/事实不符，请联系编程学习网邮箱：809451989@qq.com进行投诉反馈，一经查实，立即删除！

根据mybatis-plus生成器自动生成：Entity、Mapper、Mapper XML、Service、Controller
AutoGenerator 是 MyBatis-Plus 的代码生成器，通过 AutoGenerator 可以快速生成 Entity、Mapper、Mapper XML、Service、Controller 等各个模块的代码，极大的提升了开发效率。某天我发现了这种方式，使用这种方式去创建项目练习项目真是太方便啦。官方使用介绍：https://mp.b…...
2024/4/30 16:35:37
python-2
第二天比较运算符 if 条件：循环体 else：循环体通过if else语句改进了文字游戏：while循环：程序可以进行多次循环的代码 while 条件：循环体逻辑运算符and 引入外援函数：random模块里面有一函数randint函数（）数据类型整型：长度不受限制浮点型：小数布尔类型：特殊…...
2024/5/1 2:03:36
Java IO流（文件字节流字节缓冲流）
java.io.File类文件是文件和目录路径名的抽象表示，主要用于文件和目录的创建查找和删除等操作。File类将文件，文件夹和路径封装成对象，提供大量的方法来操作这些对象。Filre类构造方法public File（String pathname）：通过将给定的路径名字符串转换为抽象路径名来创建新的F…...
2024/5/1 0:41:02
贴吧记录草稿2
对于自身高中学历这方面，我已经准备好自考本科，每天学习英语单词打下这个科目的基础。学习五笔打字是因为我发现，使用拼音打字错字太多且繁琐。本人接触互联网的时间很多，学习五笔打字不仅对工作有利，对生活也可以带来帮助。而钢琴和rap是自己的兴趣，独立于其他学习内容，…...
2024/5/1 0:43:39
【STL源码解析-学习笔记】空间适配器allocator
空间配置器Allocator1、为什么要引入空间配置器？我们在使用STL标准模版库的时候，所有需要操作的对象都是存放在容器中的。当我们在操作容器中的对象时，比如增加一个元素、删除一个元素或者初始化一个容器的时候，都会涉及内存的分配。因此引入空间配置器，用于存放容器中的…...
2024/4/30 19:39:44
mybatis-plus中乐观锁的实现（乐观锁插件）
1，乐观锁和悲观锁的定义：https://www.jianshu.com/p/d2ac26ca65252，乐观锁实现步骤：取出记录时，获取当前version更新时，带上这个version执行更新时， set version = newVersion where version = oldVersion如果version不对，就更新失败 3，具体的实现步骤：https://mp.ba…...
2024/4/30 23:37:37
Jmeter安装流程和错误修复
Apache JMeter下载地址：http://jmeter.apache.org/download_jmeter.cgi下载解压配置环境变量点击新建，输入变量名为：JMETER_HOME 变量值为你Jmeter解压的路径。随后再点击确定配置classpath变量，点击新建，变量名为固定值：%JMETER_HOME%\lib\ext\ApacheJMeter_core.jar;…...
2024/4/30 22:25:43
13.2.2 二进制文件-读文件
13.2.2 二进制文件-读文件二进制方式读文件主要利用流对象调用成员函数read()函数原型：istream& read(char*buffer, int len); 参数解释：字符指针buffer指向内存中一段存储空间，len是读写的字节数。示例： //第一步：包含头文件 #include <fstream> #include <…...
2024/4/19 10:18:07
你的“脸”，5毛钱就能买到
新华社福州7月13日消息，“要的话五毛一张打包带走，总共两万套，不议价。”一位卖家用微信语音对记者说。他还发来两套手持身份证的人脸照片截图。“新华视点”记者近日调查发现，一些网络黑产从业者利用电商平台，批量倒卖非法获取的人脸等身份信息和“照片活化”网络工具及教…...
2024/4/30 7:32:15
Python练习题详解之函数3（小白友好）
Python练习题详解之函数3（小白友好）你好！欢迎来到Python练习题详解系列。为了让小白（也就是我本人）更好的理解代码，打好编程基础，我决定仔细地解说一些练习题。欢迎阅读！奥利给！题目1编写一个函数，判断传入的字符串参数是否为“回文联”（回文联即用回文形式写成的对…...
2024/5/1 1:36:57
@JsonIgnore注解的作用
要想了解一个包或者一个注解的作用，最直接有效的办法，就是ctrl+鼠标左键，点进去，你发现，国外大佬们跟我们不一样，人家是喜欢写注释的（手动滑稽），注释里面就会详细的介绍这个包或者这个注解是干什么用的，有哪些需要注意的地方 @JsonIgnore注解里面的注释是这样的： /…...
2024/4/26 21:03:52
第一天学习成果
Markdown学习标题：二级标题三级标题四级标题字体 Hello，World！ Hello，World！ Hello，World！ Hello，World! 引用分割线图片 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-hQH7w2Hp-1594655792979)(C:\Users\1\Pictures\Saved Pictures\5…...
2024/4/30 7:35:10
用PROC FCMP创建函数
使用数据步骤语法创建自定义函数语法：OPTIONS CMPLIB=libref.table | (libref.table-1...libref.table-n)PROC FCMP OUTLIB=libref.table.package; FUNCTION function-name(arguments <$>)<$><length>;. . . programming statements. . . RETURN(expression…...
2024/4/30 7:31:05
命令输出ls -l 」 2.txt
man 2 open > 1.txt...
2024/4/30 4:48:41
Ajax
Ajax请求介绍传统请求与Ajax请求的区别Ajax的核心对象Ajax的请求方式GET请求POST请求Ajax响应处理JSON响应的常见问题请求介绍传统的请求方式是基于form表单提交,地址栏直接查询location.href超级连接基于Ajax发起的请求全部属于异步请求传统请求与Ajax请求的区别传统请求…...
2024/4/28 17:17:38
数据挖掘学习日志(part2)--主成分法确定权重与R实现
学习笔记，仅供参考，有错必纠参考文献：基于主成分分析的指标权重确定方法–韩小孩; 主成分法确定权重原理构造样本阵其中，xijx_{ij}x...
2024/4/29 0:17:32
一些便捷的办公操作
windows在目录导航栏直接写cmd会打开当前目录的cmd 如果切换账号用git 需要更改windows凭据 Win + Ctrl + D 创建虚拟桌面 Win + Ctrl + F4 关闭当前虚拟桌面 Win + Ctrl + ← 向左切换虚拟桌面 Win + Ctrl + → 向右切换虚拟桌面召唤Windows截图（Win + Shift + S） win10也…...
2024/4/12 7:51:21
PAT_B_1040_Java(25分)
直接找A，每个A前的P和后的T个数乘积，再加和，就是输出的数了 //意料之中的超时了三个测试点 import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader;public class Main {public static void main(String[] args) throws IOException…...
2024/4/28 19:11:31
限制MongoDB内存使用（RHEL7）
1. 修改MongoDB配置文件vim /opt/blueix/conf/mongo/mongo_standalone.conf添加MongoDB参数：storage.wiredTiger.engineConfig.cacheSizeGBsystemLog:destination: filepath: "/opt/logs/mongo/mongo_standalone.log"logAppend: true storage:dbPath: "/opt/db…...
2024/4/30 7:29:45
day12_shell编程
Shell编程与运维一、Shell 脚本概述通过 Shell 中的各种命令, 开发者和运维人员可以对服务器进行维护工作。但每次都手动输入命令, 工作效率太低, 而且很容易出错, 尤其是需要维护大量服务器时。为了能够对服务器批量执行操作, 我们可以将需要执行的命令写入文件, 批量执行…...
2024/4/30 7:35:22

杭州开发票爬虫代码

相关文章

最新文章