XOR
进程注入检测——DLL注入检测的几种方式:1、命令行,包含某些特定注入工具的关键字 2、排除白名单的可疑注入 3、可疑的DLL加载 4、特定工具注入的startaddress异常
进程注入检测 DLL注入检测的几种方式:1、命令行,包含某些特定注入工具的关键字 2、排除白名单的可疑注入 3、可疑的DLL加载 4、特定工具注入的startaddress异常 以下内容来自CAR和splunk等开源检测渠道: title: CobaltStrike Process Injectio ......
Scrapy集成selenium-案例-淘宝首页推荐商品获取
scrapy特性就是效率高,异步,如果非要集成selenium实际上意义不是特别大....因为selenium慢.... 案例:淘宝首页推荐商品的标题获取 爬虫类 toabao.py ```Python import scrapy from scrapy.http import HtmlRespon ......
Scrapy在pipeline中集成mongodb
settings.py中设置配置项 ```Python MONGODB_HOST = "127.0.0.1" MONGODB_PORT = 27017 MONGODB_DB_NAME = "bang123" ``` pipelines.py: ```Python from scrapy.pipeli ......
Scrapy如何在启动时向爬虫传递参数
**高级方法:** **一般方法:** 运行爬虫时使用-a传递参数 ```Bash scrapy crawl 爬虫名 -a key=values ``` 然后在爬虫类的__init__魔法方法中获取kwargs ```Python class Bang123Spider(RedisCrawlSpid ......
BST(二叉搜索树)、AVL(平衡二叉树)、RBT(红黑树)的区别
一、二叉搜索树(BST:Binary Sort Tree) 二叉查找树就是左结点小于根节点,右结点大于根节点的一种排序树,也叫二叉搜索树。 二叉查找树比普通树查找更快,查找、插入、删除的时间复杂度为O(logN)。但是二叉查找树有一种极端的情况,就是会变成一种线性链表似的结构。此时时间复杂度就变成了 ......
Linux内存管理 - 大页 (-)
一. 内存映射和页表 我们通常说的内存容量, 指的是物理内存, 只有内核才可以直接访问物理内存。 进程并不可以 Linux内核给每个进程都提供了一个独立的虚拟地址空间, 并且这个地址空间是连续的, 这样, 进程就可以很方便的访问虚拟内存。 虚拟地址空间的内部又被分为内核空间和用户空间两部分。 不同字 ......
数组转树
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <meta name="viewport" content="width=`, initial-scale=1.0"> <meta http-equiv="X-UA-Comp ......
Leangoo领歌提供的Scrum敏捷培训详情
Leangoo领歌权威课程包括:官方权威Scrum认证培训课程(CSM,CSPO,A-CSM等)、大规模敏捷SAFe及LeSS认证培训,以及量身定制的Scrum敏捷开发企业级实训课程培训, 敏捷工程技术实践课程等。 ......
考研英语 题目
1.use of english英语知识运用(完形填空)  2.Reading Comprehension ......
mysql原理
参考: 极客时间-Mysql实战45讲 [小林coding](https://www.xiaolincoding.com/mysql) [MySQL日志、事务原理](https://blog.51cto.com/u_15773567/5807489) # 一条sql执行过程 连接器:建立连接,管理连 ......
【解决方法】通过二层互联实现 DHCP 环境,并使两个局域网互联
# 环境: >工具:锐捷 EVE 模拟器,VMware Workstation Pro 远程工具:SecureCRT 系统版本:Windows 10 # 问题描述: >描述:在项目实施中,通常会使用二层互联的方式实现设备的DHCP环境的搭建,左边为原监控和库房网络,右边为现搭建的 WIFI 网络。 ......
JVM 知识点
## 知识点 1. class 文件结构 2. classloader 3. JVM 运行时数据区 4. 垃圾回收器和垃圾回收算法 5. JIT ## JVM 运行时数据区 运行时数据区是规范的叫法,一般习惯叫做 JVM 内存结构。JVM 的内存结构可以分为公有和私有两部分。公有指的是所有线程都共享 ......
秒杀系统核心技术
单就秒杀系统本身而言,就是为应对瞬时高并发、大流量场景而设计的支持高并发、大流量的系统,其背后会涉及到众多高并发、高性能、高可用的技术作为基础保障。同时,在系统中,也要重点突破库存与限购、防刷与风控、数据一致、热点隔离、动静分离、削峰填谷、数据兜底、限流与降级、流控与容灾等核心技术问题。 源码: h ......
Scrapy-settings.py常规配置
```Python # Scrapy settings for scrapy_demo project # # For simplicity, this file contains only settings considered important or # commonly used. You ......
Scrapy如何在爬虫类中导入settings配置
假设我们在settings.py定义了一个IP地址池 ```Bash ##### 自定义设置 IP_PROXY_POOL = ( "127.0.0.1:6789", "127.0.0.1:6789", "127.0.0.1:6789", "127.0.0.1:6789", ) ``` 要在爬虫文件中 ......
scrapy 请求meta参数使用案例-豆瓣电影爬取
num = 0 ```Python import scrapy from scrapy.http import HtmlResponse from scrapy_demo.items import DoubanItem """ 这个例子主要是学习meta传参。 """ class DoubanSpi ......
Scrapy-CrawlSpider爬虫类使用案例
CrawlSpider类型的爬虫会根据指定的rules规则自动找到url比自动爬取。 优点:适合整站爬取,自动翻页爬取 缺点:比较难以通过meta传参,只适合一个页面就能拿完数据的。 ```Python import scrapy from scrapy.http import HtmlRespon ......
Scrapy自带的断点续爬JOB-DIR参数
参考官方文档:[https://docs.scrapy.org/en/latest/topics/jobs.html?highlight=JOBDIR#jobs-pausing-and-resuming-crawls](https://docs.scrapy.org/en/latest/topics ......
Scrapy-redis组件,实现分布式爬虫
安装包 ```Python pip install -U scrapy-redis ``` settings.py ```Python ##### Scrapy-Redis ##### ### Scrapy指定Redis 配置 ### # 其他默认配置在scrapy_redis.default.py ......
ZROI学习笔记——Week 1
# 7.17 Day 1 - 基础数据结构 ## 并查集 - 基础做法 - 路径压缩:均摊复杂度 $\Theta(n \log n + q)$。 - 按秩合并:将小子树作为大子树的儿子,维持深度在 $O(\log n)$ 级别。 ```cpp void merge(int x,int y) { if ......
【补充】分页器推导
# 【11.0补充】分页器推导 # 【1.0】基础版 - 后端 ```python def ab_many(request): # 分页操作 推导 # (1) 支持切片models.Book.objects.all()[1:20] 展示前20条数据 # (2) 分页操作 # 想访问的页数 curre ......
自定义分页器模版
# 【前言】 - 当我们需要使用到非Django内置的第三方模块或者功能组件代码的时候 - 我们一般情况下会创建一个名为 `utils` 的文件夹 - 在该文件夹内对模块的功能进行划分 - `项目根目录/utils/自定义文件` > 特别注意:样式基于bootstrap,需要引入bootstrap配 ......
Scrapy爬虫文件代码基本认识和细节解释
```Python import scrapy from scrapy.http.request import Request from scrapy.http.response.html import HtmlResponse from scrapy_demo.items import Forum ......
P9451 [ZSHOI-R1] 新概念报数 题解
## _Description_
在此题中,对于一个数 $x$,若 $\texttt{popcount}(x)\geq3$(即 $x$ 在二进制下 $\texttt{1}$ 的个数大于等于三时),那它是非法的,否则其为合法的。
给定 $T$ 个数,如果当前的数 $x$ 是非法的,则输出 ```N... ......
【7.0】Django框架之视图层
# 【一】三板斧 ## 【1】HttpResponse - 返回字符串类型 ## 【2】render - 返回html页面,并且在返回给浏览器之前还可以给html页面传值 ## 【3】redirect - 重定向页面 > 视图函数必须返回一个 HttpResponse 对象 # 【二】JsonRes ......
perl学习笔记11_here_doc
here doc: ```perl # 先定义一个变量, 用于替换. my $a = 90; # 定义Here doc: TEXT: # 1. TEXT两侧 "使用双引号" 与 "不使用引号" 效果相同; # 2. 如果不使用引号,<<与TEXT之间不能有空格; # 3. 如果使用单引号,doc内的 ......
Selenium等待元素出现
[https://www.selenium.dev/documentation/webdriver/waits/](https://www.selenium.dev/documentation/webdriver/waits/) 有时候我们需要等待网页上的元素出现后才能操作。selenium中可以使 ......
ABC抽象类笔记
python抽象类的介绍 python的abc模块提供了对抽象类的支持,通过继承ABC类,可以实现定义一个抽象父类,这个父类可以提前定义好一些抽象接口,可以通过继承抽象父类并实现这些接口方法来定义不同的类 比如我们定义一个图形类 from abc import ABC, abstractmethod ......
【3.0】Django框架之数据操作初识
# 【一】登录功能实现 ## 【1】form表单默认是post请求 - 添加的数据会默认拼接在url后面 ``` http://127.0.0.1:8000/login/?username=dream&password=521 ``` ## 【2】form表单的action参数 - 不写,向当前所在 ......