python scrapy 爬当当数据

scrapy startproject dangdang cd dangdang scrapy genspider dangdang "dangdang.com" 核心代码 dangdang.py # -*- coding: utf-8 -*- import json import scrapy from copy import deepcopy import json class DangdangSpider(scrapy.Spider): name = 'dangdang'
分类: 其他 发布时间: 05-24 21:04 阅读次数: 0

Git进行跨团队合作时的操作

1.A团队项目经理要将本项目git的HTTPS地址提供给B团队的项目经理 2.B团队项目经理登录git账号,进入A项目经理提供的HTTPS地址中 3.B团队项目经理点击Fork加入项目 4.B项目经理进行clone操作,并由B团队中成员对项目进行迭代 5.迭代完成之后B项目经理进行add与commit操作,最后push到远程库 6.当B团队的代码要与A团队的代码进行合并的时候,B团队经理要向A团队经理发出请求 7.A团队经理对B团队经理发出的请求做出审批   同样也是点击Pull reques
分类: 其他 发布时间: 05-24 21:04 阅读次数: 0

【模板整合计划】计算几何

【模板整合计划】计算几何 一:【计算几何全家桶】 【学习笔记】计算几何全家桶 二:【自适应辛普森积分】 1.【自适应辛普森积分 1】 【模板】自适应辛普森法 \(1\) \(\text{[P4525]}\) (局部精度) #include<algorithm> #include<cstdio> #include<cmath> #define LD double #define LL long long #define Re register int #define Vector Point u
分类: 其他 发布时间: 05-24 21:04 阅读次数: 0

第三方医学实验室信息管理(LIMS)的发展-之一

伴随着国内众多的第三方检验所的兴起,传统医院模式的lis在功能性上已经不能满足检验所的需求。 相对于医院来说,第三方LIS检验,不仅仅在工作岗位上与医院有很大不同,比如多了,前处理岗,客服岗,销售物流岗,财务岗等等,而且检测种类也与医院相比有着极大不同,药物基因,靶向用药,各种基因检测,常规病理、分子病理等等。而医院版lis受限于医院管理需求,功能相对单一,在常规的检测上优势明显,相对来讲在病理阅片,分子检测等方面比较薄弱,而通常医院开着分子检测,或者病理科,会在LIS之外单独引进其他软件,满
分类: 其他 发布时间: 05-24 21:04 阅读次数: 0

转换器与预估器

一、转换器   在之前我们对数据做标准化或者其它的特征工程处理时使用了fit_transform方法,它是输入数据并且对数据进行转换;与之对应的就是fit方法与transform方法,实际上这两个方法相当于一个fit_transform方法。 In [1]: from sklearn.preprocessing import StandardScaler In [2]: data = [[1,2,3],[4,5,6]] In [3]: sd = StandardScaler() In [
分类: 其他 发布时间: 05-24 21:04 阅读次数: 0

爱好选择器练习

1 <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd"> 2 <html> 3 <head> 4 <meta http-equiv="Content-Type" content="text/html; charset=UTF-8"> 5 <title>全选练习</title> 6 </head> 7 <b
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

[转] Spring Boot 自动配置之@Enable* 与@Import注解

SpringBoot 的自动配置如此强大,比如我们经常使用的@Enable* 注解来开启对某方面的支持。那么@Enable* 注解的原理是什么呢? 一、@Enable* 注解与 @Import 注解之间的关系 @Enable* 举例: @EnableScheduling 开启计划任务的支持 @EnableAsync 开启异步方法的支持 @EnableAspectJAutoProxy 开启对 AspectJ 代理的支持 @EnableTransactionManagement 开启对事务的支持
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

SpringBoot2整合Redis

pom.xml <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> </dependency> application.yml spring: redis: host: 192.168.16.128 port: 6379 # 下面这些可以不加 jedis: pool:
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

eclipse相关小技巧(以前确实也都遇到过,今天休息决定有时间就系统的整理下喽,嘻嘻)

Eclipse纯净版没有web相关的插件:添加插件 1)在Eclipse中菜单help选项中选择install new software选项 (2)在work with 栏中输入 http://download.eclipse.org/releases/2019-12 (3)选择web,xml, java ee development选项,然后选择next 注:网址最后的‘2019-12’是eclipse的版本号,查看eclipse版本号:help > About Eclipse IDE ec
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

添加删除练习

1 <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01//EN" "http://www.w3.org/TR/html4/strict.dtd"> 2 <html> 3 4 <head> 5 <meta http-equiv="Content-Type" content="text/html; charset=UTF-8"> 6 <title>添加删除记录练习</title> 7 <link rel="styleshe
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

python_unittest_单元测试

一。单元测试 1)定义: 单元:函数或者是类 单元测试:测试类或者函数 python内置的单元测试框架:unittest 2)单元测试的意义 好处:投入小,收益大。能够精准的,更早的发现问题。 3)单元测试与测试关系 python 很难测试 java 的单元。 关键是单元测试一般是开发或者测试开发做的。 测试一般会在集成、系统、验收进行测试 4)unittest的注意事项: 1.模块名需要以 test_ 开头 2.类名:以 Test 开头 3.测试用例的方法名称以 test_ 开头 4.单元测
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

Day02_WebCrawler(网络爬虫)

学于黑马和传智播客联合做的教学项目 感谢 黑马官网 传智播客官网 微信搜索"艺术行者",关注并回复关键词"webcrawler"获取视频和教程资料! b站在线视频 学习目标 能够理解WebMagic架构 能够完成入门案例 能够理解PageProcessor的作用 能够使用选择器抽取页面元素 能够使用Spider启动爬虫 能够使用Site设置爬虫参数 能够使用过滤器对url去重 能够实现案例 能够使用和定制Pipeline输出数据 1. 课程计划 WebMagic介绍 WebMagic功能 爬虫
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

SpringBoot--页面国际化

实现登录页面的中英文转换 1.编写国际化配置文件,抽取页面需要的国际化信息 2.页面设计 访问时会根据浏览器的语言选择对应的语言 使用了thymeleaf的相关语法 <!DOCTYPE html> <html lang="en" xmlns:th="http://www.thymeleaf.org"> <head> <meta http-equiv="Content-Type" content="text/html; charset=UTF-8"> <
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

2020/5/24 网鼎杯_青龙组_signal

在参加网鼎杯之前,还没接触过vm指令的题,姑且是在网上找到好多,接下来几天慢慢做,看看能不能整理到一起。 打开看着还挺简单的,一点进vm_operad人就傻了。 里面是各种操作,太长了就不截图了,我还没学会怎么在word文档里贴代码(对我都是word文档写好之后上传博客的) 这里想说一下我对vm虚拟机这类题的理解。 看起来好像是题目给出一串opcode,然后通关循环switch判断opcode的数,找到对应的操作。 这群opcode里面可以既有代表某一操作的指令,也有需要操作的数据。 我们需要
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

docker上安装并启动redis

// 拉取redis镜像 [root@bogon ~]# docker pull redis // 查看所有镜像 [root@bogon ~]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE docker.io/redis latest f9b990972689 3 weeks ago 104 MB // 启动镜像redis [root@bogon ~]# docker run -p 6379:6379 -d redis:lat
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

kali中安装漏洞靶场Vulhub(超详细)

前言 我们都知道,在学习网络安全的过程中,搭建漏洞靶场有着至关重要的作用。复现各种漏洞,能更好的理解漏洞产生的原因,提高自己的学习能力。下面我在kali中演示如何详细安装漏洞靶场Vulhub。 什么是Vulhub? Vulhub是一个基于docker和docker-compose的漏洞环境集合,进入对应目录并执行一条语句即可启动一个全新的漏洞环境,让漏洞复现变得更加简单,让安全研究者更加专注于漏洞原理本身。Vulhub的官方地址为www.vulhub.org。 安装docker 因为Vulhu
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

目标检测初体验(三)破解滑动验证码

  在我们日常登录或注册某个网站的时候,经常会出现滑动验证码,如下图:   本文将会讲述如何利用darknet来破解滑动验证码,我们只要找到图片中的缺口就可以了。 数据的采集和标注   笔者利用爬虫在某网站爬取了约300张带缺口的滑动验证码的图片,并对这些验证码图片进行标注,即标注缺口的位置。   我们使用的标注工具为labelImg,这是图像标注方面一个非常好用的GUI工具。网上已经有很多关于安装labelImg的教程,本文不再具体介绍。我们打开labelImg,如下图:   在labelI
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

地震台站形变数据监控报警软件

地震形变监测仪器常常因降雨等原因,产生限幅,需要人工干预进行调零。因没有自动报警监控软件,影响监测数据的连续率。 利用python开发了这个小软件,实现了水管仪,伸缩仪,垂直摆等3类形变监测数据监控功能,数据限幅会自动报警,台站应用 此软件可提高形变数据的连续率。 import requests import winsound import time import re import tkinter as tk # import threading import os import sys f
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

第十五届中北大学算法与程序设计竞赛 C

第十五届中北大学算法与程序设计竞赛 C 题意:现在给你n个数的数组,每次可以选择连续的区间操作,可以使得区间内每个数加1或者减去1。问最少多少次之后,可以使得整个数组变成相等的数。 题解:打出差分数组,如果差分数组从第二项开始为0。那么这就是一个相等的数组了。还有一点是,区间修改在差分数组中会变成两点的修改。例如修改\([L,R]\)区间,例如加1,体现在差分数组上就是b[L]++,b[R+1]--。那么现在问题变成了,怎么把从差分数组第二项开始全变成0。我们考虑里面的所有正数和负数配对,然后
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0

Recall2019BNUOJ

2019年本人在北京师范大学OJ系统上做了一些题目,现在回忆出来(代码不需要回忆,有记录,目前共8题)。 Primary Arithmetic pid=1006 当你在小学学习算数的时候,老师会教你把两个数由右至左按位加起来。很多时候,加法过程中会出现进位。对于一部分孩子,理解这个“进位”在当时是很困难的事情。现在你的工作就是编写一个程序来判断两个数相加的过程中会产生多少次进位,用以确定这两个数相加的“难度”。 Input 每一行有两个无符号整数(最大不超过1000000000),当输入0 0
分类: 其他 发布时间: 05-24 20:48 阅读次数: 0