Driver stacktrace: at org.apache.spark.scheduler.DAGScheduler.org$apache$spark$scheduler$DAGSchedul

在写Spark程序是遇到问题 Driver stacktrace: at org.apache.spark.scheduler.DAGScheduler.orgapacheapachesparkschedulerschedulerDAGScheduler$$failJobAndIndependentStages(DAGScheduler.scala:1283) 这个原因是因为数据过大,而中断(我的天,坑死我了,只有一万条数据啊)
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

HttpClient 释放连接

Release the Connection:释放连接 This is a crucial step to keep things flowing. We must tell HttpClient that we are done with the connection and that it can now be reused. Without doing this HttpClient will wait indefinitely for a connection to free up s
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

.Net 调用中国气象台Web Service

接口地址http://www.webxml.com.cn/WebServices/WeatherWebService.asmx 调用步骤:项目添加服务引用-高级-添加web引用 简单代码: web服务名.WeatherWebService w = new web服务名.WeatherWebService(); //把webservice当做一个类来操作 string[] s = new string[23];//声明string数组
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

Machine Learning——吴恩达机器学习笔记(酷

【1】 ML Introduction a. supervised learning & unsupervised learning   监督学习:从给定的训练数据集中学习出一个函数(模型参数),当新的数据到来时,可以根据这个函数预测结果。监督学习的训练集要求包括输入输出,也可以说是特征和目标。训练集中的目标是由人标注的。常用于:训练神经网络、决策树、回归分析、统计分类   无监督学习:输入数据没有被标记,也没有确定的结果。样本数据类别未知,需要根据样本间的相似性对样本集进行分类,试图使类内差
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

插队技巧 排序...

这个插队排序的名字是我自己起的,现在有一个需求,有5个部门例如:1.技术部2.销售部3.管理部4.市场部5.人事部 现在要对他们进行排序(根据某值) 要求是不根据技术部和管理部进行排序 除了这两个 其他三个再进行排序,这个看似不简单的问题可以用下列SQL解决。 SQL语句:SELECT 部门ID,部门 FROM Dapartment Order by Case When 部门="技术部" or 部门="管理部" then 0 else 1 END ,部门 ASC.
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

网络传输与加密 (2)

网络传输与加密 让我们先回顾一下上次的验证过程,如下图 有了“原信息”和它对应的“md5签名字符串”,我们就可以做最基本的信息验证:通过md5签名字符串的一致性,来保障我们收到的信息没有受到更改。 P.S.:由于签名signature在后续文章中会另有所指,为区分md5签名字符串,我们将md5签名字符串的叫法,更改为md5指纹字符串。意思同签名是一样的,就是A之所以是A的证据、特征,可以用签名来表示,也可以用指纹来表示。这里,我们开始将md5字符串对应的这个特征,称作md5指纹。 但一个容易发
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

验证码识别 Tesseract的简单使用和总结

Tesseract是什么 OCR即光学字符识别,是指通过电子设备扫描纸上的打印的字符,然后翻译成计算机文字的过程。也就是说通过输入图片,经过识别引擎,去识别图片上的文字。Tesseract是一种适用于各种操作系统的光学字符识别引擎,最早是hp公司的软件,2005年开源,2006年后由google一直赞助Tesseract开发和维护。2006年,Tesseract被认为是当时最准确的开源OCR引擎之一 。 验证码识别类型 这里讨论一般的验证码识别,即英文、数字、或者英文和数字的混合的验证码,不包
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

2018年8月6日博客之旅真正开始

 恒,厚,勤,学,俭 怕什么真理无穷,进一寸有进一寸的欢喜! 这篇文章写给自己!这篇文章写给自己!这篇文章写给自己!这篇文章写给自己! 以前总是在写的时候越写越纠结,考虑怎么让看得人理解,怎么让看的人明白,怎么让自己装一波逼。这篇文章写给自己,从现在开始,开始自己的博客之旅。    一、自己的小总结——教育、工作(流水账):   1)教育:   2010年高中毕业就开始工作,至今有8年了,从刚毕业到现在心理变化很大,知识确实是十分重要的,不是美丽人生的敲门砖,也不是进步的阶梯,没有这些高大上的
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

Codeforces 1016G Appropriate Team 数论 FWT

原文链接https://www.cnblogs.com/zhouzhendong/p/CF1016G.html 题目传送门 - CF1016G 题意 题解   今天太晚了,鸽一鸽,明天写。 代码 #include <bits/stdc++.h> using namespace std; typedef long long LL; typedef unsigned long long ULL; typedef long double LD; namespace Pollard_Rho{ int
分类: 其他 发布时间: 08-06 23:13 阅读次数: 0

改良计算器(搜索)

题目背景 NCLNCL 是一家专门从事计算器改良与升级的实验室,最近该实验室收到了某公司所委托的一个任务:需要在该公司某型号的计算器上加上解一元一次方程的功能。实验室将这个任务交给了一个刚进入的新手ZL先生。 题目描述 为了很好的完成这个任务, ZLZL 先生首先研究了一些一元一次方程的实例: 4+3x=84+3x=8 6a-5+1=2-2a6a−5+1=2−2a -5+12y=0−5...
分类: 编程语言 发布时间: 08-06 23:13 阅读次数: 0

在JavaScript中也玩变量类型强行转换

我们在C/C++和C#这类强类型语言中,强行转换变量类型简直就是家常便饭。可是JavaScript这个动态类型脚本语言的变量号称是没有类型的,那么我们怎么转换它的变量的类型呢?而且还要强行转。
分类: 编程语言 发布时间: 08-06 23:12 阅读次数: 0

JAVA线程本地存储(ThreadLocal)

今天看书看到这么一句话,“防止任务在共享资源上产生冲突的第二种方式是根除对变量的共享。线程本地存储是一种自动化机制,可以为使用相同变量的每个不同线程都创建不同的存储”。(第一种方式就是进行同步控制,比如加锁喽) 那么什么是线程本地存储,个人理解就是,对一个苹果,本来是大家都要来一口,抢来抢去的,现在的做法就是一人一个苹果。 假设我们现在有个共享的苹果,人人都想把苹果占为己有(把苹果的ID改为自...
分类: 编程语言 发布时间: 08-06 23:12 阅读次数: 0

Python:GUI之tkinter学习笔记之messagebox、filedialog

相关内容: messagebox 介绍 使用 filedialog 介绍 使用   首发时间:2018-03-04 22:18     messagebox:   介绍:messagebox是tkinter中的消息框、对话框 使用: 导入模块:import tkinter.messagebox 选择消息框的模式: 提示消息框:【返回”o...
分类: 编程语言 发布时间: 08-06 23:11 阅读次数: 0

python-批量创建指定名称的文件夹

前言:在用深度学习的方法做目标分类时,会遇到创建数据集的问题。比如说需要创建200类,每类目标存放500张图片。这样就需要首先建立200个不同名称的文件夹。然而,如果一个个创建显然要不得,因此,就有了以下的代码: 1.批量创建N个文件夹: import os, sys def MkDir(): path = './file/'#创建文件路径 i = 0 for i i...
分类: 编程语言 发布时间: 08-06 23:11 阅读次数: 0

CF327E Axis Walking

题目:Axis Walking 思路: 用lowbit优化的dp。 注意此题卡常,不能用%,应改成减。 还要注意要使用long long。 代码: #include&amp;lt;bits/stdc++.h&amp;gt; using namespace std; #define maxn 24 #define ll long long #define maxM (1&amp;lt;&amp;lt;24) #def...
分类: 编程语言 发布时间: 08-06 23:11 阅读次数: 0

求1-N之间的素数

一、什么是素数: &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;素数(prime number)又称质数,有无限个。一个大于1的自然数,除了1和它本身外(因为1既不是素数,也不是合数),不能被其他自然数(质数)整除,换句话说就是该数除了1和它本身以外不再有其他的因数. 比如:2,3,5,7,11,…等。 二、如何判断一个数是否为素数: &amp;n...
分类: 其他 发布时间: 08-06 23:10 阅读次数: 0

第N个斐波那契数对10007取余的结果

问题描述: &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;Fibonacci数列的递推公式为:Fn=Fn-1+Fn-2,其中F1=F2=1。 &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;当n比较大时,Fn也非常大,现在我们想知道,Fn除以10007的余数是多少。 题目说明:
分类: 其他 发布时间: 08-06 23:10 阅读次数: 0

C语言实现十进制转换为二进制

问题描述: 写一个函数,输入一个10进制数,输出它的2进制,例如:输入9,输出1001; 解题思路: 如果将一个十进制的数转换成二进制,那么只需要将这个数一直做模2除2的操作,直到这个数为零的时候结束。 代码实现: #define _CRT_SECURE_NO_WARNINGS 1 #include &amp;lt;stdio.h&amp;gt; int main() { int n ...
分类: 其他 发布时间: 08-06 23:10 阅读次数: 0

C语言实现大小写字符转换

问题描述: 输入一串字符串,将其中的大写字母换成小写,小写字母换成大写输出。 例如: 输入:ASDFGHJzxcvb 输出:asdfghjZXCVB 解题思路: 将一个小写字符转换成大写字符,只需要将这个字符减去32;将一个大写字符转换成小写字符,则给这个字符加上32; 代码实现: #include&amp;lt;stdio.h&amp;gt; int main() { while (...
分类: 其他 发布时间: 08-06 23:10 阅读次数: 0

奇妙的塔

用1,2,...,n表示n个盘子,称为1号盘,2号盘,...。号数大盘子就大。经典的汉诺塔问  题经常作为一个递归的经典例题存在。可能有人并不知道汉诺塔问题的典故。汉诺塔来源于  印度传说的一个故事,上帝创造世界时作了三根金刚石柱子,在一根柱子上从下往上按大小  顺序摞着64片黄金圆盘。上帝命令婆罗门把圆盘从下面开始按大小顺序重新摆放在另一根柱  子上。并且规定,在小圆盘上不能放大圆盘,在三根柱子...
分类: 其他 发布时间: 08-06 23:08 阅读次数: 0