- 第五章:用Python分析商品退单数据并找出异常商品
帅帅的Python
本文可以学习到以下内容:使用pandas中的read_sql读取sqlite中的数据获取指定的日期的周一和周日使用groupby+agg方法统计每周的商品总销量和总退单量使用value_counts方法统计商品的退单数据使用merge方法合并数据数据及源码地址:https://gitee.com/myrensheng/data_analysis项目背景早上刚到公司,小凡就被叫去开晨会。这么早,肯定
- 第十章用Python获取sqlite、MySQL、Excel、csv、json中的数据
帅帅的Python
本文可以学习到以下内容:用Python、pandas获取sqlite3中的数据用Python、pandas获取MySQL中的数据用Python、pandas获取Excel、csv、json中的数据数据及源码地址:https://gitee.com/myrensheng/data_analysis项目背景小凡所在的数据部门需要经常和各种数据打交道,包括数据库、Excel、csv、json。面对各种各
- 第六章用Python实现自动发送邮件以及钉钉消息
帅帅的Python
本文可以学习到以下内容:使用requests库发送钉钉消息使用email和smtplib库发送邮件使用163邮箱服务,自动发送邮件及附件数据及源码地址:https://gitee.com/myrensheng/data_analysis项目背景随着公司业务的不断扩展,业务部门产生的数据也越来越多,小凡开始忙上忙下,不断奔跑于各个部门之间。每天,小凡需要将各个部门产出的数据(大多数都是excel数据
- 第七章用Python实现对Excel文件中的数据进行md5加密
帅帅的Python
本文可以学习到以下内容:使用pandas中的to_excel生成excel数据使用pandas中的read_excel读取excel数据使用pandas中的map函数加密手机号的身份证号使用hashlib库对数据进行md5、sha加密数据及源码地址:https://gitee.com/myrensheng/data_analysis项目背景小凡公司金融业务需要在客户申请后对客户进行资质判定,这天小
- 第八章用matplotlib、seaborn、pyecharts绘制散点图
帅帅的Python
本文可以学习到以下内容:matplotlib中文乱码解决办法seaborn中文乱码解决办法seaborn库csv数据下载地址用matplotlib、seaborn、pyecharts绘制散点图数据及源码地址:https://gitee.com/myrensheng/data_analysis散点图小凡在做数据分析的时候,经常需要对数据进行可视化操作,这样可以更加直观的了解数据,从而更好的分析数据。
- 【shell】循环将字符串写入数组中?
米源MY
bashshell脚本语法怪异,其他语言循环写入数组或列表都很简单实现,或有相应函数来做。以下用两种方法来实现:方法一c=0foriin`ls./Data_Analysis/Quantitation/*-VS-*.xls`;dopre=`echo$i|sed's/.*\///'`filelist[$c]="$pre"((c++))doneecho$cforiin${filelist[@]}dosa
- pandas 调整列的位置(或顺序)
借無常一肘
python笔记python
importpandasaspdimportosos.chdir(r'C:\Users\Hans\Desktop\data_analysis\test_data')df=pd.read_csv('ChinaBank.csv')df.head()Unnamed:0DateOpenHighLowCloseVolume012014-01-022.622.622.592.6141632500122014-
- Python数据分析(7)----Apple公司股价数据分析
我这一次
Python入门知识python数据分析
本次实验内容为餐饮订单数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:appl_1980_2014.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-importpandasaspdimpo
- pandas 单列排序&多列排序
借無常一肘
python笔记python
importpandasaspdimportosos.chdir(r'C:\Users\Hans\Desktop\data_analysis')df=pd.read_excel('pandas_multiindex.xls')df.head()日期收盘开盘高低交易量涨跌幅公司02020年5月27日201.18202.64202.64196.7723.61M-0.0027BABA12020年5月26
- Python数据分析(4)----餐饮订单数据分析
以卿妈妈Dpp
Python入门知识
本次实验内容为美国犯罪数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:US_Crime_Rates_1960_2014.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-importpand
- 经典泰坦尼克数据集生存率预测
陈菜菜想当生信工程师!
机器学习机器学习python
今天发现投的实习都gg了,正式开始学机器学习啦。之前coursera的吴恩达其实学过的,python基础也有的,所以直接开始搞项目。kaggle登不上去,打算从天池和科赛开始模仿起。第一个项目,泰坦尼克号生存率预测,三种算法:1、线性回归2、逻辑回归3、随机森林【数据预处理】importpandasaspdimportnumpyasnppath1='D:/data_analysis/jupyter
- NLP关键词提取(一)
chuntingting
自然语言学习
NLP关键词提取(一)jieba分词将csv文件的数据按照一定规则放入dataframe中提取role、key_word、end_time、begin_time列值importjiebaimportpandasaspdimportredata=pd.read_csv(r'/Users/atsushi/Desktop/python/data_analysis/data/data.csv',encod
- Python数据分析(3)----酒类销售数据分析
以卿妈妈Dpp
Python入门知识
本次实验内容为酒类销售数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:drinks.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-importpandasaspd#探索酒类消费数据,主要
- Python数据分析(1)----餐饮订单数据分析
以卿妈妈Dpp
Python入门知识
本次实验内容为餐饮订单数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:chipotle.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-#用shift+Alt+E一行一行执行,右下角看数据
- Python数据分析(2)----欧洲杯数据分析
以卿妈妈Dpp
Python入门知识
本次实验内容为欧洲杯数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:Euro2012.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-importpandasaspd#1.将数据集存入一个
- python 获取较大.csv文件的行数
各种装逼各种吹
数据分析python.csv文件行数pandas数据分析
所谓较大.csv文件,就是直接用pd.read_csv读取,会出现MemoryError.这时需要把文件变成迭代器,分段读取.user_info=pd.read_csv("E:\data_analysis\Graduationdesign\data\weibo_users.csv",iterator=True)添加了iterator参数.这样可以使用.get_chunk(10000)方法,每次读取
- Python数据分析(6)----招聘信息数据分析
以卿妈妈Dpp
Python入门知识python数据分析
本次实验内容为餐饮订单数据的分析,数据请见:https://pan.baidu.com/s/1tL7FE5lxs-gb6Phf8XRu_Q,文件夹:data_analysis,下面的文件:job_info.csv本次实验主要是对python中的数据进行基本操作。代码为:#!/usr/bin/envpython#-*-coding:utf-8-*-importpandasaspdimportre#招
- Data_analysis
轻荷
Data_analysisString[]allwords;Stringdelimiters=",.?!;:[]";IntDictconcordance;PFontf;intn=0;voidsetup(){size(600,400);pixelDensity(2);//loadfontf=createFont("arial",12,true);//loadthetaleintorawtextarr
- 【Python】Decision on buying cars COROLLA or LEVIN(数据分析技术实现过程之·2 data_analysis①)
SophiaSSSSS
商业分析项目集锦Python决策分析汽车选购
#前面已经对数据进行了初步清洗。Python暂时搞不定的,用excel先搞定了应应急。#下面正式开始数据分析#导入常用模块importpandasaspdimportnumpyasnpimportmatplotlib.pyplotaspltimportseabornassns#读取卡罗拉口碑数据文件corolla1=pd.read_csv("D:\\2018_BigData\\Python\\Py
- data_analysis(二)时间戳、日期等各种日期型python相互转换
JR_lu
数据分析
1.将字符串的时间转换为时间戳方法:a="2013-10-1023:40:00"将其转换为时间数组importtimetimeArray=time.strptime(a,"%Y-%m-%d%H:%M:%S")转换为时间戳:timeStamp=int(time.mktime(timeArray))timeStamp==13814196002.字符串格式更改如a="2013-10-1023:40:00
- java的(PO,VO,TO,BO,DAO,POJO)
Cb123456
VOTOBOPOJODAO
转:
http://www.cnblogs.com/yxnchinahlj/archive/2012/02/24/2366110.html
-------------------------------------------------------------------
O/R Mapping 是 Object Relational Mapping(对象关系映
- spring ioc原理(看完后大家可以自己写一个spring)
aijuans
spring
最近,买了本Spring入门书:spring In Action 。大致浏览了下感觉还不错。就是入门了点。Manning的书还是不错的,我虽然不像哪些只看Manning书的人那样专注于Manning,但怀着崇敬 的心情和激情通览了一遍。又一次接受了IOC 、DI、AOP等Spring核心概念。 先就IOC和DI谈一点我的看法。IO
- MyEclipse 2014中Customize Persperctive设置无效的解决方法
Kai_Ge
MyEclipse2014
高高兴兴下载个MyEclipse2014,发现工具条上多了个手机开发的按钮,心生不爽就想弄掉他!
结果发现Customize Persperctive失效!!
有说更新下就好了,可是国内Myeclipse访问不了,何谈更新...
so~这里提供了更新后的一下jar包,给大家使用!
1、将9个jar复制到myeclipse安装目录\plugins中
2、删除和这9个jar同包名但是版本号较
- SpringMvc上传
120153216
springMVC
@RequestMapping(value = WebUrlConstant.UPLOADFILE)
@ResponseBody
public Map<String, Object> uploadFile(HttpServletRequest request,HttpServletResponse httpresponse) {
try {
//
- Javascript----HTML DOM 事件
何必如此
JavaScripthtmlWeb
HTML DOM 事件允许Javascript在HTML文档元素中注册不同事件处理程序。
事件通常与函数结合使用,函数不会在事件发生前被执行!
注:DOM: 指明使用的 DOM 属性级别。
1.鼠标事件
属性  
- 动态绑定和删除onclick事件
357029540
JavaScriptjquery
因为对JQUERY和JS的动态绑定事件的不熟悉,今天花了好久的时间才把动态绑定和删除onclick事件搞定!现在分享下我的过程。
在我的查询页面,我将我的onclick事件绑定到了tr标签上同时传入当前行(this值)参数,这样可以在点击行上的任意地方时可以选中checkbox,但是在我的某一列上也有一个onclick事件是用于下载附件的,当
- HttpClient|HttpClient请求详解
7454103
apache应用服务器网络协议网络应用Security
HttpClient 是 Apache Jakarta Common 下的子项目,可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包,并且它支持 HTTP 协议最新的版本和建议。本文首先介绍 HTTPClient,然后根据作者实际工作经验给出了一些常见问题的解决方法。HTTP 协议可能是现在 Internet 上使用得最多、最重要的协议了,越来越多的 Java 应用程序需
- 递归 逐层统计树形结构数据
darkranger
数据结构
将集合递归获取树形结构:
/**
*
* 递归获取数据
* @param alist:所有分类
* @param subjname:对应统计的项目名称
* @param pk:对应项目主键
* @param reportList: 最后统计的结果集
* @param count:项目级别
*/
public void getReportVO(Arr
- 访问WEB-INF下使用frameset标签页面出错的原因
aijuans
struts2
<frameset rows="61,*,24" cols="*" framespacing="0" frameborder="no" border="0">
- MAVEN常用命令
avords
Maven库:
http://repo2.maven.org/maven2/
Maven依赖查询:
http://mvnrepository.com/
Maven常用命令: 1. 创建Maven的普通java项目: mvn archetype:create -DgroupId=packageName 
- PHP如果自带一个小型的web服务器就好了
houxinyou
apache应用服务器WebPHP脚本
最近单位用PHP做网站,感觉PHP挺好的,不过有一些地方不太习惯,比如,环境搭建。PHP本身就是一个网站后台脚本,但用PHP做程序时还要下载apache,配置起来也不太很方便,虽然有好多配置好的apache+php+mysq的环境,但用起来总是心里不太舒服,因为我要的只是一个开发环境,如果是真实的运行环境,下个apahe也无所谓,但只是一个开发环境,总有一种杀鸡用牛刀的感觉。如果php自己的程序中
- NoSQL数据库之Redis数据库管理(list类型)
bijian1013
redis数据库NoSQL
3.list类型及操作
List是一个链表结构,主要功能是push、pop、获取一个范围的所有值等等,操作key理解为链表的名字。Redis的list类型其实就是一个每个子元素都是string类型的双向链表。我们可以通过push、pop操作从链表的头部或者尾部添加删除元素,这样list既可以作为栈,又可以作为队列。
&nbs
- 谁在用Hadoop?
bingyingao
hadoop数据挖掘公司应用场景
Hadoop技术的应用已经十分广泛了,而我是最近才开始对它有所了解,它在大数据领域的出色表现也让我产生了兴趣。浏览了他的官网,其中有一个页面专门介绍目前世界上有哪些公司在用Hadoop,这些公司涵盖各行各业,不乏一些大公司如alibaba,ebay,amazon,google,facebook,adobe等,主要用于日志分析、数据挖掘、机器学习、构建索引、业务报表等场景,这更加激发了学习它的热情。
- 【Spark七十六】Spark计算结果存到MySQL
bit1129
mysql
package spark.examples.db
import java.sql.{PreparedStatement, Connection, DriverManager}
import com.mysql.jdbc.Driver
import org.apache.spark.{SparkContext, SparkConf}
object SparkMySQLInteg
- Scala: JVM上的函数编程
bookjovi
scalaerlanghaskell
说Scala是JVM上的函数编程一点也不为过,Scala把面向对象和函数型编程这两种主流编程范式结合了起来,对于熟悉各种编程范式的人而言Scala并没有带来太多革新的编程思想,scala主要的有点在于Java庞大的package优势,这样也就弥补了JVM平台上函数型编程的缺失,MS家.net上已经有了F#,JVM怎么能不跟上呢?
对本人而言
- jar打成exe
bro_feng
java jar exe
今天要把jar包打成exe,jsmooth和exe4j都用了。
遇见几个问题。记录一下。
两个软件都很好使,网上都有图片教程,都挺不错。
首先肯定是要用自己的jre的,不然不能通用,其次别忘了把需要的lib放到classPath中。
困扰我很久的一个问题是,我自己打包成功后,在一个同事的没有装jdk的电脑上运行,就是不行,报错jvm.dll为无效的windows映像,如截图
最后发现
- 读《研磨设计模式》-代码笔记-策略模式-Strategy
bylijinnan
java设计模式
声明: 本文只为方便我个人查阅和理解,详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
/*
策略模式定义了一系列的算法,并将每一个算法封装起来,而且使它们还可以相互替换。策略模式让算法独立于使用它的客户而独立变化
简单理解:
1、将不同的策略提炼出一个共同接口。这是容易的,因为不同的策略,只是算法不同,需要传递的参数
- cmd命令值cvfM命令
chenyu19891124
cmd
cmd命令还真是强大啊。今天发现jar -cvfM aa.rar @aaalist 就这行命令可以根据aaalist取出相应的文件
例如:
在d:\workspace\prpall\test.java 有这样一个文件,现在想要将这个文件打成一个包。运行如下命令即可比如在d:\wor
- OpenJWeb(1.8) Java Web应用快速开发平台
comsci
java框架Web项目管理企业应用
OpenJWeb(1.8) Java Web应用快速开发平台的作者是我们技术联盟的成员,他最近推出了新版本的快速应用开发平台 OpenJWeb(1.8),我帮他做做宣传
OpenJWeb快速开发平台以快速开发为核心,整合先进的java 开源框架,本着自主开发+应用集成相结合的原则,旨在为政府、企事业单位、软件公司等平台用户提供一个架构透
- Python 报错:IndentationError: unexpected indent
daizj
pythontab空格缩进
IndentationError: unexpected indent 是缩进的问题,也有可能是tab和空格混用啦
Python开发者有意让违反了缩进规则的程序不能通过编译,以此来强制程序员养成良好的编程习惯。并且在Python语言里,缩进而非花括号或者某种关键字,被用于表示语句块的开始和退出。增加缩进表示语句块的开
- HttpClient 超时设置
dongwei_6688
httpclient
HttpClient中的超时设置包含两个部分:
1. 建立连接超时,是指在httpclient客户端和服务器端建立连接过程中允许的最大等待时间
2. 读取数据超时,是指在建立连接后,等待读取服务器端的响应数据时允许的最大等待时间
在HttpClient 4.x中如下设置:
HttpClient httpclient = new DefaultHttpC
- 小鱼与波浪
dcj3sjt126com
一条小鱼游出水面看蓝天,偶然间遇到了波浪。 小鱼便与波浪在海面上游戏,随着波浪上下起伏、汹涌前进。 小鱼在波浪里兴奋得大叫:“你每天都过着这么刺激的生活吗?简直太棒了。” 波浪说:“岂只每天过这样的生活,几乎每一刻都这么刺激!还有更刺激的,要有潮汐变化,或者狂风暴雨,那才是兴奋得心脏都会跳出来。” 小鱼说:“真希望我也能变成一个波浪,每天随着风雨、潮汐流动,不知道有多么好!” 很快,小鱼
- Error Code: 1175 You are using safe update mode and you tried to update a table
dcj3sjt126com
mysql
快速高效用:SET SQL_SAFE_UPDATES = 0;下面的就不要看了!
今日用MySQL Workbench进行数据库的管理更新时,执行一个更新的语句碰到以下错误提示:
Error Code: 1175
You are using safe update mode and you tried to update a table without a WHERE that
- 枚举类型详细介绍及方法定义
gaomysion
enumjavaee
转发
http://developer.51cto.com/art/201107/275031.htm
枚举其实就是一种类型,跟int, char 这种差不多,就是定义变量时限制输入的,你只能够赋enum里面规定的值。建议大家可以看看,这两篇文章,《java枚举类型入门》和《C++的中的结构体和枚举》,供大家参考。
枚举类型是JDK5.0的新特征。Sun引进了一个全新的关键字enum
- Merge Sorted Array
hcx2013
array
Given two sorted integer arrays nums1 and nums2, merge nums2 into nums1 as one sorted array.
Note:You may assume that nums1 has enough space (size that is
- Expression Language 3.0新特性
jinnianshilongnian
el 3.0
Expression Language 3.0表达式语言规范最终版从2013-4-29发布到现在已经非常久的时间了;目前如Tomcat 8、Jetty 9、GlasshFish 4已经支持EL 3.0。新特性包括:如字符串拼接操作符、赋值、分号操作符、对象方法调用、Lambda表达式、静态字段/方法调用、构造器调用、Java8集合操作。目前Glassfish 4/Jetty实现最好,对大多数新特性
- 超越算法来看待个性化推荐
liyonghui160com
超越算法来看待个性化推荐
一提到个性化推荐,大家一般会想到协同过滤、文本相似等推荐算法,或是更高阶的模型推荐算法,百度的张栋说过,推荐40%取决于UI、30%取决于数据、20%取决于背景知识,虽然本人不是很认同这种比例,但推荐系统中,推荐算法起的作用起的作用是非常有限的。
就像任何
- 写给Javascript初学者的小小建议
pda158
JavaScript
一般初学JavaScript的时候最头痛的就是浏览器兼容问题。在Firefox下面好好的代码放到IE就不能显示了,又或者是在IE能正常显示的代码在firefox又报错了。 如果你正初学JavaScript并有着一样的处境的话建议你:初学JavaScript的时候无视DOM和BOM的兼容性,将更多的时间花在 了解语言本身(ECMAScript)。只在特定浏览器编写代码(Chrome/Fi
- Java 枚举
ShihLei
javaenum枚举
注:文章内容大量借鉴使用网上的资料,可惜没有记录参考地址,只能再传对作者说声抱歉并表示感谢!
一 基础 1)语法
枚举类型只能有私有构造器(这样做可以保证客户代码没有办法新建一个enum的实例)
枚举实例必须最先定义
2)特性
&nb
- Java SE 6 HotSpot虚拟机的垃圾回收机制
uuhorse
javaHotSpotGC垃圾回收VM
官方资料,关于Java SE 6 HotSpot虚拟机的garbage Collection,非常全,英文。
http://www.oracle.com/technetwork/java/javase/gc-tuning-6-140523.html
Java SE 6 HotSpot[tm] Virtual Machine Garbage Collection Tuning
&