Python科学计算结果的存储与读取
Python科学计算结果的存储与读取
Python科学计算结果的存储与读取
总结于2019年3月17日 荆楚理工学院计算机工程学院
一、前言
显然,作为一名工科僧,执行科学计算,着用Python,快忘记Matlab吧。我用了二十年的时间,熟练掌握了Matlab的用法,然后,很可能,我用6个月不到...
文章
优惠券活动
2019-03-17
1209浏览量
手把手教你用 TensorFlow 实现文本分类(下)
本篇文章主要记录对之前用神经网络做文本识别的初步优化,进一步将准确率由原来的65%提高到80%,这里优化的几个方面包括:
● 随机打乱训练数据
● 增加隐层,和验证集
● 正则化
● 对原数据进行PCA预处理
● 调节训练参数(迭代次数,batch大小等)
随机化训练数据
观察训练数据集...
文章
玄学酱
2017-08-02
1518浏览量
环境搭建 | Python 数据可视化库 Matplotlib 快速入门之一
数据挖掘基础环境安装与使用
【学习目标】
完成数据挖掘基础阶段的所有环境安装
应用jupyter notebook完成代码编写运行
库的安装
学习目标
目标
搭建好数据挖掘基础阶段的环境
应用
无
整个数据挖掘基础阶段会用到Matplotlib、Numpy、Pandas、Ta-Li...
文章
温柔的养猫人
2020-04-09
217浏览量
阿里云爆款特惠专场,精选爆款产品低至0.95折!
爆款ECS云服务器8.1元/月起,云数据库低至1.5折,限时抢购!
广告
python/pandas/numpy(十二)数据加载、存储与文件格式
基本命令
pd.read_csv('1.txt')
只想读几行文本文件
pd.read_csv('1.txt', nrow=5)
要逐块读取文件,需要设置chunksize(行数)
chunker=pd.read_csv('1.txt',chunksize=1000)
写出...
文章
墨持alvin
2016-12-29
966浏览量
利用机器学习技术进行图像识别
图像识别技术可以用来解决人脸识别或字符识别等多种问题。
在本文中,我将对算法进行实际编码来演示识别手写字,特别是手写的数字。我将会使用Python以及Python的许多模块,比如numpy、PIL等。
1 #从PIL库中导入Image
2 from PIL import Image
3 #导入...
文章
小旋风柴进
2017-05-02
1550浏览量
《python 与数据挖掘 》一 2.5 文件的读写
本节书摘来自华章出版社《python 与数据挖掘 》一书中的第2章,第2.5节,作者张良均 杨海宏 何子健 杨 征,更多章节内容可以访问云栖社区“华章计算机”公众号查看。
2.5 文件的读写
文件访问是一门语言重要的一环,适当地进行文本读写能够保存一次程序运行下来的结果。在数据挖掘的工作中,数据量...
文章
华章计算机
2017-05-02
1807浏览量
深度学习基础之LSTM
介绍:
序列预测问题曾经被认为是数据科学行业最难解决的问题之一。涉及序列问题的包括:预测销售、发现股票市场走势、了解电影情节、了解你的演讲方式、语言翻译、在iPhone键盘上预测下一个单词等等。
随着近年来数据科学的发展,人们发现所有的这些序列预测问题都可以被长短期记忆网络(LSTM)解决。
LS...
文章
【方向】
2017-12-18
4576浏览量
手把手教你使用Python抓取QQ音乐数据(第三弹)
【一、项目目标】
通过手把手教你使用Python抓取QQ音乐数据(第一弹)我们实现了获取 QQ 音乐指定歌手单曲排行指定页数的歌曲的歌名、专辑名、播放链接。
通过手把手教你使用Python抓取QQ音乐数据(第二弹)我们实现了获取 QQ 音乐指定歌曲的歌词和指定歌曲首页热评。
此次我们在项目(二)的...
文章
python进阶者
2020-04-25
522浏览量
手把手教你使用Python抓取QQ音乐数据(第三弹)
【一、项目目标】
通过手把手教你使用Python抓取QQ音乐数据(第一弹)我们实现了获取 QQ 音乐指定歌手单曲排行指定页数的歌曲的歌名、专辑名、播放链接。
通过手把手教你使用Python抓取QQ音乐数据(第二弹)我们实现了获取 QQ 音乐指定歌曲的歌词和指定歌曲首页热评。
此次我们在项目(二)的...
文章
python进阶者
2020-06-06
520浏览量
带你读《Python数据分析与数据化运营(第2版)》之二:数据化运营的数据来源
点击查看第一章点击查看第三章
第2章 数据化运营的数据来源
“巧妇难为无米之炊”,对于数据工作者来说数据便是所有工作的基础。企业的数据化运营的数据来源复杂,从数据结构类型看,包括结构化和非结构化数据;从数据来源看,既有导出的数据文件、数据库等常见来源,又有流式数据、API等复杂系统接口和外部资源;...
文章
温柔的养猫人
2019-11-08
1294浏览量
《机器学习实战》学习笔记:K-近邻算法入门及实战|万字长文
本文来自AI新媒体量子位(QbitAI)
在模式识别领域中,K-近邻算法(KNN算法)是一种用于分类和回归的非参数统计方法。
在这篇文章中,作者先详细介绍了K-近邻算法的基础知识,接着在Python 3中演示了约会网站配对实战和sklearn手写数字识别。形象生动,简明易懂。
在文章正式开始前...
文章
行者武松
2018-01-10
1706浏览量
只需10分钟!就能用Flask,Docker和Jenkins部署机器学习模型
在生产环境中部署机器学习模型是数据工程中经常被忽视的领域。网上的大多数教程/博客都侧重于构建、训练和调整机器学习模型。如果它不能用于实际的预测,那么它又有什么用呢? 接下来了解一下有哪些部署选项吧:评估选项在生产中部署机器学习模型时,有多种选择。其中一种流行的方法是使用Azure Machine ...
文章
【方向】
2019-03-23
2263浏览量
3D实时换脸又有新进展!中科院博士生提出改进版本,每张图推理只需0.27毫秒
2018年4月,针对如何解决所有姿势范围内的面部替换,中科院自动化所的研究人员发表了一篇论文,提出了3D实时解决方法。
近日,Github一位作者cleardusk(主页:https://github.com/cleardusk,目前是中科院自动化所的在读博士生)将“3D实时换脸”PyTorch实...
文章
技术小能手
2018-11-26
1719浏览量
带你读《Python数据分析与数据化运营(第2版)》之一:Python和数据化运营
点击查看第二章点击查看第三章Python数据分析与数据化运营(第2版)
宋天龙 著
第1章 Python和数据化运营
数据化运营是提高利润、降低成本、优化运营效率、最大化企业财务回报的必要课题。Python作为数据科学界的关键工具之一,几乎可以应用于所有数据化运营分析和实践的场景。本章将首先介绍...
文章
温柔的养猫人
2019-11-08
1105浏览量
18段代码带你玩转18个机器学习必备交互工具
导读:本文简要介绍将机器学习创意快速、简单和漂亮地转换为Web应用程序的工具。这并不是一个完整列表,如果你想了解更多,可以尝试使用的不同技术。
作者:曼纽尔·阿米纳特吉(Manuel Amunategui)、迈赫迪·洛佩伊(Mehdi Roopaei)
如需转载请联系大数据(ID:hzdashuj...
文章
初商
2019-09-21
1977浏览量
深度学习目标检测系列:faster RCNN实现|附python源码
目标检测一直是计算机视觉中比较热门的研究领域,有一些常用且成熟的算法得到业内公认水平,比如RCNN系列算法、SSD以及YOLO等。如果你是从事这一行业的话,你会使用哪种算法进行目标检测任务呢?在我寻求在最短的时间内构建最精确的模型时,我尝试了其中的R-CNN系列算法,如果读者们对这方...
文章
【方向】
2018-12-14
7800浏览量
[python] LDA处理文档主题分布及分词、词频、tfidf计算
这篇文章主要是讲述如何通过LDA处理文本内容TXT,并计算其文档主题分布,主要是核心代码为主。其中LDA入门知识介绍参考这篇文章,包括安装及用法: [python] LDA处理文档主题分布代码入门笔记
1.输入输出
输入是test.tx...
文章
小珞珞
2016-03-15
6513浏览量
带你读《TensorFlow自然语言处理》之二:理解TensorFlow
点击查看第一章点击查看第三章
第2章
理解TensorFlow在本章中,你将深入了解TensorFlow。这是一个开源分布式数值计算框架,它将成为我们实现所有练习的主要平台。我们通过定义一个简单的计算并用TensorFlow实现它来作为TensorFlow的入门。在成功完成此操作后,我们将探讨Te...
文章
温柔的养猫人
2019-11-11
470浏览量
带你读《Python数据分析与数据化运营(第2版)》之三:10条数据化运营不得不知道的数据预处理经验
点击查看第一章点击查看第二章
第3章
10条数据化运营不得不知道的数据预处理经验数据预处理是数据化运营过程中的重要环节,它直接决定了后期所有数据工作的质量和价值输出。从数据预处理的主要内容看,包括数据清洗、转换、归约、聚合、抽样等。本章将摒弃理论和方法说教,直接介绍预处理本身可能遇到的问题及应对方...
文章
温柔的养猫人
2019-11-08
1143浏览量
手把手教你用 TensorFlow 实现文本分类(上)
由于需要学习语音识别,期间接触了深度学习的算法。利用空闲时间,想用神经网络做一个文本分类的应用, 目的是从头到尾完成一次机器学习的应用,学习模型的优化方法,同时学会使用主流的深度学习框架(这里选择tensorflow)。
文章分为两部分,本文仅实现流程,用简单的softmax回归对文本进行分类,后...
文章
玄学酱
2017-08-02
2193浏览量
深度学习小技巧(二):如何保存和恢复scikit-learn训练的模型
更多深度文章,请关注云计算频道:https://yq.aliyun.com/cloud
深度学习小技巧(一):如何保存和恢复TensorFlow训练的模型
在许多情况下,在使用scikit学习库的同时,你需要将预测模型保存到文件中,然后在使用它们的时候还原它们,以便重复使用以前的工作。比如在新数...
文章
【方向】
2017-10-30
3420浏览量
数学烂也要学AI | 带你造一个经济试用版AI终极必杀器
今天我们将建立我们自己的深度学习终极大杀器。
我们会搜集最好的精华,并且把他们组合成数字终结者。
我们也会讨论如何把最新的深度学习软件架构一步步安装到Ubuntu Linux 16.04中。
在这台机器上运行神经网络就像热激光束穿过黄油一样快捷流畅。你不用花超过129,000美元来购买...
文章
小旋风柴进
2017-05-17
3292浏览量
PaddlePaddle垃圾邮件处理实战(一)
背景介绍
在我们日常生活中,经常会受到各种垃圾邮件,譬如来自商家的广告、打折促销信息、澳门博彩邮件、理财推广信息等,一般来说邮件客户端都会设置一定的关键词屏蔽这种垃圾邮件,或者对邮件进行归类,但是总会有一些漏网之鱼。 不过,自己手动做一个垃圾邮件分类器也并不是什么难事。传统的机器学习算法通常会采...
文章
技术小能手
2018-07-23
2003浏览量
LSTM之父最新力作:手把手教你训练一个有世界观的AI赛车手 | 论文+代码
LSTM之父Jürgen Schmidhuber再发新作!
这一次,他借鉴了人类认知世界的模式,为机器建造了一个世界观模型。
诸多证据表明,人脑为了处理日常生活中的海量信息,学会了对这些时空信息作出抽象化的处理。借此,我们能够在面对周遭复杂的信息时,进行迅速而准确的分析。而我们在当前所“看”到的...
文章
技术小能手
2018-05-28
1030浏览量
[python] Kmeans文本聚类算法+PAC降维+Matplotlib显示聚类图像
0 前言
本文主要讲述以下几点: 1.通过scikit-learn计算文本内容的tfidf并构造N*M矩阵(N个文档
M个特征词); 2.调用scikit-learn中的K-means进行文本聚类; 3.使用PAC进行降维处理,每行文本表示成两维数据; ...
文章
小珞珞
2016-01-20
8086浏览量
用Keras开发字符级神经网络语言模型
语言模型可根据序列中出现的特定单词来预测下一个单词。可以使用神经网络在字符级别上开发语言模型。基于字符的语言模型有一个最大的优点,就是在处理单词、标点符号和其他文档结构的时候,能保持较小的词汇量和较强的灵活性。但所付出的代价是模型较大、训练较慢。然而,在神经网络语言模型领域,基于字符的模型为语言建...
文章
【方向】
2017-11-13
2223浏览量
Spark整合Ray思路漫谈
作者:祝威廉,资深数据架构,11年研发经验。同时维护和开发多个开源项目。擅长大数据/AI领域的一些思路和工具。现专注于构建集大数据和机器学习于一体的综合性平台,降低AI落地成本相关工作上。
什么是Ray
之前花了大概两到三天把Ray相关的论文,官网文档看了一遍,同时特意去找了一些中文资料看Ray...
文章
开源大数据EMR
2019-12-19
405浏览量
用Python浅析股票数据
本文将使用Python来可视化股票数据,比如绘制K线图,并且探究各项指标的含义和关系,最后使用移动平均线方法初探投资策略。
数据导入
这里将股票数据存储在stockData.txt文本文件中,我们使用pandas.read_table()函数将文件数据读入成DataFrame格式。
其中参数use...
文章
技术小能手
2018-11-19
1470浏览量
带你读《Python网络爬虫从入门到实践(第2版)》之二:编写第一个网络爬虫
点击查看第一章点击查看第三章
第2章
编写第一个网络爬虫 笔者是一个喜欢学习的人,自学了各方面的知识,总结发现:学习的动力来自于兴趣,兴趣则来自于动手做出成果的快乐。因此,笔者特意将动手的乐趣提前。在第2章,读者就可以体会到通过完成一个简单的Python网络爬虫而带来的乐趣。希望这份喜悦能让你继续...
文章
温柔的养猫人
2019-11-06
630浏览量
Facebook开源PyTorch版本fairseq翻译模型,训练速度提高50%
今年5月10日,Facebook AI 研究实验室(FAIR)发布了一项使用创新性的、基于卷积神经网络的方法来进行语言翻译的最新成果。Facebook 称,该研究取得了截止目前最高准确度,并且速度是基于循环神经网络(RNN)系统的9倍(谷歌的机器翻译系统使用的就是这一技术)。
今天开源的是一个Py...
文章
技术小能手
2017-09-20
2681浏览量