- 爬取淘宝商品链接的图片和视频-第一部分
yunAike
前端javascript开发语言python
输入需要爬取商品品类的网址和需要爬取的页数,程序将爬取所有商品的链接输入需要爬取商品品类的网址和需要爬取的页数,程序将爬取所有商品的链接importtimefromDrissionPageimportChromiumPageimportcsvfromlxmlimportetreeimportjsonimportos#确保存放数据的data文件夹存在,若不存在就创建folder_path=r".\d
- Python 分词解析+词云可视化(含停用词文件)
布凯彻-劳斯基
数学建模python学习pycharm中文分词词云自然语言处理算法
代码:importre#导入正则表达式库importjieba#导入结巴分词库importcollections#导入集合库importnumpy#导入numpy库importwordcloud#导入词云库fromPILimportImage#导入PIL图像处理库importmatplotlib.pyplotasplt#导入matplotlib绘图库fromwordcloudimportImage
- flask 是如何分发请求的?
CrazyDragon_King
pythonflaskpython后端
这篇博客会涉及一些WSGI的知识,不了解的可以看这篇博客,简单了解一下。Python的WSGI简单入门一、请求在flask中的处理过程我们先来看一下werkzeug.routing包下Map和Rule方法的使用,这里给出一个官方的示例(我进行了一点修改并增加了简单的运行代码):fromwerkzeug.routingimportMap,Rule,Subdomain,NotFound,Request
- 每日Attention学习24——Strip Convolution Block
xiongxyowo
划水
模块出处[TIP21][link]CoANet:ConnectivityAttentionNetworkforRoadExtractionFromSatelliteImagery模块名称StripConvolutionBlock(SCB)模块作用多方向条形特征提取模块结构模块特点类PSP设计,采用四个并行分支提取不同维度的信息相比于经典的横向/纵向条形卷积,引入了两种斜方向的卷积来更好的学习斜向线
- cocos creator从零开发简单框架(16)-Panel位移显示
cocos
Panel的位移显示包括从上、下、左、右到中间的移动,因为只有初始点位置不一样,这里抽成一个方法。编辑framework/scripts/view/PanelMgr.ts,增加showSideToCenter方法。/**从四边移动到中间*/privatestaticshowSideToCenter(go:PanelBase,from:cc.Vec3,isOpen:boolean){this.sho
- cannot import name 'url_parse' from 'werkzeug.urls'
调包侠的python项目如果出现这个报错时,说明项目用的werkzeug版本和项目代码不兼容。在不知道werkzeug哪个开始就不提供url_parse了。解决方法很简单,调包侠们只要换个包就行了:#fromwerkzeug.urlsimporturl_parsefromurllib.parseimporturlparseasurl_parse
- JAVA面试常见题_基础部分_Mysql调优
茂茂在长安
mysqlJAVAjava面试mysql
性能监控使用showprofile查询剖析工具,可以指定具体的type此工具默认是禁用的,可以通过服务器变量在绘画级别动态的修改setprofiling=1;当设置完成之后,在服务器上执行的所有语句,都会测量其耗费的时间和其他一些查询执行状态变更相关的数据。select*fromemp;在mysql的命令行模式下只能显示两位小数的时间,可以使用如下命令查看具体的执行时间showprofiles;执
- 体验通义千问AI大模型生成Python泊松分布
「已注销」
人工智能python开发语言
在Python中,你可以使用matplotlib和numpy库来绘制泊松分布的概率密度函数(PDF)或累积分布函数(CDF)。以下是一个示例代码片段,它展示了如何使用numpy的poisson函数以及matplotlib进行绘制:importnumpyasnpimportmatplotlib.pyplotaspltfromscipy.statsimportpoisson#使用scipy中的泊松分布
- PyQT开发的简易有道词典
wangyiyan212
pythonpythonGUI有道翻译json
最近学习PyQt,写了一个比较简单的字典,使用了有道翻译OpenAPI,下面是代码:#-*-coding:utf-8-*-__author__='Cullen'importurllibimportjsonimporturllib2fromPyQt4importQtGui,QtCoreimportsysAPI_KEY='1349304933'KEYFROM='cullen'classMyDict(Q
- api调度运行影刀_启动应用
gf1321111_小曼
数据库
importrequestsfromtimeimportsleepaccessKeyId="xxx"accessKeySecret="xxx"accountName='xxx'robotUuid="xxx"#1.获取tokendefget_access_token():url="https://api.yingdao.com/oapi/token/v2/token/create"headers={
- 探索 LangChain: 架构、组件和应用
田猿笔记
LangChainlangchain人工智能
介绍每个组件及其用途:1.ModelModel组件是LangChain的核心,它抽象并提供了大语言模型(LLM)的接口。LLM模型用途:提供与多种LLM供应商的接口,如OpenAI、GooglePaLM2、Ollama等。OpenAI示例:fromlangchain.llmsimportOpenAIopenai_llm=OpenAI(model_name="gpt-3.5-turbo")respo
- react 中,使用antd layout布局中的sider 做sider的展开和收起功能
菜鸟一只请包涵
antdesignantd
一话不多说,先展示效果:展开时:收起时:二、实现代码如下react文件importReact,{useState}from'react';import{Layout}from'antd';importstylesfrom"./index.module.less";//这个是样式文件,实际上里面只有一个button的样式importfoldUrlfrom"../../../public/btn_fo
- oracle查询DBname 和 hostname(instance)
cyong888
数据库oracledatabase
selecthost_namefromv$instance;selectnamefromv$database一个instance上有多个database。
- 【YashanDB 知识库】通过 dblink 查询 Oracle 数据时报 YAS-07301 异常
数据库运维
问题现象某客户在通过yasql查询Oracle数据时,报如下异常:SQL>select1fromdual@link_oracle;YAS-07301externalmoduletimeout,reason:yex_serverheatbeattimeout问题的风险及影响dblink功能无法正常使用问题影响的版本所有的YashanDB版本问题发生原因查看YashanDB的run.log,有如下异常
- 【pytorch_geometric报错】RuntimeError: softmax() Expected a value of type
一穷二白到年薪百万
报错专栏
如果pytorch_geometric中的softmax函数报错,声明一下num_nodes变量即可。fromtransP=softmax(pipj,row,cd.size(0))totransP=softmax(pipj,row,num_nodes=cd.size(0))[1]RuntimeError:softmax()Expectedavalueoftype‘Optional[Tensor
- 如何在docker上部署java服务
R-sz
dockerjavapython
目录结构首先DockerfileFROMbladex/alpine-java:
[email protected]=Asia/ShanghaiRUNln-sf/usr/share/zoneinfo/$TZ/etc/localtime&&echo$TZ>/etc/timezoneRUNmkdir-p/xhWORKDIR/xhEXPOSE8106A
- .net使用webSocket
BeYourself412
asp.netwebsocket
在Program.cs中添加varwebSocketOptions=newWebSocketOptions{KeepAliveInterval=TimeSpan.FromMinutes(2)};app.UseWebSockets(webSocketOptions);创建一个api接口[Route("api/[controller]")][ApiController]publicclassLogCo
- qt mysql 执行sql_Qt数据库- 执行SQL语句
weixin_39724266
qtmysql执行sql
QtVersion5.14.0QSqlQuery类提供执行SQL语句的接口,并且能够访问执行结果数据集。执行一次查询想要执行SQL语句,只需要创建一个QSqlQuery对象,然后调用它的exec函数,如下代码。(这里构造QSqlQuery对象时没有指定数据库链接名称)QSqlQueryquery;boolflag=query.exec("SELECTname,salaryFROMemployeeW
- [特殊字符]️ Selenium元素存在性判断的5种方法
test猿
seleniumpython测试工具
️Selenium元素存在性判断的5种方法方法对比表方法类型执行效率异常处理适用场景推荐指数显式等待法⭐⭐⭐⭐自动处理动态加载元素⭐⭐⭐⭐⭐批量查找法⭐⭐⭐⭐无需捕获简单静态页面⭐⭐⭐⭐异常捕获法⭐⭐手动处理兼容旧代码⭐⭐JavaScript注入法⭐⭐⭐⭐无需捕获需绕过DOM检查⭐⭐⭐复合条件法⭐⭐⭐⭐自动处理复杂异步场景⭐⭐⭐⭐核心解决方案1️⃣显式等待法(推荐首选)fromsele
- Python 发送短信
黑足-山治
短信发送python
Python发送短信短信发送平台在发送短信前需要添加两个配置文件,将下面两个文件复制下来即可xmltojson.py```#-*-coding:utf-8-*-#pythonxml.etree.ElementTreeimportxml.etree.ElementTreeasET#fromxml.domimportminidomclassxmltojson:#globalvar#showlogSHO
- ORB_SLAM2编译build_ros.sh时报错([rosbuild] Error from directory check: /opt/ros/kinetic/share)
Spider_man_
linux
参考:https://www.pianshen.com/article/8679352229/编译build_ros.sh时报错在ros上编译build_ros.sh时报错,出现如下信息:BuildingROSnodesmkdir:cannotcreatedirectory‘build’:Fileexists[rosbuild]BuildingpackageORB_SLAM2[rosbuild]E
- Python使用阿里云发送短信的两种方式
菲宇
python项目实战python
参考文档https://help.aliyun.com/document_detail/215764.html安装依赖包pipinstallalibabacloud_tea_openapipipinstallalibabacloud_dysmsapi20170525==2.0.9第一种方式fromaliyunsdkcore.clientimportAcsClientfromaliyunsdkcor
- 29、深度学习-自学之路-深入理解-NLP自然语言处理-做一个完形填空,让机器学习更多的内容程序展示
小宇爱
深度学习-自学之路深度学习自然语言处理机器学习
importsys,random,mathfromcollectionsimportCounterimportnumpyasnpnp.random.seed(1)random.seed(1)f=open('reviews.txt')raw_reviews=f.readlines()f.close()tokens=list(map(lambdax:(x.split("")),raw_reviews)
- 【shell笔记】Linux Shell脚本编程入门知识点全面涵盖
阿毛啊阿阿
shell
本文是我对白树明老师shell课程笔记的总结,课程链接:https://www.bilibili.com/video/BV1j541157Sr?from=search&seid=9757674743771615780一:shell是什么?生成shell脚本shell是什么?1shell是一个程序,采用C语言编写,是用户和Linux内核沟通的桥梁。2shell脚本就是将完成一个任务的所有命令按照执行
- cosyvoice自用的代码
PyAIGCMaster
我买了个服务器人工智能
importsyssys.path.append('third_party/Matcha-TTS')fromcosyvoice.cli.cosyvoiceimportCosyVoice,CosyVoice2fromcosyvoice.utils.file_utilsimportload_wavimporttorchaudioimportonnxruntimeasort#设置使用GPUort.set
- MySQL分组排序去重多表联查_MySQL基础(二):多表查询 -- 分组排序
love彤彤
MySQL分组排序去重多表联查
多表查询:连接查询-子查询MySQL基础操作链接;工具:SQLyogMySQL语法顺序:select[distinct]fromjoin(leftjoin/rightjoin)onwheregroupbyhavingunionorderbylimit1.表结构用户,角色,权限三张表(主表)及三者之间的关系通过两张“第三张外键表”维护。“外键表”中的两个字段分别使用外键指向主表的主键。(一个用户可以
- mysql联合查询效率_MySQL单表多次查询和多表联合查询,哪个效率高?
红茶漫山
mysql联合查询效率
很多高性能的应用都会对关联查询进行分解。简单地,可以对每个表进行一次单表查询,然后将结果在应用程序中进行关联。例如,下面这个查询:select*fromtagjointag_postontag_post.tag_id=tag.idjoinpostontag_post.post_id=post.idwheretag.tag=’mysql’;可以分解成下面这些查询来代替:Select*fromtagw
- 蓝易云 - vue修改docker nginx版本
蓝易云
vue.jsdockernginx数据库正则表达式运维
要在Vue项目中修改Docker中的Nginx版本,可以按照以下步骤进行:打开项目目录,找到与Docker相关的配置文件,通常是Dockerfile。在Dockerfile中,找到关于Nginx的配置行,通常是类似于以下的命令:FROMnginx:version将version替换为你想要的Nginx版本,例如nginx:1.19.10。保存并关闭Dockerfile。执行Docker构建命令来
- 大模型-Tool call、检索增强
Java知识技术分享
ai大模型python数据库condaai
大模型Toolcall心知天气:https://www.seniverse.com/例子:调用天气接口APIfromopenaiimportOpenAIimportrequestsimportjson"""#####天气接口API密钥获取:https://www.free-api.com/doc/558#####"""#定义调用天气API的函数defget_weather(location,lan
- 学习Flask:[特殊字符] Day 3:数据库集成
昨今
数据库学习flask
学习目标:使用SQLAlchemy操作数据库fromflask_sqlalchemyimportSQLAlchemyapp.config['SQLALCHEMY_DATABASE_URI']='sqlite:///site.db'db=SQLAlchemy(app)classUser(db.Model):id=db.Column(db.Integer,primary_key=True)userna
- redis学习笔记——不仅仅是存取数据
Everyday都不同
returnSourceexpire/delincr/lpush数据库分区redis
最近项目中用到比较多redis,感觉之前对它一直局限于get/set数据的层面。其实作为一个强大的NoSql数据库产品,如果好好利用它,会带来很多意想不到的效果。(因为我搞java,所以就从jedis的角度来补充一点东西吧。PS:不一定全,只是个人理解,不喜勿喷)
1、关于JedisPool.returnSource(Jedis jeids)
这个方法是从red
- SQL性能优化-持续更新中。。。。。。
atongyeye
oraclesql
1 通过ROWID访问表--索引
你可以采用基于ROWID的访问方式情况,提高访问表的效率, , ROWID包含了表中记录的物理位置信息..ORACLE采用索引(INDEX)实现了数据和存放数据的物理位置(ROWID)之间的联系. 通常索引提供了快速访问ROWID的方法,因此那些基于索引列的查询就可以得到性能上的提高.
2 共享SQL语句--相同的sql放入缓存
3 选择最有效率的表
- [JAVA语言]JAVA虚拟机对底层硬件的操控还不完善
comsci
JAVA虚拟机
如果我们用汇编语言编写一个直接读写CPU寄存器的代码段,然后利用这个代码段去控制被操作系统屏蔽的硬件资源,这对于JVM虚拟机显然是不合法的,对操作系统来讲,这样也是不合法的,但是如果是一个工程项目的确需要这样做,合同已经签了,我们又不能够这样做,怎么办呢? 那么一个精通汇编语言的那种X客,是否在这个时候就会发生某种至关重要的作用呢?
&n
- lvs- real
男人50
LVS
#!/bin/bash
#
# Script to start LVS DR real server.
# description: LVS DR real server
#
#. /etc/rc.d/init.d/functions
VIP=10.10.6.252
host='/bin/hostname'
case "$1" in
sta
- 生成公钥和私钥
oloz
DSA安全加密
package com.msserver.core.util;
import java.security.KeyPair;
import java.security.PrivateKey;
import java.security.PublicKey;
import java.security.SecureRandom;
public class SecurityUtil {
- UIView 中加入的cocos2d,背景透明
374016526
cocos2dglClearColor
要点是首先pixelFormat:kEAGLColorFormatRGBA8,必须有alpha层才能透明。然后view设置为透明glView.opaque = NO;[director setOpenGLView:glView];[self.viewController.view setBackgroundColor:[UIColor clearColor]];[self.viewControll
- mysql常用命令
香水浓
mysql
连接数据库
mysql -u troy -ptroy
备份表
mysqldump -u troy -ptroy mm_database mm_user_tbl > user.sql
恢复表(与恢复数据库命令相同)
mysql -u troy -ptroy mm_database < user.sql
备份数据库
mysqldump -u troy -ptroy
- 我的架构经验系列文章 - 后端架构 - 系统层面
agevs
JavaScriptjquerycsshtml5
系统层面:
高可用性
所谓高可用性也就是通过避免单独故障加上快速故障转移实现一旦某台物理服务器出现故障能实现故障快速恢复。一般来说,可以采用两种方式,如果可以做业务可以做负载均衡则通过负载均衡实现集群,然后针对每一台服务器进行监控,一旦发生故障则从集群中移除;如果业务只能有单点入口那么可以通过实现Standby机加上虚拟IP机制,实现Active机在出现故障之后虚拟IP转移到Standby的快速
- 利用ant进行远程tomcat部署
aijuans
tomcat
在javaEE项目中,需要将工程部署到远程服务器上,如果部署的频率比较高,手动部署的方式就比较麻烦,可以利用Ant工具实现快捷的部署。这篇博文详细介绍了ant配置的步骤(http://www.cnblogs.com/GloriousOnion/archive/2012/12/18/2822817.html),但是在tomcat7以上不适用,需要修改配置,具体如下:
1.配置tomcat的用户角色
- 获取复利总收入
baalwolf
获取
public static void main(String args[]){
int money=200;
int year=1;
double rate=0.1;
&
- eclipse.ini解释
BigBird2012
eclipse
大多数java开发者使用的都是eclipse,今天感兴趣去eclipse官网搜了一下eclipse.ini的配置,供大家参考,我会把关键的部分给大家用中文解释一下。还是推荐有问题不会直接搜谷歌,看官方文档,这样我们会知道问题的真面目是什么,对问题也有一个全面清晰的认识。
Overview
1、Eclipse.ini的作用
Eclipse startup is controlled by th
- AngularJS实现分页功能
bijian1013
JavaScriptAngularJS分页
对于大多数web应用来说显示项目列表是一种很常见的任务。通常情况下,我们的数据会比较多,无法很好地显示在单个页面中。在这种情况下,我们需要把数据以页的方式来展示,同时带有转到上一页和下一页的功能。既然在整个应用中这是一种很常见的需求,那么把这一功能抽象成一个通用的、可复用的分页(Paginator)服务是很有意义的。
&nbs
- [Maven学习笔记三]Maven archetype
bit1129
ArcheType
archetype的英文意思是原型,Maven archetype表示创建Maven模块的模版,比如创建web项目,创建Spring项目等等.
mvn archetype提供了一种命令行交互式创建Maven项目或者模块的方式,
mvn archetype
1.在LearnMaven-ch03目录下,执行命令mvn archetype:gener
- 【Java命令三】jps
bit1129
Java命令
jps很简单,用于显示当前运行的Java进程,也可以连接到远程服务器去查看
[hadoop@hadoop bin]$ jps -help
usage: jps [-help]
jps [-q] [-mlvV] [<hostid>]
Definitions:
<hostid>: <hostname>[:
- ZABBIX2.2 2.4 等各版本之间的兼容性
ronin47
zabbix更新很快,从2009年到现在已经更新多个版本,为了使用更多zabbix的新特性,随之而来的便是升级版本,zabbix版本兼容性是必须优先考虑的一点 客户端AGENT兼容
zabbix1.x到zabbix2.x的所有agent都兼容zabbix server2.4:如果你升级zabbix server,客户端是可以不做任何改变,除非你想使用agent的一些新特性。 Zabbix代理(p
- unity 3d还是cocos2dx哪个适合游戏?
brotherlamp
unity自学unity教程unity视频unity资料unity
unity 3d还是cocos2dx哪个适合游戏?
问:unity 3d还是cocos2dx哪个适合游戏?
答:首先目前来看unity视频教程因为是3d引擎,目前对2d支持并不完善,unity 3d 目前做2d普遍两种思路,一种是正交相机,3d画面2d视角,另一种是通过一些插件,动态创建mesh来绘制图形单元目前用的较多的是2d toolkit,ex2d,smooth moves,sm2,
- 百度笔试题:一个已经排序好的很大的数组,现在给它划分成m段,每段长度不定,段长最长为k,然后段内打乱顺序,请设计一个算法对其进行重新排序
bylijinnan
java算法面试百度招聘
import java.util.Arrays;
/**
* 最早是在陈利人老师的微博看到这道题:
* #面试题#An array with n elements which is K most sorted,就是每个element的初始位置和它最终的排序后的位置的距离不超过常数K
* 设计一个排序算法。It should be faster than O(n*lgn)。
- 获取checkbox复选框的值
chiangfai
checkbox
<title>CheckBox</title>
<script type = "text/javascript">
doGetVal: function doGetVal()
{
//var fruitName = document.getElementById("apple").value;//根据
- MySQLdb用户指南
chenchao051
mysqldb
原网页被墙,放这里备用。 MySQLdb User's Guide
Contents
Introduction
Installation
_mysql
MySQL C API translation
MySQL C API function mapping
Some _mysql examples
MySQLdb
- HIVE 窗口及分析函数
daizj
hive窗口函数分析函数
窗口函数应用场景:
(1)用于分区排序
(2)动态Group By
(3)Top N
(4)累计计算
(5)层次查询
一、分析函数
用于等级、百分点、n分片等。
函数 说明
RANK() &nbs
- PHP ZipArchive 实现压缩解压Zip文件
dcj3sjt126com
PHPzip
PHP ZipArchive 是PHP自带的扩展类,可以轻松实现ZIP文件的压缩和解压,使用前首先要确保PHP ZIP 扩展已经开启,具体开启方法就不说了,不同的平台开启PHP扩增的方法网上都有,如有疑问欢迎交流。这里整理一下常用的示例供参考。
一、解压缩zip文件 01 02 03 04 05 06 07 08 09 10 11
- 精彩英语贺词
dcj3sjt126com
英语
I'm always here
我会一直在这里支持你
&nb
- 基于Java注解的Spring的IoC功能
e200702084
javaspringbeanIOCOffice
- java模拟post请求
geeksun
java
一般API接收客户端(比如网页、APP或其他应用服务)的请求,但在测试时需要模拟来自外界的请求,经探索,使用HttpComponentshttpClient可模拟Post提交请求。 此处用HttpComponents的httpclient来完成使命。
import org.apache.http.HttpEntity ;
import org.apache.http.HttpRespon
- Swift语法之 ---- ?和!区别
hongtoushizi
?swift!
转载自: http://blog.sina.com.cn/s/blog_71715bf80102ux3v.html
Swift语言使用var定义变量,但和别的语言不同,Swift里不会自动给变量赋初始值,也就是说变量不会有默认值,所以要求使用变量之前必须要对其初始化。如果在使用变量之前不进行初始化就会报错:
var stringValue : String
//
- centos7安装jdk1.7
jisonami
jdkcentos
安装JDK1.7
步骤1、解压tar包在当前目录
[root@localhost usr]#tar -xzvf jdk-7u75-linux-x64.tar.gz
步骤2:配置环境变量
在etc/profile文件下添加
export JAVA_HOME=/usr/java/jdk1.7.0_75
export CLASSPATH=/usr/java/jdk1.7.0_75/lib
- 数据源架构模式之数据映射器
home198979
PHP架构数据映射器datamapper
前面分别介绍了数据源架构模式之表数据入口、数据源架构模式之行和数据入口数据源架构模式之活动记录,相较于这三种数据源架构模式,数据映射器显得更加“高大上”。
一、概念
数据映射器(Data Mapper):在保持对象和数据库(以及映射器本身)彼此独立的情况下,在二者之间移动数据的一个映射器层。概念永远都是抽象的,简单的说,数据映射器就是一个负责将数据映射到对象的类数据。
&nb
- 在Python中使用MYSQL
pda158
mysqlpython
缘由 近期在折腾一个小东西须要抓取网上的页面。然后进行解析。将结果放到
数据库中。 了解到
Python在这方面有优势,便选用之。 由于我有台
server上面安装有
mysql,自然使用之。在进行数据库的这个操作过程中遇到了不少问题,这里
记录一下,大家共勉。
python中mysql的调用
百度之后能够通过MySQLdb进行数据库操作。
- 单例模式
hxl1988_0311
java单例设计模式单件
package com.sosop.designpattern.singleton;
/*
* 单件模式:保证一个类必须只有一个实例,并提供全局的访问点
*
* 所以单例模式必须有私有的构造器,没有私有构造器根本不用谈单件
*
* 必须考虑到并发情况下创建了多个实例对象
* */
/**
* 虽然有锁,但是只在第一次创建对象的时候加锁,并发时不会存在效率
- 27种迹象显示你应该辞掉程序员的工作
vipshichg
工作
1、你仍然在等待老板在2010年答应的要提拔你的暗示。 2、你的上级近10年没有开发过任何代码。 3、老板假装懂你说的这些技术,但实际上他完全不知道你在说什么。 4、你干完的项目6个月后才部署到现场服务器上。 5、时不时的,老板在检查你刚刚完成的工作时,要求按新想法重新开发。 6、而最终这个软件只有12个用户。 7、时间全浪费在办公室政治中,而不是用在开发好的软件上。 8、部署前5分钟才开始测试。