- java爬取mapbox依赖字体文件
gis杭州
importjava.io.File;importjava.io.FileOutputStream;importjava.io.InputStream;importjava.io.OutputStream;importjava.net.HttpURLConnection;importjava.net.InetSocketAddress;importjava.net.Proxy;importjava
- Java HttpClient库的使用
m2fox
简介HttpClient是Apache的一个开源库,相比于JDK自带的URLConnection等,使用起来更灵活方便。使用方法可以大致分为如下八步曲:创建一个HttpClient对象;创建一个Http请求对象并设置请求的URL,比如GET请求就创建一个HttpGet对象,POST请求就创建一个HttpPost对象;如果需要可以设置请求对象的请求头参数,也可以往请求对象中添加请求参数;调用Http
- JAVA-POST请求多个参数
孟吶李唦
JAVAjavaservlet开发语言
第一种:用类似GET方式拼接参数,自行动态拼接.格式固定importjava.io.BufferedReader;importjava.io.IOException;importjava.io.InputStreamReader;importjava.io.OutputStreamWriter;importjava.net.URL;importjava.net.URLConnection;publ
- 移动端网络框架--基于valley实现
Amrecs
androidvalley框架网络框架移动
说明:在开发Android项目时自己写的一个网络连接框架,基于valley框架的使用建立了一个支持多线程的、异步下载的、多数据格式的网络框架valley简介:在这之前,我们在程序中需要和网络通信的时候,大体使用的东西莫过于AsyncTaskLoader,HttpURLConnection,AsyncTask,HTTPClient(Apache)等,今年的GoogleI/O2013上,Volley发
- 精通 Spring Cloud Feign:从理论到实战的通信优化之路
TopicOnline
springcloud
一、服务间调用的几种方式使用SpringCloud开发微服务时,在服务消费者调用服务提供者时,底层通过HTTPClient的方式访问。但实际上在服务调用时,有主要以下来实现:使用JDK原生的URLConnection;Apache提供的HTTPClient;Netty提供的异步HTTPClient;Spring提供的RestTemplate。SpringCloud的SpringCloudOpenF
- getRequestProperty(“ Authorization”)始终返回null
l23456789o
java基础java
getRequestProperty(“Authorization”)始终返回null如下publicclassMain{publicstaticvoidmain(String[]args)throwsIOException{URLurl=newURL("http://example.com");HttpURLConnectionconnection=(HttpURLConnection)url.
- HTTP 4种调用方式
学博成
技术http
HttpURLConnection:java原生java.netHttpClient:代码复杂,还得操心资源回收等。代码很复杂,冗余代码多,不建议直接使用。RestTemplate:是Spring提供的用于访问Rest服务的客户端,RestTemplate提供了多种便捷访问远程Http服务的方法,能够大大提高客户端的编写效率。okhttp:OkHttp是一个高效的HTTP客户端,允许所有同一个主机
- IOS面试题object-c 71-80
️ 邪神
IOS面试题ios面试题objective-c
71.简单介绍下NSURLConnection类及+sendSynchronousRequest:returningResponse:error:与–initWithRequest:delegate:两个方法的区别?NSURLConnection主要用于网络访问,其中+sendSynchronousRequest:returningResponse:error:是同步访问数据,即当前线程会阻塞,并
- java对接第三方接口的三种方式
codeer力
javajava开发语言
在日常工作中,经常需要跟第三方系统对接,我们做为客户端,调用他们的接口进行业务处理,常用的几种调用方式有:1.原生的Java.net.HttpURLConnection(jdk);2.再次封装的HttpClient、CloseableHttpClient(Apache);3.Spring提供的RestTemplate;当然还有其他工具类进行封装的接口,比如hutool的HttpUtil工具类,里面
- RestTemplate 简单使用
分布式与微服务
简述RestTemplate是一个执行HTTP请求的同步阻塞式工具类,它仅仅只是在HTTP客户端库(例如JDKHttpURLConnection,ApacheHttpComponents,okHttp等)基础上,封装了更加简单易用的模板方法API,方便程序员利用已提供的模板方法发起网络请求和处理,能很大程度上提升我们的开发效率。是Spring用于同步client端的核心类,简化了与http服务的通
- inputSteam.available()的注意事项
nyxixi
为了给自己的网站加入图像识别,引入了百度大脑的api,但是需要将网络图片转换成base64的编码格式。在网上找的程序一般是这样的publicstaticStringgetImageStrFromUrl(StringimgURL){byte[]data=null;try{//创建URLURLurl=newURL(imgURL);//创建链接HttpURLConnectionconn=(HttpURL
- 06-OpenFeign-使用HtppClient连接池
宣晨光
OpenFeign连接池
默认下OpenFeign使用URLConnection请求连接,每次都需要创建、销毁连接1、添加ApacheHttpClient依赖org.apache.httpcomponentshttpclientio.github.openfeignfeign-httpclient2、openFeign连接池要求org.springframework.cloud.openfeign.FeignAutoCon
- JAVAhttp请求转https
流泪兔兔头
javahttpshttp
原先的请求代码HttpURLConnectionconnection=(HttpURLConnection)url.openConnection();修改后的请求代码//创建SSL上下文对象并设置信任所有证书的TrustManagerSSLContextsslContext=SSLContext.getInstance("TLS");TrustManager[]trustAllCerts=newT
- Spring Cloud OpenFeign进阶实战
NullzzZ
springcloudspring后端springboot微服务java
OpenFeign实战替换默认的ClientFeign默认是使用JDK原生的URLConnection发送HTTP请求,没有连接池,但是对每个地址会保持一个长连接,就是利用HTTP的persistenceconnection.。这样可以使用其他优秀的Client去替换。这样可以设置连接池,超时时间等对服务之间的调用调优。下面介绍使用HttpClient和Okhttp替换Feign默认的Client
- JAVA爬虫三种方法
weixin_40298650
文章目录前言一、JDK二、HttpClient三、Jsoup总结前言记录JAVA爬虫三种方式一、JDK使用JDK自带的URLConnection实现网络爬虫。publicvoidtestGet()throwsException{//1.确定要访问/爬取的URLURLurl=newURL("https://blog.csdn.net/weixin_40298650/article/details/1
- java url no protocol_httpurlconnection 新人使用遇到错误java.net.MalformedURLException: no protocol...
张赫尔
javaurlnoprotocol
自己在琢磨中:publicclasshttpurl{publicstaticvoidmain(String[]args){try{URLurl=newURL("www.sina.com.cn&qu...自己在琢磨中:publicclasshttpurl{publicstaticvoidmain(String[]args){try{URLurl=newURL("www.sina.com.cn");H
- 《吐血整理》高级系列教程-吃透Fiddler抓包教程(28)-Fiddler如何抓取Android7.0以上的Https包-下篇
北京-宏哥
Fiddler抓包教程fiddlerhttps前端测试工具网络网络协议
1.简介虽然依旧能抓到大部分AndroidAPP的HTTP/HTTPS包,但是别高兴的太早,有的APP为了防抓包,还做了很多操作:①二次加密有的APP,在涉及到关键数据通信时,会将正文二次加密后才通过HTTPS发送,我们抓包抓到的是一堆二进制base64②自带HTTPClient像支付宝那样的变态,自己带了一个基于so的HTTPClient库,对于关键数据,都不走URLConnection和OkH
- RestTemplate请求重定向url,cookie失效问题分析
干饭两斤半
javahttprestTemplate
问题描述开发过程中,原本使用webmagic爬取网页信息;由于需要html中的个别字段信息;故准备改用restTemplate来获取Html;问题来了,使用restTemplate调用接口的时候发现一直会跳转到登录页;而使用webmagic或者postman调用接口能正常获取信息;问题定位初步怀疑cookie设置未生效;跟踪HttpURLConnection代码发现,请求时,网站对请求进行了重定向
- TCP/HTTP/Socket
__Gavin__
HTTP和Scoket通信的区别。http是客户端用http协议进行请求,发送请求时候需要封装http请求头,并绑定请求的数据,服务器一般有web服务器配合(当然也非绝对)。http请求方式为客户端主动发起请求,服务器才能给响应,一次请求完毕后则断开连接,以节省资源。服务器不能主动给客户端响应(除非采取http长连接技术)。iphone主要使用类是NSUrlConnection。scoket是客户
- 【27】应用开发——Android网络技术与Retrofit框架
熊熊饲养员
奇妙的Kotlin之旅androidretrofit
提示:此文章仅作为本人记录日常学习使用,若有存在错误或者不严谨得地方欢迎指正。文章目录一、Android网络技术1.1WebView的用法1.2使用HTTP访问网络1.2.1使用HttpURLConnection1.2.2使用OkHttp1.3解析XML格式数据1.3.1安装并配置Apache服务器1.3.2使用Pull进行解析1.3.3使用SAX进行解析1.4解析JSON格式数据1.4.1使用J
- 高德地图通过经纬度获取位置信息
一名落魄的程序员
java小功能java
高德开放平台入口AddressUntilsimportcom.alibaba.fastjson.JSONObject;importjava.io.BufferedReader;importjava.io.IOException;importjava.io.InputStreamReader;importjava.net.HttpURLConnection;importjava.net.Malfor
- 如何用JAVA代码将视频号视频下载到本地
程序员大雨
javapython开发语言
1、目前只掌握了,下载自己视频号后台的视频的方法:登录视频号助手网页-点开视频-复制链接-(I/O)下载代码如下:StringvideoUrl="xxx";StringsavePath="D:\\videoDownload\\video.mp4";try{//创建URL对象URLurl=newURL(videoUrl);//创建HttpURLConnection对象HttpURLConnectio
- OKHttp详解
u010405836
okhttp
OKHttp详解大家好,我是免费搭建查券返利机器人赚佣金就用微赚淘客系统3.0的小编,今天我们将深入探讨Android开发中常用的网络请求框架——OKHttp。无论是开发Android应用还是涉及到网络请求,OKHttp都是许多开发者的首选之一。什么是OKHttp?OKHttp是由Square公司开发的一款开源的HTTP客户端,它基于Java的标准HttpURLConnection类,但在性能、灵
- 获取远程文件大小 getContentLength()为-1之谜案
eagle隼
获取远程文件大小网上给的方案大部分是下面这条,但是会出现getContentLength()为-1的情况,搜索结果大部分为conn.setRequestProperty("Accept-Encoding","identity");这条建议,但无效果URLurl=newURL(urlStr);HttpURLConnectionconn=(HttpURLConnection)url1.openConn
- OkHttp的理解和使用
love6a6
okhttp
OkHttp是一个开源的HTTP客户端,用于在Java和Android应用程序中发送网络请求。它由Square公司开发,并维护了一个非常活跃的社区。OkHttp提供了简单的API用于发送请求和处理响应,并且它比Java原生的HttpURLConnection更高效、更易于使用。OkHttp的主要特点:异步请求:OkHttp支持异步发送请求,这意味着可以在不阻塞主线程的情况下进行网络操作。拦截器:O
- 认识并使用OkHttp3
南七行者
java后端技术栈AIGChttpokhttp3
认识并使用OkHttp3一、前言:发送Http请求并处理响应1、背景2、传统技术:使用java.net.HttpURLConnection3、学习OkHttp3(可以实现真正的流式处理)二、OkHttp31、OkHttp3是什么?2、如何使用OkHttp3呢?2.1为OkHttpClient创建单例2.1.1默认设置2.1.2自定义设置(更常用)2.1.3不用主动关闭Httpclient2.2同步
- java通过URL获取网络文件并上传到阿里云OSS文件服务器
花落、忆无声
java阿里云
首先,先从网络上读取到文件/***从网络Url中读取文件*@paramurlStr文件URL地址*@throwsIOException*/publicStringdownLoadFromUrl(StringurlStr)throwsIOException{//把地址转换成URL对象URLurl=newURL(urlStr);//创建http链接HttpURLConnectionconn=(Http
- 网络爬虫的基本原理、应用场景及注意事项
古猫先生
Linux爬虫
基本原理:发送HTTP请求:网络爬虫首先通过编程方式模拟用户浏览器行为,向目标网站发送HTTP/HTTPS请求,获取网页内容。这一过程通常利用Python中的requests库或者Java的URLConnection、HttpClient等工具来实现。解析响应数据:服务器响应后,爬虫接收到的是HTML、JSON或其他格式的数据。接着使用如Python的BeautifulSoup、lxml或Java
- HttpHelper HttpURLConnection
指尖‖舞者
java
importjava.io.BufferedReader;importjava.io.InputStream;importjava.io.InputStreamReader;importjava.io.OutputStream;importjava.net.ConnectException;importjava.net.HttpURLConnection;importjava.net.Proxy;
- 【OpenFeign】okhttp3请求压缩请求与响应
吃海的虾酱
技术问题okhttpjava开发语言
OpenFeign默认使用的是SpringCloud自带的HttpURLConnection进行HTTP请求,不支持对请求和响应进行压缩,需要做一些配置才能实现压缩。添加压缩依赖:在项目中添加一个支持压缩的HTTPclient,比如okhttp3,在pom.xml中添加如下依赖:com.squareup.okhttp3okhttp4.4.0配置使用okhttp3:在Feign的配置类中增加一个配置
- Nginx负载均衡
510888780
nginx应用服务器
Nginx负载均衡一些基础知识:
nginx 的 upstream目前支持 4 种方式的分配
1)、轮询(默认)
每个请求按时间顺序逐一分配到不同的后端服务器,如果后端服务器down掉,能自动剔除。
2)、weight
指定轮询几率,weight和访问比率成正比
- RedHat 6.4 安装 rabbitmq
bylijinnan
erlangrabbitmqredhat
在 linux 下安装软件就是折腾,首先是测试机不能上外网要找运维开通,开通后发现测试机的 yum 不能使用于是又要配置 yum 源,最后安装 rabbitmq 时也尝试了两种方法最后才安装成功
机器版本:
[root@redhat1 rabbitmq]# lsb_release
LSB Version: :base-4.0-amd64:base-4.0-noarch:core
- FilenameUtils工具类
eksliang
FilenameUtilscommon-io
转载请出自出处:http://eksliang.iteye.com/blog/2217081 一、概述
这是一个Java操作文件的常用库,是Apache对java的IO包的封装,这里面有两个非常核心的类FilenameUtils跟FileUtils,其中FilenameUtils是对文件名操作的封装;FileUtils是文件封装,开发中对文件的操作,几乎都可以在这个框架里面找到。 非常的好用。
- xml文件解析SAX
不懂事的小屁孩
xml
xml文件解析:xml文件解析有四种方式,
1.DOM生成和解析XML文档(SAX是基于事件流的解析)
2.SAX生成和解析XML文档(基于XML文档树结构的解析)
3.DOM4J生成和解析XML文档
4.JDOM生成和解析XML
本文章用第一种方法进行解析,使用android常用的DefaultHandler
import org.xml.sax.Attributes;
- 通过定时任务执行mysql的定期删除和新建分区,此处是按日分区
酷的飞上天空
mysql
使用python脚本作为命令脚本,linux的定时任务来每天定时执行
#!/usr/bin/python
# -*- coding: utf8 -*-
import pymysql
import datetime
import calendar
#要分区的表
table_name = 'my_table'
#连接数据库的信息
host,user,passwd,db =
- 如何搭建数据湖架构?听听专家的意见
蓝儿唯美
架构
Edo Interactive在几年前遇到一个大问题:公司使用交易数据来帮助零售商和餐馆进行个性化促销,但其数据仓库没有足够时间去处理所有的信用卡和借记卡交易数据
“我们要花费27小时来处理每日的数据量,”Edo主管基础设施和信息系统的高级副总裁Tim Garnto说道:“所以在2013年,我们放弃了现有的基于PostgreSQL的关系型数据库系统,使用了Hadoop集群作为公司的数
- spring学习——控制反转与依赖注入
a-john
spring
控制反转(Inversion of Control,英文缩写为IoC)是一个重要的面向对象编程的法则来削减计算机程序的耦合问题,也是轻量级的Spring框架的核心。 控制反转一般分为两种类型,依赖注入(Dependency Injection,简称DI)和依赖查找(Dependency Lookup)。依赖注入应用比较广泛。
- 用spool+unixshell生成文本文件的方法
aijuans
xshell
例如我们把scott.dept表生成文本文件的语句写成dept.sql,内容如下:
set pages 50000;
set lines 200;
set trims on;
set heading off;
spool /oracle_backup/log/test/dept.lst;
select deptno||','||dname||','||loc
- 1、基础--名词解析(OOA/OOD/OOP)
asia007
学习基础知识
OOA:Object-Oriented Analysis(面向对象分析方法)
是在一个系统的开发过程中进行了系统业务调查以后,按照面向对象的思想来分析问题。OOA与结构化分析有较大的区别。OOA所强调的是在系统调查资料的基础上,针对OO方法所需要的素材进行的归类分析和整理,而不是对管理业务现状和方法的分析。
OOA(面向对象的分析)模型由5个层次(主题层、对象类层、结构层、属性层和服务层)
- 浅谈java转成json编码格式技术
百合不是茶
json编码java转成json编码
json编码;是一个轻量级的数据存储和传输的语言
在java中需要引入json相关的包,引包方式在工程的lib下就可以了
JSON与JAVA数据的转换(JSON 即 JavaScript Object Natation,它是一种轻量级的数据交换格式,非
常适合于服务器与 JavaScript 之间的数据的交
- web.xml之Spring配置(基于Spring+Struts+Ibatis)
bijian1013
javaweb.xmlSSIspring配置
指定Spring配置文件位置
<context-param>
<param-name>contextConfigLocation</param-name>
<param-value>
/WEB-INF/spring-dao-bean.xml,/WEB-INF/spring-resources.xml,
/WEB-INF/
- Installing SonarQube(Fail to download libraries from server)
sunjing
InstallSonar
1. Download and unzip the SonarQube distribution
2. Starting the Web Server
The default port is "9000" and the context path is "/". These values can be changed in &l
- 【MongoDB学习笔记十一】Mongo副本集基本的增删查
bit1129
mongodb
一、创建复本集
假设mongod,mongo已经配置在系统路径变量上,启动三个命令行窗口,分别执行如下命令:
mongod --port 27017 --dbpath data1 --replSet rs0
mongod --port 27018 --dbpath data2 --replSet rs0
mongod --port 27019 -
- Anychart图表系列二之执行Flash和HTML5渲染
白糖_
Flash
今天介绍Anychart的Flash和HTML5渲染功能
HTML5
Anychart从6.0第一个版本起,已经逐渐开始支持各种图的HTML5渲染效果了,也就是说即使你没有安装Flash插件,只要浏览器支持HTML5,也能看到Anychart的图形(不过这些是需要做一些配置的)。
这里要提醒下大家,Anychart6.0版本对HTML5的支持还不算很成熟,目前还处于
- Laravel版本更新异常4.2.8-> 4.2.9 Declaration of ... CompilerEngine ... should be compa
bozch
laravel
昨天在为了把laravel升级到最新的版本,突然之间就出现了如下错误:
ErrorException thrown with message "Declaration of Illuminate\View\Engines\CompilerEngine::handleViewException() should be compatible with Illuminate\View\Eng
- 编程之美-NIM游戏分析-石头总数为奇数时如何保证先动手者必胜
bylijinnan
编程之美
import java.util.Arrays;
import java.util.Random;
public class Nim {
/**编程之美 NIM游戏分析
问题:
有N块石头和两个玩家A和B,玩家A先将石头随机分成若干堆,然后按照BABA...的顺序不断轮流取石头,
能将剩下的石头一次取光的玩家获胜,每次取石头时,每个玩家只能从若干堆石头中任选一堆,
- lunce创建索引及简单查询
chengxuyuancsdn
查询创建索引lunce
import java.io.File;
import java.io.IOException;
import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.document.Docume
- [IT与投资]坚持独立自主的研究核心技术
comsci
it
和别人合作开发某项产品....如果互相之间的技术水平不同,那么这种合作很难进行,一般都会成为强者控制弱者的方法和手段.....
所以弱者,在遇到技术难题的时候,最好不要一开始就去寻求强者的帮助,因为在我们这颗星球上,生物都有一种控制其
- flashback transaction闪回事务查询
daizj
oraclesql闪回事务
闪回事务查询有别于闪回查询的特点有以下3个:
(1)其正常工作不但需要利用撤销数据,还需要事先启用最小补充日志。
(2)返回的结果不是以前的“旧”数据,而是能够将当前数据修改为以前的样子的撤销SQL(Undo SQL)语句。
(3)集中地在名为flashback_transaction_query表上查询,而不是在各个表上通过“as of”或“vers
- Java I/O之FilenameFilter类列举出指定路径下某个扩展名的文件
游其是你
FilenameFilter
这是一个FilenameFilter类用法的例子,实现的列举出“c:\\folder“路径下所有以“.jpg”扩展名的文件。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28
- C语言学习五函数,函数的前置声明以及如何在软件开发中合理的设计函数来解决实际问题
dcj3sjt126com
c
# include <stdio.h>
int f(void) //括号中的void表示该函数不能接受数据,int表示返回的类型为int类型
{
return 10; //向主调函数返回10
}
void g(void) //函数名前面的void表示该函数没有返回值
{
//return 10; //error 与第8行行首的void相矛盾
}
in
- 今天在测试环境使用yum安装,遇到一个问题: Error: Cannot retrieve metalink for repository: epel. Pl
dcj3sjt126com
centos
今天在测试环境使用yum安装,遇到一个问题:
Error: Cannot retrieve metalink for repository: epel. Please verify its path and try again
处理很简单,修改文件“/etc/yum.repos.d/epel.repo”, 将baseurl的注释取消, mirrorlist注释掉。即可。
&n
- 单例模式
shuizhaosi888
单例模式
单例模式 懒汉式
public class RunMain {
/**
* 私有构造
*/
private RunMain() {
}
/**
* 内部类,用于占位,只有
*/
private static class SingletonRunMain {
priv
- Spring Security(09)——Filter
234390216
Spring Security
Filter
目录
1.1 Filter顺序
1.2 添加Filter到FilterChain
1.3 DelegatingFilterProxy
1.4 FilterChainProxy
1.5
- 公司项目NODEJS实践0.1
逐行分析JS源代码
mongodbnginxubuntunodejs
一、前言
前端如何独立用nodeJs实现一个简单的注册、登录功能,是不是只用nodejs+sql就可以了?其实是可以实现,但离实际应用还有距离,那要怎么做才是实际可用的。
网上有很多nod
- java.lang.Math
liuhaibo_ljf
javaMathlang
System.out.println(Math.PI);
System.out.println(Math.abs(1.2));
System.out.println(Math.abs(1.2));
System.out.println(Math.abs(1));
System.out.println(Math.abs(111111111));
System.out.println(Mat
- linux下时间同步
nonobaba
ntp
今天在linux下做hbase集群的时候,发现hmaster启动成功了,但是用hbase命令进入shell的时候报了一个错误 PleaseHoldException: Master is initializing,查看了日志,大致意思是说master和slave时间不同步,没办法,只好找一种手动同步一下,后来发现一共部署了10来台机器,手动同步偏差又比较大,所以还是从网上找现成的解决方
- ZooKeeper3.4.6的集群部署
roadrunners
zookeeper集群部署
ZooKeeper是Apache的一个开源项目,在分布式服务中应用比较广泛。它主要用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步、集群管理、配置文件管理、同步锁、队列等。这里主要讲集群中ZooKeeper的部署。
1、准备工作
我们准备3台机器做ZooKeeper集群,分别在3台机器上创建ZooKeeper需要的目录。
数据存储目录
- Java高效读取大文件
tomcat_oracle
java
读取文件行的标准方式是在内存中读取,Guava 和Apache Commons IO都提供了如下所示快速读取文件行的方法: Files.readLines(new File(path), Charsets.UTF_8); FileUtils.readLines(new File(path)); 这种方法带来的问题是文件的所有行都被存放在内存中,当文件足够大时很快就会导致
- 微信支付api返回的xml转换为Map的方法
xu3508620
xmlmap微信api
举例如下:
<xml>
<return_code><![CDATA[SUCCESS]]></return_code>
<return_msg><![CDATA[OK]]></return_msg>
<appid><