Spring Boot原理剖析和源码分析
依赖管理
问题一: 为什么导入dependency时不需要指定版本?
spring-boot-starter-parent依赖
org.springframework.boot
spring-boot-starter-parent
2.3.0.RELEASE
上述代码中,将spring-boot-starter-parent依赖作为Spring Boot项目的统一父项目依赖管理,并将项目版本号统一为2.3.0.RELEASE,该版本号根据实际开发需求可以修改。
org.springframework.boot
spring-boot-dependencies
2.3.0.RELEASE
继续查看spring-boot-dependencies底层源文件
5.15.12
2.7.7
1.9.80
2.12.0
1.9.5
3.16.1
4.0.6
4.0.2
2.1.4
3.1.0
1.10.10
2.8.2
4.6.1
1.5.1
1.14
......
从spring-boot-dependenices底层源文件可以看出,该文件通过标签对一些常用技术框架的依赖文件进行了统一版本号管理,如activemq、spring、tomcat等,都有与Spring Boot2.3.0.RELEASE版本相匹配的版本,这也是pom.xml引入依赖文件不需要标注依赖文件版本号的原因。
问题二: spring-boot-starter-parent伏以来启动器的主要作用是进行版本统一管理,那么项目运行依赖的jar包是从何而来?
spring-boot-starter-web
org.springframework.boot
spring-boot-starter
2.1.7.RELEASE
compile
org.springframework.boot
spring-boot-starter-json
2.1.7.RELEASE
compile
org.springframework.boot
spring-boot-starter-tomcat
2.1.7.RELEASE
compile
org.hibernate.validator
hibernate-validator
6.0.17.Final
compile
org.springframework
spring-web
5.1.9.RELEASE
compile
org.springframework
spring-webmvc
5.1.9.RELEASE
compile
从上述可以看出,spring-boot-starter-web依赖启动器的主要作用是提供web开发场景所需要的底层所有依赖。
版本由spring-boot-starter-parent统一进行管理。
image-20200526100443828.png
Spring Boot官网提供了部分场景的依赖启动器,这些依赖适用与不同的开发场景,适用时直接在pom.xml中导入即可。
但是Spring Boot官网并不是针对所有的场景的开发技术框架都提供了依赖启动器,如mybatis、druid等,但是为了充分利用Spring Boot框架的优势,mybatis、druid等技术框架团队主动与Spring Boot框架进行了整合,实现了各自的依赖启动器。mybatis-spring-boot-starter、druid-spring-boot-starter。在需要的时候直接在pom.xml文件中导入即可,但是需要自己管理版本号 。
自动配置(启动流程)
概念:能够在我们添加jar包依赖时,自动为我们进行配置一下配置,我们可以不需要配置或者少量配置就能运行编写的项目。
问题 :Spring Boot到底是如何进行自动配置的,都把那些组件进行了自动配置?
Spring Boot 应用启动的入口是@SpringBootApplication注解标注类的main方法,
@SpringBootApplication能够扫描Spring组件并且自动配置Spring Boot
@SpringBootApplication
public class RegistryApplication {
public static void main(String[] args) {
SpringApplication.run(RegistryApplication.class);
}
}
@SpringBootApplication注解类
// 注解的适用范围:类、接口、枚举
@Target({ElementType.TYPE})
// 注解的生命周期:运行时
@Retention(RetentionPolicy.RUNTIME)
// 标明注解可标注在javadoc中
@Documented
// 标明注解可以被子类继承
@Inherited
// 标明该类为配置类
@SpringBootConfiguration
// 启动自动配置功能
@EnableAutoConfiguration
// 包扫描器
@ComponentScan(
excludeFilters = {@Filter(
type = FilterType.CUSTOM,
classes = {TypeExcludeFilter.class}
), @Filter(
type = FilterType.CUSTOM,
classes = {AutoConfigurationExcludeFilter.class}
)}
)
public @interface SpringBootApplication {
@AliasFor(
annotation = EnableAutoConfiguration.class
)
Class[] exclude() default {};
@AliasFor(
annotation = EnableAutoConfiguration.class
)
String[] excludeName() default {};
@AliasFor(
annotation = ComponentScan.class,
attribute = "basePackages"
)
String[] scanBasePackages() default {};
@AliasFor(
annotation = ComponentScan.class,
attribute = "basePackageClasses"
)
Class[] scanBasePackageClasses() default {};
}
从上面可以看出,@SpringBootApplication注解主要由@SpringBootConfiguration、@EnableAutoConfiguration、@ComponentScan这三个核心注解组成。
@SpringBootConfiguration注解
@SpringBootConfiguration注解表示为Spring Boot配置类
@Target({ElementType.TYPE})
@Retention(RetentionPolicy.RUNTIME)
@Documented
// 配置到IOC容器
@Configuration
public @interface SpringBootConfiguration {
}
从上述可以看出,@SpringBootConfiguration注解类主要注解为@Configuration注解,该注解由Spring框架提供,表示当前类为一个配置类,并且可以被组件扫描器扫描。
@EnableAutoConfiguration注解
@EnableAutoConfiguration注解表示为自动配置类,该注解是Spring Boot最重要的注解,也是实现自动配置的注解。
@Target({ElementType.TYPE})
@Retention(RetentionPolicy.RUNTIME)
@Documented
@Inherited
// 自动配置包
@AutoConfigurationPackage
// 自动配置扫描导入
@Import({AutoConfigurationImportSelector.class})
public @interface EnableAutoConfiguration {
String ENABLED_OVERRIDE_PROPERTY = "spring.boot.enableautoconfiguration";
Class[] exclude() default {};
String[] excludeName() default {};
}
从源码可以发现,@EnableAutoConfiguration注解为一个组合注解,其作用就是借助@Import注解导入特定场景需要向IOC注册的Bean,并且加载到IOC容器。@AutoConfigurationPackage就是借助@Import来搜集所有符合自动配置条件的Bean定义,并且加载到IOC容器中。
(1)@AutoConfigurationPackage
@Target({ElementType.TYPE})
@Retention(RetentionPolicy.RUNTIME)
@Documented
@Inherited
// 导入Registrar中注册的组件
@Import({Registrar.class})
public @interface AutoConfigurationPackage {
}
从源码可以看出,@AutoConfigurationPackage注解的功能由@Import注解实现,它是Spring框架底层注解,它的作用就是给容器导入某个组件类
static class Registrar implements ImportBeanDefinitionRegistrar, DeterminableImports {
Registrar() {
}
public void registerBeanDefinitions(AnnotationMetadata metadata, BeanDefinitionRegistry registry) {
// 将主程序类所在的包以及所有子包下的组件扫描到Spring容器
AutoConfigurationPackages.register(registry, (new AutoConfigurationPackages.PackageImport(metadata)).getPackageName());
}
public Set determineImports(AnnotationMetadata metadata) {
return Collections.singleton(new AutoConfigurationPackages.PackageImport(metadata));
}
}
从上述可以看出,@AutoConfigurationPackage注解的主要作用就是将主程序类所在的包以及所有子包下的组件加载到IOC容器中。
因此:在定义项目包目录时,要求定义的包结构必须规范,项目主程序启动类要放在最外层的根目录位置,然后在根目录的位置内部建立子包和类进行业务开发,这样才能保证定义的类才能被组件扫描器扫描。
(2)@Import({AutoConfigurationImportSelector.class})
将 AutoConfigurationImportSelector 类导入到Spring容器中。AutoConfigurationImportSelector 可以帮助Spring容器将所有符合条件的@Configuration配置都加载到Spring Boot创建并使用的IOC容器(ApplicationContext)中。
public String[] selectImports(AnnotationMetadata annotationMetadata) {
if (!this.isEnabled(annotationMetadata)) {
return NO_IMPORTS;
} else {
// 获取自动配置的元数据,需要传入beanClassLoader这个类加载器
AutoConfigurationMetadata autoConfigurationMetadata = AutoConfigurationMetadataLoader.loadMetadata(this.beanClassLoader);
AutoConfigurationImportSelector.AutoConfigurationEntry autoConfigurationEntry = this.getAutoConfigurationEntry(autoConfigurationMetadata, annotationMetadata);
return StringUtils.toStringArray(autoConfigurationEntry.getConfigurations());
}
}
protected AutoConfigurationImportSelector.AutoConfigurationEntry getAutoConfigurationEntry(AutoConfigurationMetadata autoConfigurationMetadata, AnnotationMetadata annotationMetadata) {
if (!this.isEnabled(annotationMetadata)) {
return EMPTY_ENTRY;
} else {
AnnotationAttributes attributes = this.getAttributes(annotationMetadata);
// 从META-INF/spring.factories配置文件中将对于的自动配置类获取到
List configurations = this.getCandidateConfigurations(annotationMetadata, attributes);
configurations = this.removeDuplicates(configurations);
Set exclusions = this.getExclusions(annotationMetadata, attributes);
this.checkExcludedClasses(configurations, exclusions);
configurations.removeAll(exclusions);
configurations = this.filter(configurations, autoConfigurationMetadata);
this.fireAutoConfigurationImportEvents(configurations, exclusions);
return new AutoConfigurationImportSelector.AutoConfigurationEntry(configurations, exclusions);
}
}
@EnableAutoConfiguration注解就是从classpath中搜寻META-INF/spring.factories配置文件,并将其org.springframework.boot.autoconfigure.EnableAutoConfiguration对于的配置通过反射实例化对应的标注了@Configuration的JavaConfig配置类,并且加载到IOC容器中。
以web项目为例,在项目中加入了web环境依赖启动器,对应的org.springframework.boot.autoconfigure.web.servlet.WebMvcAutoConfiguration自动配置就会生效,打开自动配置就会发现,在配置类中通过全注解的方式对 Spring MVC 运行环境所需要环境进行了默认配置,包括前缀、后缀、试图解析器、MVC校验器等。
总结
Spring Boot底层实现自动配置的步骤:
spring boot 应用启动
@SpringBootApplication起作用
@EnableAutoConfiguration
@AutoConfigurationPackage
这个注解主要作用就是@Import({Registrar.class}),它通过Registrar类导入容器中,而Registrar的作用就是将扫描主配置类的包以及子包,并将对应的组件导入IOC容器中。
@Import({AutoConfigurationImportSelector.class})
它将 AutoConfigurationImportSelector 类导入容器中,AutoConfigurationImportSelector 类的作用是通过selectImports()方法执行的过程中,会使用内部工具类SpringFactoriesLoader,查找classpath上所有的jar包中的META-INF/spring.factories进行加载,实现将配置类信息交给Spring Factory加载器进行一系列的容器创建过程。
(3)@ComponentScan
@ComponentScan注解具体扫描包的路径,由Spring Boot主程序所在包的位置决定。在扫描的过程中由@AutoConfigurationPackage注解进行解析,从而得到Spring Boot主程序类所在包的具体位置
你可能感兴趣的:(Spring Boot原理剖析和源码分析)
Flask实现高并发解决方案:探究Python高并发服务器性能
NfsVerilog
python flask 服务器
随着互联网的快速发展,高并发成为了现代网络应用开发中的一个重要问题。在Python中,Flask是一个轻量级的Web框架,被广泛用于构建Web应用。虽然Flask本身并不是为高并发设计的,但通过一些优化和调整,我们可以使其支持处理百万级的并发请求。本文将介绍一些在Flask中实现高并发解决方案的方法,并提供相应的源代码。1.使用Gunicorn作为Flask的Web服务器默认情况下,Flask自带
MongoDB 面试题及答案整理,最新面试题
孙恒阳
mongodb 数据库
MongoDB中索引的工作原理及其类型MongoDB中索引的工作原理类似于传统数据库,用于加速查询操作。索引存储着文档的一个小部分字段,并按照这些字段的排序顺序进行组织。常见的索引类型包括:1、单字段索引:最基本的索引类型,只对文档中的一个字段进行索引。2、复合索引:对文档中的多个字段进行组合索引,可以支持对这些字段的查询操作。3、多键索引:用于数组字段,为数组中的每个元素创建索引项。4、全文索引
java练习(39)
IIIIIIlllii
java leetcode 开发语言
ps:题目来自力扣三数之和给你一个整数数组nums,判断是否存在三元组[nums[i],nums[j],nums[k]]满足i!=j、i!=k且j!=k,同时还满足nums[i]+nums[j]+nums[k]==0。请你返回所有和为0且不重复的三元组。注意:答案中不可以包含重复的三元组。importjava.util.ArrayList;importjava.util.Arrays;import
CMake 与 Make
LearnLHC
Build build c++
1.前面的话程序员已经使用CMake和Make很长时间了。当您加入一家大公司或开始从事具有大型代码库的项目时,您需要处理所有这些构建。您一定已经看到了那些“CMakeLists.txt”文件。您应该在终端上运行“cmake”和“make”命令。很多人只是盲目地遵循指示,并不真正关心我们为什么需要以某种方式做事。整个构建过程是什么?为什么要这样构建?CMake和Make有什么区别?有关系吗?它们可以
聚合电商 API 接口平台:打通淘宝天猫 1688 京东商品详情数据,开启商业新动能
数据捕手19970108018
爬虫技能晋升路线 经验分享
一、引言在当今数字化商业浪潮中,电商市场呈现出蓬勃发展且高度竞争的态势。淘宝、天猫、1688、京东等大型电商平台各自拥有海量的商品资源和庞大的用户群体。然而,对于众多企业和开发者而言,从多个平台获取商品详情数据并进行整合分析,面临着诸多挑战。聚合电商API接口平台的出现,犹如一座桥梁,巧妙地打通了这些主流电商平台的壁垒,实现了淘宝、天猫、1688、京东商品详情数据的汇聚,为商业领域带来了全新的发展
电商 API 接口采集原理深度解析
数据捕手19970108018
爬虫技能晋升路线 数据库
一、引言在当今数字化商业时代,电商行业蓬勃发展,数据成为驱动业务决策的核心资产。电商API(ApplicationProgrammingInterface,应用程序编程接口)接口采集作为获取电商数据的重要方式,扮演着关键角色。无论是电商平台自身的数据分析、商家对市场动态的洞察,还是第三方开发者构建创新应用,都依赖于从电商API接口采集准确、及时的数据。深入理解电商API接口采集原理,对于有效利用这
2025女神节专属!“三八”妇女节魅力沙龙活动!超简单!
帖帖小帮手
微信小程序
在这春风送暖的美好时节,我们迎来了2025年的‘’三八国际妇女节‘’。各大商场、品牌、企业单位都在紧锣密鼓地筹备女神节宣传活动。想要吸引更多顾客,一份精美独特的活动邀请函必不可少!世界的一半,属于女性,独立而坚定。三八国际妇女节是一个专属于女性的庆典,是一个彰显女性力量和魅力的时刻。为此,绿泡泡推出三八时尚女性主题活动邀请函。为了让3.8女神节这个重要的日子更加难忘,精心策划的活动将成为活动的最佳
淘宝天猫商品详情接口(淘宝API系列)
数据捕手19970108018
爬虫技能晋升路线 github 前端 javascript
一、接口基本信息1.接口地址淘宝开放平台的商品详情接口地址通常会根据不同的环境和业务需求有所变化。在实际使用中,需要通过淘宝开放平台的控制台获取准确的接口地址。一般来说,线上正式环境的接口地址遵循特定的格式。2.请求方式支持HTTPPOST请求。POST请求方式适合传递较为复杂的数据,并且能够保证数据传输的安全性,在获取商品详情时,可能会携带多个参数,POST请求更能满足这种需求。3.请求参数me
深入探究:Python 如何实现 100 个并发请求
anan15879942866
python 开发语言 大数据 c语言 爬虫
在Web开发和数据抓取等领域,并发请求是提高效率和性能的重要手段。Python作为一门强大的编程语言,提供了多种方式来实现并发请求。本文将深入探讨如何使用Python实现100个并发请求,并分析其中的关键技术和注意事项。一、Python并发请求的基础在Python中,实现并发请求通常依赖于异步编程和多线程/多进程技术。以下是几种常见的方法:多线程(Threading):Python的threadi
《从新手到高手:SEO 优化全方位指南》-查词人蜘蛛池
蜘蛛池.中国
seo 前端 百度 sequoiadb
基础入门篇了解SEO基本概念:SEO即搜索引擎优化,是通过优化网站结构、内容、链接等,提升网站在搜索引擎结果页面中排名的技术和方法。需熟悉搜索引擎的工作原理,包括网页抓取、索引建立和排序机制,同时掌握关键词、标题标签、元描述、外链、内链、锚文本等核心术语12.明确SEO的重要性:SEO能为网站带来自然搜索流量,这种流量质量高、稳定性强。通过优化网站,可在搜索引擎结果页获得更高排名,吸引更多潜在客户
Web安全攻防入门教程——hvv行动详解
白帽子黑客罗哥
web安全 安全 网络安全 系统安全 红蓝对抗
Web安全攻防入门教程Web安全攻防是指在Web应用程序的开发、部署和运行过程中,保护Web应用免受攻击和恶意行为的技术与策略。这个领域不仅涉及防御措施的实现,还包括通过渗透测试、漏洞挖掘和模拟攻击来识别潜在的安全问题。本教程将带你入门Web安全攻防的基础概念、常见攻击类型、防御技术以及一些实战方法。一、Web安全基础Web应用安全的三大核心目标(CIA三原则)机密性(Confidentialit
不要再走弯路了2025最全的黑客入门学习路线在这
渗透代老师
学习 网络安全 安全 网络 web安全
基于入门网络安全/黑客打造的:黑客&网络安全入门&进阶学习资源包在大多数的思维里总觉得[学习]得先收集资料、学习编程、学习计算机基础,这样不是不可以,但是这样学效率太低了!你要知道网络安全是一门技术,任何技术的学习一定是以实践为主的。也就是说很多的理论知识其实是可以在实践中去验证拓展的,这样学习比起你啃原理、啃书本要好理解很多。所以想要学习网络安全选对正确的学习方法很重要,这可以帮你少走很多弯路。
最全数仓实践:总线矩阵设计_数仓总线矩阵(2)
2401_84170391
程序员 矩阵 大数据 spark
所以,总线矩阵和一致性维度、一致性事实共同组成了Kimball的多维体系结构基础。在这种多维体系结构(MD)的数据仓库架构中,主导的思想便是分步建立数据仓库,并由数据集市组合成企业的数据仓库。但是,在建立第一个数据集市前,架构师首先要做的就是设计出在整个企业内具有统一解释的标准化的维度和事实,即一致性维度和一致性事实,而开发团队必须严格的按照这个体系结构来进行数据集市的迭代开发。如果我们在建立数据
Python爬虫实战:电商数据爬取与价格趋势分析
Python爬虫项目
2025年爬虫实战项目 python 爬虫 开发语言 零售 mongodb 人工智能
摘要本文详细介绍了如何使用Python编写爬虫程序,从电商网站抓取商品数据,并对价格趋势进行分析。我们将使用最新的爬虫技术和数据分析工具,包括Selenium、BeautifulSoup、Pandas和Matplotlib等。通过本文,读者将学习到如何构建一个完整的电商数据爬取与分析系统,并掌握相关技术在实际项目中的应用。关键词Python爬虫、电商数据、价格趋势分析、Selenium、Beaut
MongoDB私人学习笔记
奕辰杰
私人学习笔记 学习 笔记 mongodb java
俗话说“好记性不如烂笔头”,编程的海洋如此的浩大,养成做笔记的习惯是成功的一步!此笔记主要是ZooKeeper3.4.9版本的笔记,并且笔记都是博主自己一字一字编写和记录,有错误的地方欢迎大家指正。一、基础知识:1、MongoDB的名称来源于HumongousDatabase,中文意思就是巨大无比的数据库,顾名思义,MongoDB就是为处理大数据而生,以解决海量数据的存储和高效查询使用为使命。是N
直驱永磁伺服运动系统的优化架构与代理模型解析在高动态运动控制中的应用【matlab/simulink】
坷拉博士
架构 matlab java
✅博主简介:擅长数据搜集与处理、建模仿真、程序设计、仿真代码、论文写作与指导,毕业论文、期刊论文经验交流。✅具体问题可以私信或扫描文章底部二维码。直驱永磁伺服运动系统因其卓越的性能、精度和可靠性,取代了许多具有机械传动结构的传统伺服系统。随着对直驱伺服系统性能要求的提高,且多轴直驱运动系统失去了机械传动结构的解耦特性,直驱永磁伺服运动系统中各部分(如直驱电机、运动轨迹、驱动器和连杆)之间的耦合关系
MongoDB 复制(副本集)
froginwe11
开发语言
MongoDB复制(副本集)引言MongoDB是一个高性能、可扩展、易于使用的文档存储系统。它以JSON-like的文档存储结构,支持灵活的数据模型。在分布式系统中,为了提高数据可用性和系统稳定性,常常需要实现数据的备份和冗余。MongoDB提供了副本集(ReplicaSet)功能,可以实现数据的自动备份和故障转移。本文将详细介绍MongoDB副本集的原理、配置和操作。副本集原理MongoDB副本
网络安全复习资料
网络安全-杰克
web安全 网络 安全
网络安全复习资料1.计算机网络安全是指保持网络中的硬件、软件系统正常运行,使他们不因自然和人为的因素而受到破坏、更改和泄露。2.网络安全:物理安全,软件安全,信息安全,运行安全。3.安全防范措施:通过备份技术提高数据信息的完整性;病毒检查;及时安装补丁程序;提高物理安全;设置Internet防火墙;审查日志;数据加密。4.保护计算机网络设备免受环境事故的影响属于安全信息的物理安全。5.有些计算机系
《百度蜘蛛池:提升网站收录的关键利器》
蜘蛛池.中国
dubbo
T@baidutopseo(蜘蛛池.中国)在互联网流量竞争日益激烈的今天,网站能否被搜索引擎快速收录并获取排名,直接影响着企业的线上曝光与转化效率。作为国内最大的搜索引擎,百度收录规则始终是站长们研究的重点。而"百度蜘蛛池"这一技术工具,凭借其对搜索引擎蜘蛛(Spider)的精准调度能力,已成为提升网站收录效率的"秘密武器"。本文将深入解析蜘蛛池的运作原理、实践价值及合规使用方法。一、蜘蛛池:搜索
C++和OpenGL实现3D游戏编程【连载22】——父物体和子物体的消息处理机制
zhooyu
c c++ 游戏 opengl 3d c
欢迎来到zhooyu的专栏。C++和OpenGL实现3D游戏编程【专题目录】1、本节要实现的内容上一节我们了解了父子物体结构模式,方便我们快捷、控制游戏元素。这一节我们去了解怎样通过父子模式去处理系统消息,系统消息是我们和游戏之间互动的纽带,确定了游戏的用户体验。同时我们还将添加一些预制体,比如说立方体、球体、锥体、胶囊体等,方便我们今后的操作。另外我们此前的模型加载的较为单调,而且我们将加入一些
【SQL数据库】MySQL的下载和使用(windows)
奖励0216
数据库 sql mysql
1在网页上搜索MySQLcommunity2点击mysqlcommunitydownloads3选择MySQLinstallerforwindows4选择上面那个download5不用登录6下载完就安装7Choosingasetuptype选custom就够了8selectproductsMySQLServes-MySQLServe8.0-选最上面的最新版-点右边的箭头,加入右边Applicati
Docker 安装 PostgreSQL
王梓麒
Docker docker postgresql 容器
1.安装Docker和DockerCompose首先,确保你的服务器上已经安装了Docker和DockerCompose。你可以通过以下命令检查它们是否安装:docker--versiondocker-compose--version2.创建项目目录在你的服务器上创建一个用于存放PostgreSQLDockerCompose配置的目录,例如my-project:mkdirmy-projectcdm
人工智能在fpga的具体应用_FPGA创意人工智能研发 校企合作培养专业人才
墨墨猪
人工智能在fpga的具体应用
FPGA英特尔®FPGA与人工智能技术培训——成都信息工程大学站人工智能在21世纪初迎来以深度学习与大数据云计算为主导的第三次浪潮,在无人驾驶、医疗保健、工业等多个领域得到广泛应用。随着人工智能理论和技术日益成熟,FPGA在人工智能方面的应用也越来越多,特别对于需要分析大量数据的AI、大数据以及机器学习等研究领域。人工智能与FPGA的灵活应用,对人工智能专业人才培养提出了更高要求。英特尔®FPGA
双线服务器和单线服务器的不同之处
wanhengidc
服务器 运维
对于双线服务器和单线服务器,两者之间最大的区别就在于服务器的网络连接方式,双线服务器有着两个独立的网络连接线路,所以有着很大的带宽容量,用户和企业选择租用双线服务器可以实现更高的网络传输速度和更稳定的网络连接质量,比较适合需要处理大量网络请求和传输大型数据的应用场景当中。单线服务器则只有一个网络连接线路,所以带宽容量也相对小一些;在网络故障方面,双线服务器具有冗余网络连接,其中某一条网络线路发生故
正则化技术和模型融合等方法提高模型的泛化能力
小赖同学啊
人工智能 人工智能
在机器学习和深度学习中,提高模型的泛化能力至关重要,正则化技术和模型融合是两种有效的手段,以下将详细介绍它们的原理、常见方法及代码示例。正则化技术原理正则化是通过在损失函数中添加一个正则化项,来限制模型的复杂度,防止模型过拟合训练数据,从而提高模型在未见过数据上的泛化能力。正则化项通常与模型的参数相关,通过惩罚过大的参数值,使模型更加平滑和简单。常见方法L1正则化(Lasso正则化)原理:在损失函
深入理解 Flink 中的 .name() 和 .uid() 方法
Ray.1998
大数据 flink kafka spark hive hadoop
在ApacheFlink中,.name()和.uid()是两个常用的配置方法。虽然它们看起来相似,但它们各自有着不同的功能和用途,理解这两个方法的区别和各自的应用场景,能够帮助开发者更好地管理Flink作业,提升作业的可读性、可维护性和容错性。本文将详细讲解.name()和.uid()的作用、用途以及如何在实际开发中正确使用它们。1.name()方法:为操作命名1.1.作用:.name()方法的作
Flink Checkpoint机制详解
Ray.1998
大数据 flink 大数据 开发语言 spark zookeeper kafka hive
在分布式流处理系统中,容错性和一致性是核心要求。ApacheFlink作为流处理的领先框架,提供了一种强大的机制来确保系统的容错性与数据的一致性,这就是Flink的Checkpoint机制。通过定期保存应用程序的状态快照,Flink能够在系统发生故障时迅速恢复到最近的一致状态,并且提供精确一次(exactly-once)的语义保证。本文将详细介绍Flink的Checkpoint机制,包括其触发方式
spi配置参数CPOL CPHA
辰熤✔
单片机 嵌入式硬件
在SPI(SerialPeripheralInterface,串行外设接口)通信协议中,CPOL和CPHA是两个重要的参数,它们定义了SPI通信中的时钟信号特性。SPI是一种同步串行通信协议,用于在微控制器或其他处理器与外设之间传输数据。CPOL(ClockPolarity):CPOL代表时钟信号的静态(即没有数据传输时的)电平状态。当CPOL=0时,时钟信号在空闲状态下为低电平。当CPOL=
AI快速变现之路,AI培训轻资产创业
头脑旋风
AI变现之路 人工智能 AI写作
以下是针对AI写作与文案代写的快速变现方案,结合当前技术趋势和市场需求设计,分步骤实施:一、核心变现模式深化标准化内容生产线多模型协同示例:GPT-4负责故事化长文案创作(如品牌故事)Claude处理逻辑性强的产品白皮书文心一言专攻中文网络热梗植入垂直模板库行业案例:电商:"3秒卖点+使用场景+情感共鸣"三段式模板教育:"痛点诊断→解决方案→效果承诺"课程文案医疗:"症状解析+技术优势+患者见证"
MATLAB的.m文件与Python的.py文件:比较与互参
小桥流水---人工智能
matlab 深度学习 simulink matlab python 开发语言
simulinkMATLAB的.m文件与Python的.py文件:比较与互参相似之处**1.基本结构****2.执行逻辑****3.可读性和维护性**差异性**1.语法特性****2.性能和应用****3.开发环境**互相学习的可能性结论MATLAB的.m文件与Python的.py文件:比较与互参在编程语言的选择上,MATLAB和Python都是科学计算和工程领域中极为流行的选项。特别是在文件格式
关于旗正规则引擎规则中的上传和下载问题
何必如此
文件下载 压缩 jsp 文件上传
文件的上传下载都是数据流的输入输出,大致流程都是一样的。
一、文件打包下载
1.文件写入压缩包
string mainPath="D:\upload\"; 下载路径
string tmpfileName=jar.zip; &n
【Spark九十九】Spark Streaming的batch interval时间内的数据流转源码分析
bit1129
Stream
以如下代码为例(SocketInputDStream):
Spark Streaming从Socket读取数据的代码是在SocketReceiver的receive方法中,撇开异常情况不谈(Receiver有重连机制,restart方法,默认情况下在Receiver挂了之后,间隔两秒钟重新建立Socket连接),读取到的数据通过调用store(textRead)方法进行存储。数据
spark master web ui 端口8080被占用解决方法
daizj
8080 端口占用 spark master web ui
spark master web ui 默认端口为8080,当系统有其它程序也在使用该接口时,启动master时也不会报错,spark自己会改用其它端口,自动端口号加1,但为了可以控制到指定的端口,我们可以自行设置,修改方法:
1、cd SPARK_HOME/sbin
2、vi start-master.sh
3、定位到下面部分
oracle_执行计划_谓词信息和数据获取
周凡杨
oracle 执行计划
oracle_执行计划_谓词信息和数据获取(上)
一:简要说明
在查看执行计划的信息中,经常会看到两个谓词filter和access,它们的区别是什么,理解了这两个词对我们解读Oracle的执行计划信息会有所帮助。
简单说,执行计划如果显示是access,就表示这个谓词条件的值将会影响数据的访问路径(表还是索引),而filter表示谓词条件的值并不会影响数据访问路径,只起到
spring中datasource配置
g21121
dataSource
datasource配置有很多种,我介绍的一种是采用c3p0的,它的百科地址是:
http://baike.baidu.com/view/920062.htm
<!-- spring加载资源文件 -->
<bean name="propertiesConfig"
class="org.springframework.b
web报表工具FineReport使用中遇到的常见报错及解决办法(三)
老A不折腾
finereport FAQ 报表软件
这里写点抛砖引玉,希望大家能把自己整理的问题及解决方法晾出来,Mark一下,利人利己。
出现问题先搜一下文档上有没有,再看看度娘有没有,再看看论坛有没有。有报错要看日志。下面简单罗列下常见的问题,大多文档上都有提到的。
1、repeated column width is largerthan paper width:
这个看这段话应该是很好理解的。比如做的模板页面宽度只能放
mysql 用户管理
墙头上一根草
linux mysql user
1.新建用户 //登录MYSQL@>mysql -u root -p@>密码//创建用户mysql> insert into mysql.user(Host,User,Password) values(‘localhost’,'jeecn’,password(‘jeecn’));//刷新系统权限表mysql>flush privileges;这样就创建了一个名为:
关于使用Spring导致c3p0数据库死锁问题
aijuans
spring Spring 入门 Spring 实例 Spring3 Spring 教程
这个问题我实在是为整个 springsource 的员工蒙羞
如果大家使用 spring 控制事务,使用 Open Session In View 模式,
com.mchange.v2.resourcepool.TimeoutException: A client timed out while waiting to acquire a resource from com.mchange.
百度词库联想
annan211
百度
<!DOCTYPE html>
<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8">
<title>RunJS</title&g
int数据与byte之间的相互转换实现代码
百合不是茶
位移 int转byte byte转int 基本数据类型的实现
在BMP文件和文件压缩时需要用到的int与byte转换,现将理解的贴出来;
主要是要理解;位移等概念 http://baihe747.iteye.com/blog/2078029
int转byte;
byte转int;
/**
* 字节转成int,int转成字节
* @author Administrator
*
简单模拟实现数据库连接池
bijian1013
java thread java多线程 简单模拟实现数据库连接池
简单模拟实现数据库连接池
实例1:
package com.bijian.thread;
public class DB {
//private static final int MAX_COUNT = 10;
private static final DB instance = new DB();
private int count = 0;
private i
一种基于Weblogic容器的鉴权设计
bijian1013
java weblogic
服务器对请求的鉴权可以在请求头中加Authorization之类的key,将用户名、密码保存到此key对应的value中,当然对于用户名、密码这种高机密的信息,应该对其进行加砂加密等,最简单的方法如下:
String vuser_id = "weblogic";
String vuse
【RPC框架Hessian二】Hessian 对象序列化和反序列化
bit1129
hessian
任何一个对象从一个JVM传输到另一个JVM,都要经过序列化为二进制数据(或者字符串等其他格式,比如JSON),然后在反序列化为Java对象,这最后都是通过二进制的数据在不同的JVM之间传输(一般是通过Socket和二进制的数据传输),本文定义一个比较符合工作中。
1. 定义三个POJO
Person类
package com.tom.hes
【Hadoop十四】Hadoop提供的脚本的功能
bit1129
hadoop
1. hadoop-daemon.sh
1.1 启动HDFS
./hadoop-daemon.sh start namenode
./hadoop-daemon.sh start datanode
通过这种逐步启动的方式,比start-all.sh方式少了一个SecondaryNameNode进程,这不影响Hadoop的使用,其实在 Hadoop2.0中,SecondaryNa
中国互联网走在“灰度”上
ronin47
管理 灰度
中国互联网走在“灰度”上(转)
文/孕峰
第一次听说灰度这个词,是任正非说新型管理者所需要的素质。第二次听说是来自马化腾。似乎其他人包括马云也用不同的语言说过类似的意思。
灰度这个词所包含的意义和视野是广远的。要理解这个词,可能同样要用“灰度”的心态。灰度的反面,是规规矩矩,清清楚楚,泾渭分明,严谨条理,是决不妥协,不转弯,认死理。黑白分明不是灰度,像彩虹那样
java-51-输入一个矩阵,按照从外向里以顺时针的顺序依次打印出每一个数字。
bylijinnan
java
public class PrintMatrixClockwisely {
/**
* Q51.输入一个矩阵,按照从外向里以顺时针的顺序依次打印出每一个数字。
例如:如果输入如下矩阵:
1 2 3 4
5 6 7 8
9
mongoDB 用户管理
开窍的石头
mongoDB用户管理
1:添加用户
第一次设置用户需要进入admin数据库下设置超级用户(use admin)
db.addUsr({user:'useName',pwd:'111111',roles:[readWrite,dbAdmin]});
第一个参数用户的名字
第二个参数
[游戏与生活]玩暗黑破坏神3的一些问题
comsci
生活
暗黑破坏神3是有史以来最让人激动的游戏。。。。但是有几个问题需要我们注意
玩这个游戏的时间,每天不要超过一个小时,且每次玩游戏最好在白天
结束游戏之后,最好在太阳下面来晒一下身上的暗黑气息,让自己恢复人的生气
&nb
java 二维数组如何存入数据库
cuiyadll
java
using System;
using System.Linq;
using System.Text;
using System.Windows.Forms;
using System.Xml;
using System.Xml.Serialization;
using System.IO;
namespace WindowsFormsApplication1
{
本地事务和全局事务Local Transaction and Global Transaction(JTA)
darrenzhu
java spring local global transaction
Configuring Spring and JTA without full Java EE
http://spring.io/blog/2011/08/15/configuring-spring-and-jta-without-full-java-ee/
Spring doc -Transaction Management
http://docs.spring.io/spri
Linux命令之alias - 设置命令的别名,让 Linux 命令更简练
dcj3sjt126com
linux alias
用途说明
设置命令的别名。在linux系统中如果命令太长又不符合用户的习惯,那么我们可以为它指定一个别名。虽然可以为命令建立“链接”解决长文件名的问 题,但对于带命令行参数的命令,链接就无能为力了。而指定别名则可以解决此类所有问题【1】。常用别名来简化ssh登录【见示例三】,使长命令变短,使常 用的长命令行变短,强制执行命令时询问等。
常用参数
格式:alias
格式:ali
yii2 restful web服务[格式响应]
dcj3sjt126com
PHP yii2
响应格式
当处理一个 RESTful API 请求时, 一个应用程序通常需要如下步骤 来处理响应格式:
确定可能影响响应格式的各种因素, 例如媒介类型, 语言, 版本, 等等。 这个过程也被称为 content negotiation。
资源对象转换为数组, 如在 Resources 部分中所描述的。 通过 [[yii\rest\Serializer]]
MongoDB索引调优(2)——[十]
eksliang
mongodb MongoDB索引优化
转载请出自出处:http://eksliang.iteye.com/blog/2178555 一、概述
上一篇文档中也说明了,MongoDB的索引几乎与关系型数据库的索引一模一样,优化关系型数据库的技巧通用适合MongoDB,所有这里只讲MongoDB需要注意的地方 二、索引内嵌文档
可以在嵌套文档的键上建立索引,方式与正常
当滑动到顶部和底部时,实现Item的分离效果的ListView
gundumw100
android
拉动ListView,Item之间的间距会变大,释放后恢复原样;
package cn.tangdada.tangbang.widget;
import android.annotation.TargetApi;
import android.content.Context;
import android.content.res.TypedArray;
import andr
程序员用HTML5制作的爱心树表白动画
ini
JavaScript jquery Web html5 css
体验效果:http://keleyi.com/keleyi/phtml/html5/31.htmHTML代码如下:
<!DOCTYPE html>
<html xmlns="http://www.w3.org/1999/xhtml"><head><meta charset="UTF-8" >
<ti
预装windows 8 系统GPT模式的ThinkPad T440改装64位 windows 7旗舰版
kakajw
ThinkPad 预装 改装 windows 7 windows 8
该教程具有普遍参考性,特别适用于联想的机器,其他品牌机器的处理过程也大同小异。
该教程是个人多次尝试和总结的结果,实用性强,推荐给需要的人!
缘由
小弟最近入手笔记本ThinkPad T440,但是特别不能习惯笔记本出厂预装的Windows 8系统,而且厂商自作聪明地预装了一堆没用的应用软件,消耗不少的系统资源(本本的内存为4G,系统启动完成时,物理内存占用比
Nginx学习笔记
mcj8089
nginx
一、安装nginx 1、在nginx官方网站下载一个包,下载地址是:
http://nginx.org/download/nginx-1.4.2.tar.gz
2、WinSCP(ftp上传工
mongodb 聚合查询每天论坛链接点击次数
qiaolevip
每天进步一点点 学习永无止境 mongodb 纵观千象
/* 18 */
{
"_id" : ObjectId("5596414cbe4d73a327e50274"),
"msgType" : "text",
"sendTime" : ISODate("2015-07-03T08:01:16.000Z"
java术语(PO/POJO/VO/BO/DAO/DTO)
Luob.
DAO POJO DTO po VO BO
PO(persistant object) 持久对象
在o/r 映射的时候出现的概念,如果没有o/r映射,就没有这个概念存在了.通常对应数据模型(数据库),本身还有部分业务逻辑的处理.可以看成是与数据库中的表相映射的java对象.最简单的PO就是对应数据库中某个表中的一条记录,多个记录可以用PO的集合.PO中应该不包含任何对数据库的操作.
VO(value object) 值对象
通
算法复杂度
Wuaner
Algorithm
Time Complexity & Big-O:
http://stackoverflow.com/questions/487258/plain-english-explanation-of-big-o
http://bigocheatsheet.com/
http://www.sitepoint.com/time-complexity-algorithms/