java小豪
java小豪

计算机网络学习笔记（II）——应用层

文章目录

    • 第二章—应用层
      • 2.1、应用层原理
        • 网络应用的体系结构
          • 客服—服务器（C/S）体系结构
          • 对等体（P2P）体系结构
          • C/S和P2P体系的混合结构
        • 进程通信
        • 分布式进程通信需要解决的问题
        • 应用层协议
        • Internet传输层提供的服务
        • UDP存在的必要性
      • 2.2、Web和HTTP
        • Web术语
        • HTTP概况
        • HTTP连接
        • 响应时间模型
        • 持久HTTP
        • HTTP请求报文
        • HTTP请求报文：通用格式
        • 提交表单输入
        • HTTP响应状态码
        • 用户-服务器状态：cookies
        • Web缓存（代理服务器）
      • 2.3、FTP
        • FTP：文件传输协议
        • FTP：控制连接与数据连接分开
        • FTP命令、响应

第二章—应用层

2.1、应用层原理

网络应用的体系结构

客服—服务器（C/S）体系结构
  • 服务器
    • 一直运行
    • 固定的IP地址和周知的端口号
    • 扩展性：服务器场，数据中心进行扩展、扩展性差
  • 客户端
    • 主动与服务器通信
    • 与互联网有间歇性的连接
    • 可能是动态IP地址
    • 不能直接与其他客户端通信
对等体（P2P）体系结构
  • 几乎没有一直运行的服务器
  • 任意端系统之间可以进行通信
  • 每个节点即是客户端又是服务器
  • 参与主机间歇性连接且可以改变IP地址
C/S和P2P体系的混合结构

  • Napster

    • 文件搜索：集中

    • 文件传输：P2P

  • 即时通信

    • 在线检测：集中
    • 两个客户聊天：P2P

进程通信

进程：在主机上运行的应用程序

  • 在同一个主机内，使用进程通信机制通信（操作系统定义）
  • 不同主机，通过交换==报文（Message）来通信

客户端进程： 发起通信的进程

服务器进程： 等待连接的进程

分布式进程通信需要解决的问题

  1. 进程标示和寻址问题(服务用户)
    • 对进程进行编址
    • 进程为了接受报文，必须有一个标识即：SAP
      • 主机：唯一的32位IP地址
      • 所采用的传输层协议：TCP/UDP
      • 端口号（Port Numbers）
    • 本质上，一对主机进程之间的通信由2个端节点构成
  2. 传输层-应用层提供服务是如何（服务）
    • 位置：层间界面的SAP（TCP/IP：scoket）
    • 形式：应用程序接口API（TCP/IP：scoket API）
    • 层间接口必须要携带信息
      • 要传输的报文
      • 谁传的：对方的应用进程的标示：IP+TCP(UDP) 端口
      • 传给谁：对方的应用进程的标示：对方的IP+TCP(UDP)端口号
    • 传输层实体（tcp或者udp实体）根据这些信息进行TCP报文段（UDP数据包）的分装
      • 源端口号，目标端口号，数据等
      • 将IP地址往下交IP实体，用于封装IP数据报：源IP，目的IP
    • TCP scoket：
      • TCP服务，两个进程之间的通信需要之前要建立连接
      • 可以用一个整数表示两个应用实体之间的通信关系，本地标示
      • TCP scoket：源IP、源端口、目标IP、目标端口
    • TCP的套接字
      • 4元组：（源IP、源port、目标IP、目标port）
      • 唯一的指定了一个会话（2个进程之间的会话关系）
      • 应用使用这个标示，与远程的应用进程通信
    • UDP scoket：
      • UDP服务，两个进程之间的通信需要之前无需建立连接：每个报文都是独立传输，前后报文可能分给不同的分布式进程
      • UDP scoket：本IP，本端口
      • 传输报文时：必须要提供对方IP，Port：传输报文时：传输层需要上传对方的IP，port
    • UDP套接字
      • 2元组：IP，Port
      • UDP套接字指定了应用所在的一个端节点
      • 在发报文时，必须要指定对方的IP和UDP port
  3. 如何使用传输层提供的服务，实现应用进程之间的报文交换，实现应用（用户使用服务）
    1. 定义应用层协议：报文格式，解释，时序等
    2. 编制程序，使用OS提供的API，调用网络基础设施提供通信服务传报文

应用层协议

定义了：运行在不同的端系统上的应用进程如何相互交换报文

  • 交换的报文类型：请求和应答报文
  • 各种报文类型的语法：报文中的各个字段及其描述
  • 字段的语义：即字段取值的含义
  • 进程何时、如何发送报文及对报文进行响应的规则

应用层需要传输层提供什么样的服务？如何描述传输层的服务？

  • 数据丢失率
  • 吞吐
  • 延迟
  • 安全性：机密性、机密性、可认证性

Internet传输层提供的服务

TCP服务：

  • 可靠的传输服务
  • 流量控制：发送方不会淹没接受方
  • 拥塞控制：当网络出现拥塞时，能抑制发送方
  • 不能提供的服务：时间保证、最小吞吐保证和安全
  • 面向连接：要求在客户端进程和服务器进程之间建立连接

UDP服务：

  • 不可靠传输
  • 不提供服务：可靠、拥塞控制、流量控制、时间、宽带保证、建立连接

UDP存在的必要性

  • 能够区分不同的进程，而IP服务不能
  • 无需建立连接，省去建立连接时间，适合事物性的应用
  • 不做可靠性的工作
  • 没有拥塞控制和流量控制，应用能够按照设定的速度发送数据

2.2、Web和HTTP

Web术语

Web页：由一些对象组成，对象可以是HTML文件，JPEG图像，Java程序等。其包含有一个基本的HTML文件该文件包含若干对象的链接

通过URL对每个对象进行引用

  • 访问协议，用户名，口令字，端口等；

URL格式：

image-20221128144749539

HTTP概况

HTTP：超文本传输协议

  • Web的应用层协议
  • 客户/服务模式
    • 客户：请求、接收和显示Web对象的浏览器
    • 服务器：对请求进行响应，发送对象的Web服务器

计算机网络学习笔记（II）——应用层_第1张图片

  • 使用TCP

    • 客户发起一个与服务器的TCP连接（建立套接字scoket），端口为80
    • 服务器接受客户的TCP连接
    • 在浏览器（HTTP客户端）与服务器（HTTP服务器server）交换HTTP报文（应用层协议报文）
    • TCP连接关闭

  • HTTP是无状态的

    • 无状态的意思是服务器并不会维护关于客户的任何信息（也就是客户发送什么请求，服务器端就给什么响应）

  • 维护状态的协议和复杂

    • 必须维护历史信息（状态）
    • 如果服务器/客户机死机。他们的状态信息可能不一致，二者的信息是一致的
    • 无状态的服务器能够支持更多的客户端

HTTP连接

  1. 非持久HTTP

    1. 最多只有一个对象在TCP连接上发送
    2. 下载多个对象需要多个TCP连接
    3. HTTP/1.0使用非持久连接

  2. 持久HTTP

    1. 多个对象可以在一个（客户端和服务器之间的）TCP连接上传输
    2. HTTP/1.1默认使用持久连接

计算机网络学习笔记（II）——应用层_第2张图片

响应时间模型

往返时间RTT（round-triptime）：一个小的分组从客户端到服务器，在回到客户端的时间（传输时间忽略）

响应时间：

  • 一个RTT用来发起TCP连接
  • 一个RTT用来HTTP请求并等待HTTP响应
  • 文件传输时间
  • 共：2RTT+传输时间

计算机网络学习笔记（II）——应用层_第3张图片

持久HTTP

非持久HTTP的缺点：

  • 每个对象要2个RTT
  • 操作系统必须为每个TCP连接分配资源，但浏览器通常打开并行TCP连接，以获取引用对象

持久HTTP

  • 服务器在发送响应后，仍保持TCP连接

  • 在相同客户端和服务器之间的后续请求和响应报文通过相同的连接进行传送、客户端在遇到一个引用对象的时候，就可以尽快发送对象的对象的请求

  • 非流水方式的持久HTTP

    • 客户端只能在收到前一个响应后才能发出新的请求
    • 每个引用对象花费一个RTT

  • 流水方式的持久HTTP

    • HTTP/1.1的默认模式
    • 客户端遇到一个引用对象就立即产生一个请求
    • 所有引用（小）对象只花费一个RTT是可能的

HTTP请求报文

两种类型的HTP报文：请求、响应

HTTP请求报文：ASCII

在浏览器中输入www.baidu.com可以看到HTTP请求报文格式

image-20221128193237505

计算机网络学习笔记（II）——应用层_第4张图片

HTTP请求报文：通用格式

HTTP有两类报文：

  • 请求报文——从客户端向服务器发送请求报文
  • 响应报文——从服务器到客户端的回答

提交表单输入

POST方式：网页通常包含表单输入、包含在实体主体（entity body）中的输入被提交到服务器

URL方式：方法：GET、输入通过请求行的URL字段上载

  • 方法类型
    • HTTP/1.0：GET、POST、HEAD（要求在服务器在响应报文中不包含请求对象——>故障跟踪）
    • HTTP/1.1：GET、POST、HEAD、PUT（将实体主体中的文件上载到URL字段规定的路径）、DELETE(删除URL字段规定的文件)

HTTP响应状态码

  • 200 OK：请求成功，请求对象包含在响应报文的后续部分
  • 301 Moved Permanently：请求的对象已被永久转移了
  • 400 Bad Request：一个通用的差错代码，表示请求不能被服务器解读（例如：在Java中前后端联调时接口写错）
  • 404 Not Found：请求的文档在该服务上没有找到
  • 505 HTTP Version Not Support：服务器错误

image-20221128195312356

用户-服务器状态：cookies

大多数主要门户网站使用cookies，主要有4部分组成：

  • 在HTTP响应报文中有一个cookies的首部行
  • 在HTTP请求报文含有一个cookies的首部行
  • 在用户端系统中保留有一个cookie文件，有用户浏览器管理
  • 在Web站点有一个后端数据库

计算机网络学习笔记（II）——应用层_第5张图片

Web缓存（代理服务器）

目标：不访问原始服务器，就满足客户的请求

  • 用户设置浏览器：通过缓存访问Web

  • 浏览器将所有的HTTP请求发给缓存

    • 在缓存中的对象：缓存直接返回对象
    • 如果对象不在缓存，缓存请求原始服务器，然后再将对象返回个客户端

计算机网络学习笔记（II）——应用层_第6张图片

2.3、FTP

FTP：文件传输协议

  • 向远程主机上传输文件或从远程主机接收文件

  • 客户/服务器模式

    • 客户端：发起传输的一方
    • 服务器：远程主机

  • FTP服务器：端口号21

计算机网络学习笔记（II）——应用层_第7张图片

FTP：控制连接与数据连接分开

  • FTP客户端与FTP服务器通过端口21连接，并使用TCP为传输协议
  • 客户端通过控制连接获得身份确认
  • 客户端通过控制连接发送命令浏览远程目录，收到文件传输命令时，服务器打开一个客户端的数据连接
  • 一个文件传输完成后，服务器关闭连接，服务器打开第二个TCP数据连接用来传输另一个文件
  • FTP服务器维护用户状态信息：当前路径、用户账户与控制连接对应状态

计算机网络学习笔记（II）——应用层_第8张图片

FTP命令、响应

命令样例：

  • 在控制连接上以ASCII文本方式传送
  • USER username PASS password
  • LIST：请服务器返回远程主机当前目录的文件列表
  • PETR filename：从远程主机当前目录检索文件
  • STOR filename：向远程主机的当前目录存放文件

你可能感兴趣的:(408学习笔记,学习,网络)

  • 【Java源码阅读系列44】深度解读Java NIO ByteBuffer 源码 ·云扬· 源码阅读系列之Javajavanio开发语言
    JavaNIO（NewInput/Output）中的ByteBuffer是Buffer抽象类的具体子类，专门用于处理字节数据的高效读写。作为NIO的核心组件，ByteBuffer支持堆内存（Heap）和直接内存（Direct）两种存储方式，广泛应用于网络通信、文件IO等场景。本文将结合源码，深入解析ByteBuffer的核心机制、关键方法及设计模式的应用。一、ByteBuffer的核心特性与存储方
  • [特殊字符] AlphaGo：“神之一手”背后的智能革命与人机博弈新纪元 大千AI助手 人工智能Python#OTHER人工智能算法数据挖掘机器学习alphagogoogle围棋
    从围棋棋盘到科学前沿的通用人工智能范式突破本文由「大千AI助手」原创发布，专注用真话讲AI，回归技术本质。拒绝神话或妖魔化。搜索「大千AI助手」关注我，一起撕掉过度包装，学习真实的AI技术！一、核心定义与历史意义AlphaGo是由谷歌DeepMind团队开发的围棋人工智能程序，其里程碑意义在于：首破人类围棋壁垒：2016年以4:1击败世界冠军李世石九段，成为首个在完整对局中战胜人类顶尖棋手的AI。
  • 隐马尔可夫模型（HMM）：观测背后的状态解码艺术 大千AI助手 人工智能Python#OTHER数据挖掘人工智能机器学习算法HMM马尔科夫概率论
    本文由「大千AI助手」原创发布，专注用真话讲AI，回归技术本质。拒绝神话或妖魔化。搜索「大千AI助手」关注我，一起撕掉过度包装，学习真实的AI技术！一、核心概念：双重随机过程隐马尔可夫模型（HiddenMarkovModel,HMM）是一种通过可观测序列推断隐含状态序列的概率图模型，包含两个核心随机过程：隐含状态链：不可观测的马尔可夫过程${q_t}$P(qt∣qt−1,qt−2,…,q1)=P(
  • PageRank：互联网的马尔可夫链平衡态 大千AI助手 人工智能Python#OTHER人工智能机器学习条件概率贝叶斯PageRank马尔科夫链MC
    本文由「大千AI助手」原创发布，专注用真话讲AI，回归技术本质。拒绝神话或妖魔化。搜索「大千AI助手」关注我，一起撕掉过度包装，学习真实的AI技术！PageRank算法本质上是一个在网页图上定义的离散时间马尔可夫链（DTMC），其核心思想是将网页间的链接关系转化为状态转移概率。以下是详细分析：一、马尔可夫链的核心要素在PageRank中的体现马尔可夫链要素PageRank对应数学描述状态空间网页集
  • MCMC：高维概率采样的“随机游走”艺术 大千AI助手 人工智能Python#OTHER人工智能数据挖掘机器学习算法MCMC马尔科夫概率论
    MCMC（马尔可夫链蒙特卡洛）是一种从复杂概率分布中高效采样的核心算法，它解决了传统采样方法在高维空间中的“维度灾难”问题。以下是其技术本质、关键算法及实践的深度解析：本文由「大千AI助手」原创发布，专注用真话讲AI，回归技术本质。拒绝神话或妖魔化。搜索「大千AI助手」关注我，一起撕掉过度包装，学习真实的AI技术！一、MCMC要解决的核心问题目标：从目标分布(π(x)\pi(\mathbf{x})
  • 网络工程师组网必用，动态路由OSPF及MPLS静态LSP配置 wozuimang ICT网络工程师集训营路由交换网络工程师MPLS
    一、MPLSMPLS基于标签转发，在数据链路层及网络层之间增加MPLS头部，属于2.5层MPLS域中的相关MPLS名词1、LSR标签交换路由器，支持MPLS的路由器2、LER，MPLS边界连接其他网络的LSR设备3、区域内部LSR为核心LSR二、LSR分类1、入站（ingress）LSR：IP报文中压入MPLS头部2、中转（transit）LSR：用于MPLS标签交换，将报文继续MPLS域中转发3
  • 量化价值投资中的深度学习技术：TensorFlow实战
    量化价值投资中的深度学习技术：TensorFlow实战关键词：量化价值投资,深度学习,TensorFlow,股票预测,因子模型,LSTM神经网络,量化策略摘要：本文将带你走进"量化价值投资"与"深度学习"的交叉地带，用小学生都能听懂的语言解释复杂概念，再通过手把手的TensorFlow实战案例，教你如何用AI技术挖掘股票市场中的价值宝藏。我们会从传统价值投资的痛点出发，揭示深度学习如何像"超级分析
  • 【Linux | 网络】socket编程 - 使用TCP实现服务端向客户端提供简单的服务 是阿建吖! 【网络】【Linux】网络linuxtcp/ip
    目录一、Comm.hpp（公共数据）二、Log.hpp（日志）三、InetAddr.hpp（管理sockaddr_in相关信息）四、NoCopy.hpp（防拷贝）五、Lockguard.hpp（自动管理锁）六、Thread.hpp（封装线程）七、ThreadPool.hpp（线程池）八、dict.txt（配置文件、简单字典）九、Translate.hpp（提供翻译服务）十、Daemon.hpp（使
  • 网络安全-反弹shell详解（攻击，检测与防御） 程序员鱼 web安全网络安全单片机服务器linuxuni-app
    反弹Shell：详解、攻击、检测与防御反弹Shell（ReverseShell）是一种网络安全领域中常见的攻击技术，通常用于远程控制受害者的计算机。本文旨在从网络安全的角度详细介绍反弹Shell的工作原理，实施方法以及如何检测和防御这类攻击。一、Shell的简介与原理1.1什么是Shell？Shell在计算机系统中指的是一个用户界面，用于访问操作系统的服务。在网络安全中，攻击者常利用Shell来控
  • OpenWebUI(8)源码学习-后端utils/telemetry追踪遥测模块
    目录目录结构说明`constants.py`核心作用：主要功能：示例代码片段：`exporters.py`核心作用：主要类：`LazyBatchSpanProcessor`特点：技术亮点：`instrumentors.py`核心作用：插桩对象包括：钩子函数（Hooks）：Instrumentor类：插桩流程：`setup.py`核心作用：主要功能：典型调用方式：✨总体架构与价值技术亮点总结✅开发建
  • 116道网络安全面试真题（附答案），建议收藏！ 程序员肉肉 web安全面试安全网络安全计算机程序员
    116道网络安全面试真题（附答案），建议收藏！随着国家对网络安全的重视度，促使这个职业也变得炙手可热，越来越多的年轻人为进入安全领域在做准备。******数以百计的面试，为何迟迟无法顺利入职？********能力无疑是至关重要的，可却有不少能力不比已入职的同事差却应聘失败的人，那到底该如何做呢？为了帮助大家更快地拿到心仪Offer，我们给小伙伴们整理了一份**《网络安全工程师超高频面试真题》，结合
  • 计算机网络8832号答案,2013年4月份自考试计算机网络原理04741答案.doc
    2013年4月份自考试计算机网络原理04741答案全国2013年4月高等教育自学考试计算机网络原理试题课程代码：04741请考生按规定用笔将所有试题的答案涂、写在答题纸上。选择题部分1.无线应用协议WAP的特点是A.支持手机上网B.不需要基站C.基于分组交换D.无固定路由器2.智能大厦及计算机网络的信息基础设施是A.通信自动化B.楼宇自动化C.结构化综合布线D.现代通信网络3.因特网工程特别任务组
  • S7-300 400与S7-200 SMART PLC以太网通讯（S7协议）资源文件介绍 滑展妙Bernice
    S7-300400与S7-200SMARTPLC以太网通讯（S7协议）资源文件介绍【下载地址】S7-300400与S7-200SMARTPLC以太网通讯S7协议资源文件介绍本资源文件详细解析了S7-300400与S7-200SMARTPLC通过以太网进行通讯的技术细节，涵盖硬件连接、软件配置及通讯调试等关键环节。通过学习，您将掌握S7协议在PLC通讯中的实际应用，提升自动化与电气工程领域的专业技能
  • 标题：2025传统制造业护网实战指南：从合规防御到智能免疫的体系化进阶 上海云盾商务经理杨杨 网络
    引言2025年，随着《工业互联网企业网络安全》三项国家标准全面实施，护网行动已从“合规检查”升级为“能力对抗”。传统制造业在数字化转型浪潮中，面临设备老旧、人才短缺、供应链风险激增等挑战，41.5%的企业计划年内增加安全预算。本文将结合新规要求与行业最佳实践，深度解析传统制造业如何构建“技术-管理-运营”三位一体的护网防御体系。一、传统制造业的护网困境：三大核心矛盾1.设备老旧化vs安全新标准历史
  • Spring Data Neo4j 与后端人工智能算法的数据交互 AI大模型应用实战 springneo4j人工智能ai
    SpringDataNeo4j与后端人工智能算法的数据交互关键词：SpringDataNeo4j、图数据库、人工智能算法、数据交互、知识图谱、图神经网络、数据集成摘要：本文深入探讨了如何利用SpringDataNeo4j框架实现后端人工智能算法与图数据库的高效数据交互。文章首先介绍了图数据库和人工智能算法的基本概念，然后详细解析了SpringDataNeo4j的核心架构和原理。接着，通过实际代码示
  • 【HCIA】TCP三次握手、4次断开详解 戏精亿点点菜 tcp/ip网络服务器
    TCP（传输控制协议）是一种面向连接的、可靠的、基于字节流的传输层通信协议。在TCP/IP协议族中，TCP负责在两个网络实体之间建立、维护和终止连接。TCP连接的建立和终止分别通过三次握手和四次断开来完成。一、三次挥手TCP三次握手是建立TCP连接的过程，它确保了通信双方都准备好进行数据传输。过程如下：客户端->服务器:SYN,ISN=x服务器->客户端:SYN,ACK,ISN=y,ACK(x+1
  • Python爬虫实战：使用最新技术爬取头条新闻数据 Python爬虫项目 2025年爬虫实战项目python爬虫开发语言scrapy音视频
    一、前言：Python爬虫在现代数据获取中的重要性在当今信息爆炸的时代，数据已经成为最宝贵的资源之一。作为数据获取的重要手段，网络爬虫技术在各个领域发挥着越来越重要的作用。Python凭借其简洁的语法、丰富的库生态系统和强大的社区支持，已经成为网络爬虫开发的首选语言。本文将详细介绍如何使用Python及其最新的爬虫技术来爬取头条新闻数据。我们将从基础概念讲起，逐步深入到高级技巧，最后给出完整的爬虫
  • ResNet：深度卷积神经网络的里程碑 心想事“程” 小知识点cnn人工智能神经网络
    一、引言在深度学习的发展历程中，深度卷积神经网络（CNN）不断演进，旨在提升对图像等数据的特征提取与分类能力。然而，随着网络层数的增加，传统CNN面临着梯度消失、梯度爆炸以及退化等棘手问题，训练变得愈发困难。2015年，由微软研究院提出的ResNet（ResidualNetworks，残差网络）横空出世，它以独特的残差学习思想，成功攻克了这些难题，在ImageNet竞赛中大放异彩，开创了深度神经网
  • Go - 项目收藏
    1、谷歌官方维护了一个基于go语言的开源项目列表：https://github.com/golang/go/wiki/Projects2、[知乎网]有哪些值得学习的Go语言开源项目？3、[知乎用户：hackstoic]看过awesome-go项目，汇总了很多go开源项目。但是awesome-go收集了太全了，而且每个项目没有描述。因此我自己根据go语言中文社区提供的资料，还有互联网企业架构设计中的
  • 视觉算法之卷积神经网络 清风AI 深度学习算法详解及代码复现计算机视觉cnn神经网络深度学习python课程设计毕业设计
    定义与特点卷积神经网络(ConvolutionalNeuralNetwork,CNN)是一种专为处理具有网格结构的数据而设计的深度学习模型。其独特的结构和功能使其在图像处理、语音识别等领域展现出卓越的性能:CNN的核心设计理念源于对生物视觉系统的模仿。通过模拟大脑皮层中视网膜和视觉皮层的层次化结构,CNN能够有效地捕捉图像中的局部特征并逐步抽象为高层语义信息。这种设计使得CNN特别擅长处理图像和音
  • 卷积神经网络架构的演进：从AlexNet到EfficientNet t0_54manong 大数据与人工智能cnn架构人工智能个人开发
    在过去的8.5年里，深度学习取得了飞速的进步。回溯到2012年，AlexNet在ImageNet上的Top-1准确率仅为63.3%，而如今，借助EfficientNet架构和师生训练法，我们已经能达到超过90%的准确率。本文将聚焦于卷积神经网络（CNN）架构的演变，深入探究其背后的基本原理。一些关键术语在深入了解各种架构之前，我们需要明确几个关键术语。更宽的网络意味着卷积层中有更多的特征图（滤波器
  • Docker容器技术：从入门到实践 CarlowZJ AI应用开发落地docker容器运维
    目录摘要一、引言二、Docker的基本概念（一）容器与虚拟机（二）Docker的三大核心概念（三）Docker的优势三、Docker的安装与配置（一）安装Docker（二）配置Docker四、Docker镜像管理（一）拉取镜像（二）构建镜像（三）推送镜像五、Docker容器操作（一）启动容器（二）进入容器（三）停止和删除容器六、Docker网络配置（一）默认网络模式（二）自定义网络（三）主机模式（
  • MacOS系统安装Docker（非常详细）从零基础入门到精通，看完这一篇就够了_mac安装docker 2501_90249219 dockereureka容器
    选择默认配置就行，Docker会自动设置一些大多数开发人员必要的配置。这里我们跳过就好。运行Docker在应用程序中找到Docker程序图标，点击以启动Docker，启动之后我们会发现右上角工具栏中多了一个小鲸鱼的图片，这个就是Docker啦~真的好可爱~Docker桌面应用程序打开后，就是首页的学习中心界面。通过小鲸鱼中的AboutDockerDesktop可以查看Docker的版本可以看到版本
  • 数据链路层 Ragef 网络MTUARP
    目录以太网以太网帧格式MTUMTU与IP、UDP\TCP的影响IPUDPTCPARP协议ARP工作流程ARP数据报的格式以太网"以太网"不是一种具体的网络,而是一种技术标准以太网是当前应用最广泛的局域网技术;和以太网并列的还有令牌环网,无线LAN等以太网帧格式帧格式如下图所示：目的地址：接收方的MAC地址，用于标识帧的目的地。源地址：发送方的MAC地址，用于标识帧的来源。类型：这个字段指示帧中封装
  • 【AI大模型】深入解析预训练：大模型时代的核心引擎 我爱一条柴ya 学习AI记录深度学习人工智能aipythonAI编程算法
    预训练已成为现代人工智能，尤其是自然语言处理和计算机视觉领域的基石技术。它彻底改变了模型开发范式，催生了BERT、GPT等革命性模型。本文将系统阐述预训练的核心概念、原理、方法、应用及挑战。一、预训练的本质：为何需要它？核心问题：数据标注的瓶颈监督学习依赖海量高质量标注数据，获取成本极高（时间、金钱、专业知识）。对于复杂任务（如理解语义、生成文本），标注难度呈指数级上升。标注数据稀缺导致模型泛化能
  • Python爬虫小白入门指南，成为大牛必须经历的三个阶段
    学习任何一门技术，都应该带着目标去学习，目标就像一座灯塔，指引你前进，很多人学着学着就学放弃了，很大部分原因是没有明确目标，所以，一定要明确学习目的，在你准备学爬虫前，先问问自己为什么要学习爬虫。有些人是为了一份工作，有些人是为了好玩，也有些人是为了实现某个黑科技功能。不过可以肯定的是，学会了爬虫能给你的工作提供很多便利。小白入门必读作为零基础小白，大体上可分为三个阶段去实现。第一阶段是入门，掌握
  • 语言模型 RLHF 实践指南（一）：策略网络、价值网络与 PPO 损失函数
    在使用ProximalPolicyOptimization（PPO）对语言模型进行强化学习微调（如RLHF）时，大家经常会问：策略网络的动作概率是怎么来的？价值网络的得分是如何计算的？奖励从哪里来？损失函数怎么构建？微调后的旧轨迹还能用吗？这篇文章将以语言模型强化学习微调为例，结合实际实现和数学公式，深入解析PPO的关键计算流程。1️⃣策略网络：如何计算动作概率？策略网络πθ(a∣s)\pi_\t
  • Python通关秘籍之基础教程(一） Smile丶Life丶 Python通关指南：从零基础到高手之路python开发语言后端
    引言在编程的世界里，Python就像一位温和而强大的导师，它以简洁优雅的语法和强大的功能吸引着无数初学者和专业人士。无论你是想开发网站、分析数据、构建人工智能，还是仅仅想学习编程思维，Python都是你的理想选择。Python的魅力在于它的易读性和广泛的应用场景。它的代码就像英语句子一样自然，即使是完全没有编程经验的人也能快速上手。同时，Python拥有庞大的生态系统，从Web开发（Django、
  • Vue3 学习教程，从入门到精通，使用 VSCode 开发 Vue3 的详细指南（3） 知识分享小能手 前端开发vue3网页开发学习前端javascriptvue.jsvue3vue前端框架
    使用VSCode开发Vue3的详细指南本文将详细介绍如何使用VisualStudioCode(VSCode)开发Vue3项目，包括创建项目、打开项目、运行第一个入门程序，并涵盖关键的语法知识点及使用方法。每个知识点都将提供具体的案例代码，并附有详细注释。此外，还将提供一些入门案例，帮助您快速上手Vue3开发。目录准备工作创建Vue3项目在VSCode中打开Vue3项目运行第一个入门程序Vue3关键
  • Three.js引擎开发：Three.js动画系统实现_（9）.Three.js中的骨骼动画实现 chenlz2007 游戏开发javascriptnginx开发语言vr性能优化ecmascript前端
    Three.js中的骨骼动画实现在上一节中，我们介绍了如何在Three.js中加载和显示3D模型。接下来，我们将深入探讨如何在Three.js中实现骨骼动画。骨骼动画是一种高级的动画技术，它通过控制模型的骨骼来驱动模型的动画，广泛应用于虚拟角色的动画制作。在本节中，我们将学习如何在Three.js中实现骨骼动画，包括骨骼动画的基本原理、如何加载带有骨骼的模型、如何创建和控制动画混合器（Animat
  • Nginx负载均衡 510888780 nginx应用服务器
    Nginx负载均衡一些基础知识: nginx 的 upstream目前支持 4 种方式的分配 1)、轮询（默认）       每个请求按时间顺序逐一分配到不同的后端服务器，如果后端服务器down掉，能自动剔除。 2)、weight       指定轮询几率，weight和访问比率成正比
  • RedHat 6.4 安装 rabbitmq bylijinnan erlangrabbitmqredhat
    在 linux 下安装软件就是折腾，首先是测试机不能上外网要找运维开通，开通后发现测试机的 yum 不能使用于是又要配置 yum 源，最后安装 rabbitmq 时也尝试了两种方法最后才安装成功 机器版本： [root@redhat1 rabbitmq]# lsb_release LSB Version: :base-4.0-amd64:base-4.0-noarch:core
  • FilenameUtils工具类 eksliang FilenameUtilscommon-io
    转载请出自出处：http://eksliang.iteye.com/blog/2217081 一、概述 这是一个Java操作文件的常用库，是Apache对java的IO包的封装，这里面有两个非常核心的类FilenameUtils跟FileUtils，其中FilenameUtils是对文件名操作的封装;FileUtils是文件封装，开发中对文件的操作，几乎都可以在这个框架里面找到。 非常的好用。
  • xml文件解析SAX 不懂事的小屁孩 xml
    xml文件解析:xml文件解析有四种方式， 1.DOM生成和解析XML文档(SAX是基于事件流的解析) 2.SAX生成和解析XML文档(基于XML文档树结构的解析) 3.DOM4J生成和解析XML文档 4.JDOM生成和解析XML 本文章用第一种方法进行解析，使用android常用的DefaultHandler import org.xml.sax.Attributes;
  • 通过定时任务执行mysql的定期删除和新建分区，此处是按日分区 酷的飞上天空 mysql
    使用python脚本作为命令脚本，linux的定时任务来每天定时执行 #!/usr/bin/python # -*- coding: utf8 -*- import pymysql import datetime import calendar #要分区的表 table_name = 'my_table' #连接数据库的信息 host,user,passwd,db =
  • 如何搭建数据湖架构？听听专家的意见 蓝儿唯美 架构
    Edo Interactive在几年前遇到一个大问题：公司使用交易数据来帮助零售商和餐馆进行个性化促销，但其数据仓库没有足够时间去处理所有的信用卡和借记卡交易数据  “我们要花费27小时来处理每日的数据量，”Edo主管基础设施和信息系统的高级副总裁Tim Garnto说道：“所以在2013年，我们放弃了现有的基于PostgreSQL的关系型数据库系统，使用了Hadoop集群作为公司的数
  • spring学习——控制反转与依赖注入 a-john spring
           控制反转（Inversion of Control，英文缩写为IoC）是一个重要的面向对象编程的法则来削减计算机程序的耦合问题，也是轻量级的Spring框架的核心。 控制反转一般分为两种类型，依赖注入（Dependency Injection，简称DI）和依赖查找（Dependency Lookup）。依赖注入应用比较广泛。  
  • 用spool+unixshell生成文本文件的方法 aijuans xshell
    例如我们把scott.dept表生成文本文件的语句写成dept.sql,内容如下: 　　set pages 50000; 　　set lines 200; 　　set trims on; 　　set heading off; 　　spool /oracle_backup/log/test/dept.lst; 　　select deptno||','||dname||','||loc
  • 1、基础--名词解析(OOA/OOD/OOP) asia007 学习基础知识
    OOA:Object-Oriented Analysis（面向对象分析方法） 是在一个系统的开发过程中进行了系统业务调查以后，按照面向对象的思想来分析问题。OOA与结构化分析有较大的区别。OOA所强调的是在系统调查资料的基础上，针对OO方法所需要的素材进行的归类分析和整理，而不是对管理业务现状和方法的分析。 　　OOA（面向对象的分析）模型由5个层次（主题层、对象类层、结构层、属性层和服务层）
  • 浅谈java转成json编码格式技术 百合不是茶 json编码java转成json编码
    json编码;是一个轻量级的数据存储和传输的语言       在java中需要引入json相关的包,引包方式在工程的lib下就可以了   JSON与JAVA数据的转换（JSON 即 JavaScript Object Natation，它是一种轻量级的数据交换格式，非   常适合于服务器与 JavaScript 之间的数据的交
  • web.xml之Spring配置(基于Spring+Struts+Ibatis) bijian1013 javaweb.xmlSSIspring配置
    指定Spring配置文件位置 <context-param> <param-name>contextConfigLocation</param-name> <param-value> /WEB-INF/spring-dao-bean.xml,/WEB-INF/spring-resources.xml, /WEB-INF/
  • Installing SonarQube（Fail to download libraries from server） sunjing InstallSonar
    1.  Download and unzip the SonarQube distribution 2.  Starting the Web Server The default port is "9000" and the context path is "/". These values can be changed in &l
  • 【MongoDB学习笔记十一】Mongo副本集基本的增删查 bit1129 mongodb
    一、创建复本集   假设mongod,mongo已经配置在系统路径变量上，启动三个命令行窗口，分别执行如下命令：   mongod --port 27017 --dbpath data1 --replSet rs0 mongod --port 27018 --dbpath data2 --replSet rs0 mongod --port 27019 -
  • Anychart图表系列二之执行Flash和HTML5渲染 白糖_ Flash
    今天介绍Anychart的Flash和HTML5渲染功能   HTML5 Anychart从6.0第一个版本起，已经逐渐开始支持各种图的HTML5渲染效果了，也就是说即使你没有安装Flash插件，只要浏览器支持HTML5，也能看到Anychart的图形（不过这些是需要做一些配置的）。 这里要提醒下大家，Anychart6.0版本对HTML5的支持还不算很成熟，目前还处于
  • Laravel版本更新异常4.2.8-> 4.2.9 Declaration of ... CompilerEngine ... should be compa bozch laravel
    昨天在为了把laravel升级到最新的版本，突然之间就出现了如下错误： ErrorException thrown with message "Declaration of Illuminate\View\Engines\CompilerEngine::handleViewException() should be compatible with Illuminate\View\Eng
  • 编程之美-NIM游戏分析-石头总数为奇数时如何保证先动手者必胜 bylijinnan 编程之美
    import java.util.Arrays; import java.util.Random; public class Nim { /**编程之美 NIM游戏分析 问题： 有N块石头和两个玩家A和B，玩家A先将石头随机分成若干堆，然后按照BABA...的顺序不断轮流取石头， 能将剩下的石头一次取光的玩家获胜，每次取石头时，每个玩家只能从若干堆石头中任选一堆，
  • lunce创建索引及简单查询 chengxuyuancsdn 查询创建索引lunce
    import java.io.File; import java.io.IOException; import org.apache.lucene.analysis.Analyzer; import org.apache.lucene.analysis.standard.StandardAnalyzer; import org.apache.lucene.document.Docume
  • [IT与投资]坚持独立自主的研究核心技术 comsci it
           和别人合作开发某项产品....如果互相之间的技术水平不同,那么这种合作很难进行,一般都会成为强者控制弱者的方法和手段.....        所以弱者,在遇到技术难题的时候,最好不要一开始就去寻求强者的帮助,因为在我们这颗星球上,生物都有一种控制其
  • flashback transaction闪回事务查询 daizj oraclesql闪回事务
       闪回事务查询有别于闪回查询的特点有以下3个： （1）其正常工作不但需要利用撤销数据，还需要事先启用最小补充日志。 （2）返回的结果不是以前的“旧”数据，而是能够将当前数据修改为以前的样子的撤销SQL（Undo SQL）语句。 （3）集中地在名为flashback_transaction_query表上查询，而不是在各个表上通过“as of”或“vers
  • Java I/O之FilenameFilter类列举出指定路径下某个扩展名的文件 游其是你 FilenameFilter
    这是一个FilenameFilter类用法的例子，实现的列举出“c:\\folder“路径下所有以“.jpg”扩展名的文件。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28
  • C语言学习五函数，函数的前置声明以及如何在软件开发中合理的设计函数来解决实际问题 dcj3sjt126com c
    # include <stdio.h> int f(void) //括号中的void表示该函数不能接受数据，int表示返回的类型为int类型 { return 10; //向主调函数返回10 } void g(void) //函数名前面的void表示该函数没有返回值 { //return 10; //error 与第8行行首的void相矛盾 } in
  • 今天在测试环境使用yum安装，遇到一个问题： Error: Cannot retrieve metalink for repository: epel. Pl dcj3sjt126com centos
    今天在测试环境使用yum安装，遇到一个问题： Error: Cannot retrieve metalink for repository: epel. Please verify its path and try again   处理很简单，修改文件“/etc/yum.repos.d/epel.repo”， 将baseurl的注释取消， mirrorlist注释掉。即可。 &n
  • 单例模式 shuizhaosi888 单例模式
    单例模式      懒汉式 public class RunMain { /** * 私有构造 */ private RunMain() { } /** * 内部类，用于占位，只有 */ private static class SingletonRunMain { priv
  • Spring Security（09）——Filter 234390216 Spring Security
    Filter 目录 1.1     Filter顺序 1.2     添加Filter到FilterChain 1.3     DelegatingFilterProxy 1.4     FilterChainProxy 1.5
  • 公司项目NODEJS实践0.1 逐行分析JS源代码 mongodbnginxubuntunodejs
      一、前言         前端如何独立用nodeJs实现一个简单的注册、登录功能，是不是只用nodejs+sql就可以了？其实是可以实现，但离实际应用还有距离，那要怎么做才是实际可用的。         网上有很多nod
  • java.lang.Math liuhaibo_ljf javaMathlang
    System.out.println(Math.PI); System.out.println(Math.abs(1.2)); System.out.println(Math.abs(1.2)); System.out.println(Math.abs(1)); System.out.println(Math.abs(111111111)); System.out.println(Mat
  • linux下时间同步 nonobaba ntp
    今天在linux下做hbase集群的时候，发现hmaster启动成功了，但是用hbase命令进入shell的时候报了一个错误  PleaseHoldException: Master is initializing，查看了日志，大致意思是说master和slave时间不同步，没办法，只好找一种手动同步一下，后来发现一共部署了10来台机器，手动同步偏差又比较大，所以还是从网上找现成的解决方
  • ZooKeeper3.4.6的集群部署 roadrunners zookeeper集群部署
    ZooKeeper是Apache的一个开源项目，在分布式服务中应用比较广泛。它主要用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步、集群管理、配置文件管理、同步锁、队列等。这里主要讲集群中ZooKeeper的部署。   1、准备工作 我们准备3台机器做ZooKeeper集群，分别在3台机器上创建ZooKeeper需要的目录。   数据存储目录
  • Java高效读取大文件 tomcat_oracle java
    　　读取文件行的标准方式是在内存中读取，Guava 和Apache Commons IO都提供了如下所示快速读取文件行的方法： 　　Files.readLines(new File(path), Charsets.UTF_8); 　　FileUtils.readLines(new File(path)); 　　这种方法带来的问题是文件的所有行都被存放在内存中，当文件足够大时很快就会导致
  • 微信支付api返回的xml转换为Map的方法 xu3508620 xmlmap微信api
    举例如下： <xml>    <return_code><![CDATA[SUCCESS]]></return_code>    <return_msg><![CDATA[OK]]></return_msg>    <appid><
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他