chihuanyou5789
chihuanyou5789

83款 网络爬虫开源软件

 

1、http://www.oschina.net/project/tag/64/spider?lang=0&os=0&sort=view&

 

  • 搜索引擎 Nutch

    Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。 尽管Web搜索是漫游Internet的基本要求, 但是现有web搜索引擎的数目却在下降. 并且这很有可能进一步演变成为一个公司垄断了几乎所有的web... Nutch更多Nutch信息

    最近更新：【每日一博】Nutch 的 url 的正则过滤机制研究 发布于 20天前

  • 网站爬虫 Grub Next Generation

    Grub Next Generation 是一个分布式的网页爬虫系统，包含客户端和服务器可以用来维护网页的索引。 Grub Next Generation更多Grub Next Generation信息

    最近更新：Grub Next Generation 1.0 发布 发布于 3年前

  • 网站数据采集软件 网络矿工采集器（原soukey采摘）

    Soukey采摘网站数据采集软件是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。尽管Soukey采摘开源，但并不会 影响软件功能的提供，甚至要比一些商用软件的功能还要丰富。Soukey采摘当前提供的主要功能如下： 1.    多任务多线... 更多网络矿工采集器（原soukey采摘）信息

  • PHP的Web爬虫和搜索引擎 PhpDig

    PhpDig是一个采用PHP开发的Web爬虫和搜索引擎。通过对动态和静态页面进行索引建立一个词汇表。当搜索查询时，它将按一定的排序规则显示包含关 键字的搜索结果页面。PhpDig包含一个模板系统并能够索引PDF,Word,Excel,和PowerPoint文档。PHPdig适用于专业化 更... 更多PhpDig信息

  • 网站内容采集器 Snoopy

    Snoopy是一个强大的网站内容采集器（爬虫）。提供获取网页内容，提交表单等功能。 更多Snoopy信息

  • Java网页爬虫 JSpider

    JSpider是一个用Java实现的WebSpider，JSpider的执行格式如下： jspider [URL] [ConfigName] URL一定要加上协议名称，如：http://，否则会报错。如果省掉ConfigName，则采用默认配置。 JSpider 的行为是由配置文件具体配置的，比如采用什么插件，结果存储方... 更多JSpider信息

  • 网络爬虫程序 NWebCrawler

    NWebCrawler是一款开源的C#网络爬虫程序 NWebCrawler更多NWebCrawler信息

  • web爬虫 Heritrix

    Heritrix是一个开源，可扩展的web爬虫项目。用户可以使用它来从网上抓取想要的资源。Heritrix设计成严格按照robots.txt文件 的排除指示和META robots标签。其最出色之处在于它良好的可扩展性,方便用户实现自己的抓取逻辑。 Heritrix是一个爬虫框架，其组织结... Heritrix更多Heritrix信息

  • Web爬虫框架 Scrapy

    Scrapy 是一套基于基于Twisted的异步处理框架，纯python实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便～ 更多Scrapy信息

    最近更新：使用 Scrapy 建立一个网站抓取器 发布于 6个月前

  • 垂直爬虫 webmagic

    webmagic的是一个无须配置、便于二次开发的爬虫框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。 以下是爬取oschina博客的一段代码： Spider.create(new SimplePageProcessor("http://my.oschina.net/", "http://my.oschina.net/*/blog/*")).t... webmagic更多webmagic信息

    最近更新：WebMagic 0.5.2发布，Java爬虫框架 发布于 1个月前

  • OpenWebSpider

    OpenWebSpider是一个开源多线程Web Spider（robot：机器人，crawler：爬虫)和包含许多有趣功能的搜索引擎。 OpenWebSpider更多OpenWebSpider信息

  • Java多线程Web爬虫 Crawler4j

    Crawler4j是一个开源的Java类库提供一个用于抓取Web页面的简单接口。可以利用它来构建一个多线程的Web爬虫。 示例代码： import java.util.ArrayList; import java.util.regex.Pattern; import edu.uci.ics.crawler4j.crawler.Page; import edu.uci.ics.cr... 更多Crawler4j信息

  • 网页抓取／信息提取软件 MetaSeeker

    网页抓取/信息提取/数据抽取软件工具包MetaSeeker (GooSeeker) V4.11.2正式发布，在线版免费下载和使用，源代码可阅读。自推出以来，深受喜爱，主要应用领域： 垂直搜索（Vertical Search）：也称为专业搜索，高速、海量和精确抓取是定题网络爬虫DataScrap... 更多MetaSeeker信息

  • Java网络蜘蛛/网络爬虫 Spiderman

    Spiderman - 又一个Java网络蜘蛛/爬虫 Spiderman 是一个基于微内核+插件式架构的网络蜘蛛，它的目标是通过简单的方法就能将复杂的目标网页信息抓取并解析为自己所需要的业务数据。 主要特点 * 灵活、可扩展性强，微内核+插件式架构，Spiderman提供了多达 ... 更多Spiderman信息

  • 网页爬虫 Methanol

    Methanol 是一个模块化的可定制的网页爬虫软件，主要的优点是速度快。 更多Methanol信息

  • 网络爬虫/网络蜘蛛 larbin

    larbin是一种开源的网络爬虫/网络蜘蛛，由法国的年轻人 Sébastien Ailleret独立开发。larbin目的是能够跟踪页面的url进行扩展的抓取，最后为搜索引擎提供广泛的数据来源。Larbin只是一个爬虫，也就 是说larbin只抓取网页，至于如何parse的事情则由用户自己... 更多larbin信息

  • 爬虫小新 Sinawler

    国内第一个针对微博数据的爬虫程序！原名“新浪微博爬虫”。 登录后，可以指定用户为起点，以该用户的关注人、粉丝为线索，延人脉关系搜集用户基本信息、微博数据、评论数据。 该应用获取的数据可作为科研、与新浪微博相关的研发等的数据支持，但请勿用于商... 更多Sinawler信息

  • 【免费】死链接检查软件 Xenu

    Xenu Link Sleuth 也许是你所见过的最小但功能最强大的检查网站死链接的软件了。你可以打开一个本地网页文件来检查它的链接，也可以输入任何网址来检查。它可以分别列出网站 的活链接以及死链接，连转向链接它都分析得一清二楚；支持多线程 ，可以把检查结... Xenu更多Xenu信息

  • Web-Harvest

    Web-Harvest是一个Java开源Web数据抽取工具。它能够收集指定的Web页面并从这些页面中提取有用的数据。Web-Harvest主要是运用了像XSLT,XQuery,正则表达式等这些技术来实现对text/xml的操作。 Web-Harvest更多Web-Harvest信息

  • 网页抓取工具 PlayFish

  • playfish 是一个采用java技术，综合应用多个开源java组件实现的网页抓取工具，通过XML配置文件实现高度可定制性与可扩展性的网页抓取工 具 应用开源jar包包括httpclient(内容读取),dom4j（配置文件解析）,jericho（html解析），已经在 war包的lib下。 这个

  • 易得网络数据采集系统

    本系统采用主流编程语言php和mysql数据库，您可以通过自定义采集规则，或者到我的网站下载共享的规则，针对网站或者网站群，采集您所需的数据，您 也可以向所有人共享您的采集规则哦。通过数据浏览和编辑器，编辑您所采集的数据。 本系统所有代码完全开源，... 易得网络数据采集系统 更多易得网络数据采集系统信息

  • 网页爬虫 YaCy

    YaCy基于p2p的分布式Web搜索引擎.同时也是一个Http缓存代理服务器.这个项目是构建基于p2p Web索引网络的一个新方法.它可以搜索你自己的或全局的索引,也可以Crawl自己的网页或启动分布式Crawling等. 更多YaCy信息

    最近更新： YaCy 1.4 发布，分布式Web搜索引擎 发布于 1年前

  • Web爬虫框架 Smart and Simple Web Crawler

    Smart and Simple Web Crawler是一个Web爬虫框架。集成Lucene支持。该爬虫可以从单个链接或一个链接数组开始，提供两种遍历模式：最大迭代和最大深度。可以设置 过滤器限制爬回来的链接，默认提供三个过滤器ServerFilter、BeginningPathFilter和 RegularE... 更多Smart and Simple Web Crawler信息

  • Web爬虫程序 CrawlZilla

    crawlzilla 是一個幫你輕鬆建立搜尋引擎的自由軟體，有了它，你就不用依靠商業公司的收尋引擎，也不用再煩惱公司內部網站資料索引的問題 由 nutch 專案為核心，並整合更多相關套件，並開發設計安裝與管理UI，讓使用者更方便上手。 crawlzilla 除了爬取基本... 更多CrawlZilla信息

  • 简易HTTP爬虫 HttpBot

    HttpBot 是对 java.net.HttpURLConnection类的简单封装，可以方便的获取网页内容，并且自动管理session，自动处理301重定向等。虽 然不能像HttpClient那样强大，支持完整的Http协议，但却非常地灵活，可以满足我目前所有的相关需求。... 更多HttpBot信息

  • 新闻采集器 NZBGet

    NZBGet是一个新闻采集器，其中从新闻组下载的资料格式为nzb文件。它可用于单机和服务器/客户端模式。在独立模式中通过nzb文件作为参数的命令 行来下载文件。服务器和客户端都只有一个可执行文件”nzbget”。 功能和特点 控制台界面，使用纯文本，彩色文字或... 更多NZBGet信息

  • 网页爬虫 Ex-Crawler

    Ex-Crawler 是一个网页爬虫，采用 Java 开发，该项目分成两部分，一个是守护进程，另外一个是灵活可配置的 Web 爬虫。使用数据库存储网页信息。 更多Ex-Crawler信息

  • 招聘信息爬虫 JobHunter

    JobHunter旨在自动地从一些大型站点来获取招聘信息，如chinahr,51job,zhaopin等等。JobHunter 搜索每个工作项目的邮件地址，自动地向这一邮件地址发送申请文本。 更多JobHunter信息

  • 网页爬虫框架 hispider

    HiSpider is a fast and high performance spider with high speed 严格说只能是一个spider系统的框架, 没有细化需求, 目前只是能提取URL, URL排重, 异步DNS解析, 队列化任务, 支持N机分布式下载, 支持网站定向下载(需要配置hispiderd.ini whitelist). 特征... 更多hispider信息

  • Perl爬虫程序 Combine

    Combine 是一个用Perl语言开发的开放的可扩展的互联网资源爬虫程序。 更多Combine信息

  • web爬虫 jcrawl

    jcrawl是一款小巧性能优良的的web爬虫,它可以从网页抓取各种类型的文件,基于用户定义的符号,比如email,qq. 更多jcrawl信息

  • 分布式网页爬虫 Ebot

    Ebot 是一个用 ErLang 语言开发的可伸缩的分布式网页爬虫，URLs 被保存在数据库中可通过 RESTful 的 HTTP 请求来查询。 Ebot 更多Ebot信息

  • 多线程web爬虫程序 spidernet

    spidernet是一个以递归树为模型的多线程web爬虫程序, 支持text/html资源的获取. 可以设定爬行深度, 最大下载字节数限制, 支持gzip解码, 支持以gbk(gb2312)和utf8编码的资源; 存储于sqlite数据文件. 源码中TODO:标记描述了未完成功能, 希望提交你的代码.... 83款 网络爬虫开源软件_第1张图片 更多spidernet信息

  • ItSucks

    ItSucks是一个java web spider（web机器人，爬虫）开源项目。支持通过下载模板和正则表达式来定义下载规则。提供一个swing GUI操作界面。   ItSucks 更多ItSucks信息

  • 网页搜索爬虫 BlueLeech

    BlueLeech是一个开源程序，它从指定的URL开始，搜索所有可用的链接，以及链接之上的链接。它在搜索的同时可以下载遇到的链接所指向的所有的或预定义的范围的内容。 更多BlueLeech信息

  • URL监控脚本 urlwatch

    urlwatch 是一个用来监控指定的URL地址的 Python 脚本，一旦指定的 URL 内容有变化时候将通过邮件方式通知到。 基本功能 配置简单，通过文本文件来指定URL，一行一个URL地址； Easily hackable (clean Python implementation) Can run as a cronjob and m... 更多urlwatch信息

    最近更新： urlwatch 1.8 发布 发布于 4年前

  • Methabot

    Methabot 是一个经过速度优化的高可配置的 WEB、FTP、本地文件系统的爬虫软件。 更多Methabot信息

  • web 搜索和爬虫 Leopdo

    用JAVA编写的web 搜索和爬虫，包括全文和分类垂直搜索，以及分词系统 更多Leopdo信息

  • Web爬虫工具 NCrawler

    NCrawler 是一个Web Crawler 工具，它可以让开发人员很轻松的发展出具有Web Crawler 能力的应用程式，并且具有可以延展的能力，让开发人员可以扩充它的功能，以支援其他类型的资源（例如PDF /Word/Excel 等档案或其他资料来源）。 NCrawler 使用多执行绪（... 更多NCrawler信息

  • Ajax爬虫和测试 Crawljax

    Crawljax: java编写，开放源代码。 Crawljax 是一个 Java 的工具用于自动化的爬取和测试现在的 Ajax Web 应用。

转载于:https://my.oschina.net/u/1996099/blog/298835

你可能感兴趣的:(83款 网络爬虫开源软件)

  • Houdini：Houdini程序化建模与VEX脚本_2024-07-16_01-51-39.Tex chenjj4003 游戏开发houdiniphp开发语言cinema4d材质贴图blender
    Houdini：Houdini程序化建模与VEX脚本Houdini基础Houdini界面介绍Houdini是一款由SideEffectsSoftware开发的高级3D动画软件，以其强大的程序化建模和视觉特效能力而闻名。Houdini的界面主要由以下几个部分组成：菜单栏：位于窗口顶部，提供文件操作、编辑、视图控制、渲染设置等命令。工具架：包含常用的工具按钮，如创建、编辑、选择工具等。视图区：主要的3
  • 【3D格式转换SDK】HOOPS Exchange技术概览（一）：3D 数据处理高效能与定制化 工业3D_大熊 3DCAD开发工具3d3D建模3D模型轻量化3D模型Web可视化3D数据格式转换3D格式转换CAD格式转换
    HOOPSExchange是一款专为3D工程应用开发而设计的SDK，旨在助力开发者便捷地访问和重用由CAD与BIM设计应用所生成的3D数据，为3D产品运营提供了强大的数据基础。借助单一且集成化的界面，HOOPSExchange能够高效地导入、转换以及导出超过30种原生及标准格式的3D数据，具体涵盖以下格式：机械计算机辅助设计（MCAD）领域：CATIA、NX、Creo、SOLIDWORKS、Inv
  • Visual Studio插件大全推荐 ysdysyn visualstudioide
    给大家推荐一下VisualStudio插件，它们能够提升开发效率、改善代码质量，并增强开发体验：开发效率提升类Resharper一款强大的生产力工具，提供代码自动完成、重构、代码检查、导航等功能。能深入理解代码结构，给出更准确的补全建议和错误检查，帮助开发者编写高质量代码，但比较占用内存.CodeRush具有丰富的代码生成模板和快捷方式，可快速生成属性、方法、构造函数等代码结构，还提供智能代码导航
  • 基于STM32的智能健康监测手环系统 STM32发烧友 stm32嵌入式硬件单片机
    1.引言传统健康监测设备存在功能单一、数据孤立等问题，难以满足现代健康管理的个性化需求。本文设计了一款基于STM32的智能健康监测手环系统，通过多生理参数采集、AI健康评估与云端协同技术，实现人体健康状态的实时监测与预警，推动主动健康管理模式的普及。2.系统设计2.1硬件设计主控芯片：STM32L476RG，超低功耗设计（7天）无线充电（Qi标准，2小时充满）2.2软件架构生理信号处理：小波变换消
  • 开源界的5 大开源许可协议 tboqi1 电脑使用
    越来越多的开发者与设计者希望将自己的产品开源，以便其他人可以在他们的代码基础上做更多事，开源社区也因此充满生机。在我们所能想到的应用领域，都有开源软件存在（象WordPress，Drupal这些开源CMS）。然而很多人对开源许可并不了解，本文介绍开源领域常用的几种许可协议以及它们之间的区别。什么是许可协议？什么是许可，当你为你的产品签发许可，你是在出让自己的权利，不过，你仍然拥有版权和专利（如果申
  • Wireshark详解 靖节先生 wireshark测试工具网络
    Wireshark使用详解1.Wireshark简介2.下载与安装1.下载地址2.安装步骤（以Windows为例）3.界面与核心功能1.主界面布局2.常用菜单功能4.过滤功能详解1.过滤类型2.常用过滤命令5.过滤命令与网络结构对应6.使用注意事项7.案例分析TCP三次握手1.实验目标2.操作步骤3.预期结果8.扩展学习1.Wireshark简介Wireshark是一款开源的网络协议分析工具，支持
  • 小巧免费的笔记本电池检测工具 ITdgr 电脑
    BatteryInfoView是一款免费的笔记本电池检测软件，适用于笔记本电脑和上网本。该软件能够提供电池的详细信息，包括电池名称、制造商名称、序列号、制造日期、电源状态（充电/放电）、当前电池容量、完全充电容量、设计容量、充电放电比率以及电池温度等。用户可以通过BatteryInfoView全面了解自己笔记本电池的状态，例如电池的健康度、损耗度等信息，这些数据对于电池管理和维护非常有帮助。此外，
  • 镜像解决，向量数据库Milvus报错 zwzscnds dockermilvus
    MilvusMilvus是一款开源的向量数据库，具有高度的灵活性、稳定可靠性以及高速查询等特点。它支持针对TB级向量的增删改操作和近实时查询，适用于大规模向量数据的存储和检索。Milvus的官网：https://milvus.ioGithub上Milvus的链接：https://github.com/milvus-ioDockerDocker是一种容器化技术，它允许开发者将应用程序及其依赖项打包到
  • 使用ArcGIS和ArcGISLoader进行地理信息处理 scaFHIO arcgispython
    ArcGIS是由Esri开发和维护的地理信息系统（GIS）软件家族，包括客户端、服务器和在线解决方案。对于开发者来说，Python库arcgis提供了强大的功能，支持矢量和栅格分析、地理编码、制图、路径规划等。此外，它还能够管理用户、组和信息项，并可访问Esri及其他权威来源提供的即用型地图和地理数据，也支持自有数据的使用。1.技术背景介绍ArcGIS是一款广泛应用于地理信息系统中的专业工具，它可
  • 鸿蒙HarmonyOS应用开发 | 仓颉在 HarmonyOS 开发中的应用与创新实战 一键难忘 harmonyos华为分布式操作系统仓颉鸿蒙开发
    鸿蒙HarmonyOS应用开发|仓颉在HarmonyOS开发中的应用与创新实战一、引言HarmonyOS作为一款面向全场景的分布式操作系统，为开发者提供了丰富的开发工具和技术。其中，仓颉作为HarmonyOS的自研编程语言，具有独特的优势和潜力。本文将深入探讨仓颉在HarmonyOS开发中的应用与创新。二、仓颉语言的特点（一）简洁高效的语法仓颉的语法简洁明了，易于学习和使用。它采用了现代化的编程风
  • Vue.js 入门指南：从基础到实战 阿绵 前端vue.js前端javascript
    Vue.js是一款流行的渐进式JavaScript框架，广泛用于构建交互式Web界面。它具有简单易学、轻量级、高性能的特点，适合前端新手入门。本文将从Vue的基本概念入手，详细介绍Vue的生命周期及常见用法，帮助你快速上手Vue开发官网：https://cn.vuejs.org/1.Vue.js介绍1.1Vue的特点易学易用：Vue采用直观的模板语法，降低了学习成本响应式数据绑定：使用双向绑定(v
  • DeepSeek超强搭档！这8款免费神器让你的效率翻倍 a小胡哦 Deepseekvscodegithub
    作为AI领域的效率神器，DeepSeek凭借其强大的智能问答、文件解读和代码生成能力，已成为学习办公的必备工具。但如何让它发挥「1+1>2」的效果？我整理了8款免费软件，搭配DeepSeek让你的效率原地起飞！建议收藏⭐一、办公效率组合拳：告别加班，秒变职场达人WPSOffice推荐理由：免费+全功能办公套件，搭配DeepSeek的文档解析功能，可快速提取合同/报告重点，自动生成摘要。神级用法：用
  • 一款色彩绚丽的个人主页源码 酷爱码 htmlHTML
    源码介绍一款色彩绚丽的个人主页源码，源码由HTML+CSS+JS组成，记事本打开源码文件可以进行内容文字之类的修改，双击html文件可以本地运行效果效果预览源码获取一款色彩绚丽的个人主页源码
  • 工程项目管理系统源码与Spring Cloud：实现高效系统管理与二次开发 微服务技术分享 springcloudjava企业工程管理系统源码工程项目管理系统源码工程管理系统源码
    随着企业规模的不断扩大和业务的快速发展，传统的工程项目管理方式已经无法满足现代企业的需求。为了提高工程管理效率、减轻劳动强度、提高信息处理速度和准确性，企业需要借助先进的数字化技术进行转型。本文将介绍一款采用SpringCloud+SpringBoot+Mybatis技术框架的工程项目管理系统，该系统涵盖了项目管理、合同管理、预警管理、竣工管理、质量管理等多个方面，通过数据字典、编码管理、用户管理
  • 在 Ubuntu 22.04 上搭建 Dify 应用的完整指南 jdfklaakjsdf AIGCubuntulinux运维
    Dify是一款开源的AI应用开发平台，支持快速构建基于大语言模型（如GPT-3、ChatGLM等）的应用。本教程将详细演示如何在Ubuntu22.04系统上部署Dify。一、环境准备1.系统要求Ubuntu22.04LTS最低配置：2核CPU/4GB内存/20GB硬盘推荐配置：4核CPU/8GB内存/40GB硬盘2.更新系统sudoaptupdate&&sudoaptupgrade-ysudoap
  • 字节的豆包和Kimi 的优劣势对比 eso1983 javapython算法
    字节豆包、Kimi（月之暗面）和深度求索（DeepSeek）三款AI助手的对比分析，涵盖核心技术、功能特性、优劣势及适用场景.1.核心能力对比维度豆包（字节跳动）Kimi（月之暗面）DeepSeek（深度求索）技术基础基于字节自研云雀大模型，多模态能力突出，依托抖音/头条数据生态。Moonshot自研长文本大模型，专注超长上下文理解。自研模型聚焦复杂逻辑推理与代码生成，垂直领域优化。长文本处理支持
  • Unity3D制作MMORPG所需知识点详解 Thomas_YXQ 开发语言Unity3D游戏UnityMMORPG
    前言在制作一款大型多人在线角色扮演游戏（MMORPG）时，Unity3D引擎提供了丰富的功能和工具，但开发者需要掌握一系列关键技术和知识点。本文将详细介绍使用Unity3D制作MMORPG所需的关键知识点和技术细节。对惹，这里有一个游戏开发交流小组，希望大家可以点击进来一起交流一下开发经验呀！1.引擎基础与编程语言Unity3D引擎基础：项目创建与管理：熟悉UnityHub的使用，创建并管理Uni
  • Unity3D ARPG（动作角色扮演游戏）设计与实现详解 Thomas_YXQ 博毅创为游戏栖息地游戏开发语言Unity3D架构Unity
    引言动作角色扮演游戏（ActionRole-PlayingGame,ARPG）结合了传统角色扮演游戏（RPG）的深度与动作游戏（ActionGame）的即时反应和流畅战斗体验。Unity3D作为一款强大的跨平台游戏开发引擎，为开发者提供了丰富的工具和资源来创建高质量的ARPG游戏。本文将详细介绍如何使用Unity3D设计和实现一个基本的ARPG游戏，包括技术选型、游戏架构、关键系统实现以及部分代码
  • 【地图视界-Leaflet1】快速搭建你的第一个地图 Anchenry GIS可视化#地图视界前端html信息可视化
    引言随着Web技术的飞速发展，交互式地图已经成为网站不可或缺的一部分。无论是位置定位、数据可视化，还是复杂的空间分析，地图应用都在现代互联网应用中占据着重要地位。而Leaflet作为一款轻量级、开源的JavaScript库，凭借其极简的设计、高效的性能和易于上手的特性，成为了开发交互式地图应用的首选工具之一。本文将通过详细介绍Leaflet的使用，帮助你从零基础开始，逐步构建出自己的地图应用。什么
  • Oracle 数据库基础入门（一）：搭建数据管理基石 Aphelios380 Oracleoracle数据库linux编辑器
    在当今数字化时代，数据库作为数据管理的核心工具，对于各类应用系统的开发至关重要。尤其是在Java全栈开发领域，掌握一款强大的数据库技术是必备技能。Oracle数据库以其卓越的性能、高度的可靠性和丰富的功能，在企业级应用中广泛使用。开辟新的篇章，让我们踏上Oracle数据库的学习之旅，聚焦于基础的建表、数据操作等关键知识，为后续深入学习和实际项目应用筑牢根基。一、DDL数据定义语言：构建数据库结构框
  • 手把手教你用Docker部署Dify平台，打造可视化LLM应用环境 脱泥不tony 自然语言处理AI大模型LLM人工智能大语言模型语言模型Dify
    “Dify是一款开源的大语言模型(LLM)应用开发平台。它融合了后端即服务（BackendasService）和LLMOps的理念，使开发者可以快速搭建生产级的生成式AI应用。即使你是非技术人员，也能参与到AI应用的定义和数据运营过程中。Dify内置了构建LLM应用所需的关键技术栈，包括对数百个模型的支持、直观的Prompt编排界面、高质量的RAG引擎、稳健的Agent框架、灵活的流程编排，并同时
  • 【PromptCoder】使用 package.json 生成 cursorrules 正宗咸豆花 jsonprompt人工智能个人开发
    【PromptCoder】使用package.json生成cursorrules在当今快节奏的开发世界中，效率和准确性至关重要。开发者们不断寻找能够优化工作流程、帮助他们更快编写高质量代码的工具。Cursor作为一款AI驱动的代码编辑器，正在彻底改变我们的编程方式。但如果我告诉你，有一种方法可以让Cursor变得更加智能，更加贴合你的项目需求呢？这就是CursorRules的作用。我们将探讨如何利
  • 2025开源SCA工具推荐 | 组件依赖包安全风险检测利器 程序员
    软件成分分析（SoftwareCompositionAnalysis,SCA）是Gartner定义的一种应用程序安全检测技术，该技术用于分析开源软件以及第三方商业软件涉及的各种源码、模块、框架和库等，以识别和清点开源软件的组件及其构成和依赖关系，并检测是否存在已知的安全和功能漏洞、安全补丁是否已经过时或是否存在许可证合规或兼容性风险等安全问题，帮助确保企业软件供应链中组件的安全。OpenSCA是国
  • Vue中如何轻松实现可调整大小的容器布局——vue-resizeable组件教程
    介绍vue-resizeable是一款在vue项目中可调整各个区域大小的组件，支持任意组合，支持自定义样式演示体验地址https://liquanquan.top/vue-admin/resizablenpm地址https://www.npmjs.com/package/vue-resizeablegithubhttps://github.com/taoman/vue-resizeable欢迎各位
  • 内网映射神器nps搭建
    NPS（内网穿透神器）是一款非常实用的工具，能够帮助用户在内网环境下实现外部网络的访问，解决了许多网络安全和远程访问的问题。通过NPS，可以轻松地在受限的内网环境中，让外部网络设备访问内网服务。下面我将详细介绍如何搭建和配置NPS，从下载到验证，帮助你更好地理解和应用这个工具。1.下载NPS首先，需要访问NPS的官方GitHub仓库，选择适合你操作系统的二进制文件进行下载。步骤：打开NPS的Git
  • PolyOS 是面向 RISC-V 架构的智能终端和 AIoT 开源操作系统（基于开源鸿蒙） skywalk8163 操作系统risc-vharmonyosqemu
    PolyOS是面向RISC-V架构的智能终端和AIoT开源操作系统官网：PolyOS|PolyOSPolyOSMobile，作为一款面向RISC-V架构的智能终端操作系统，我们希望能够构建卓越的特性和创新的生态系统来引领未来移动操作系统技术的发展。该操作系统基于开源项目OpenHarmony，旨在为RISC-V潜在的硬件和软件市场构建一个强大的移动操作系统和生态系统。当前特性与目标PolyOSMo
  • Android渲染Latex公式的开源框架比较 sz_denny 开源
    对比主流框架，介绍如下几款1、AndroidMath官网：GitHub-gregcockroft/AndroidMath:RenderbeautifulLaTeXMathEquationsinanAndroidView基于android原生view方式渲染优点：速度快，开源协议MITlicense缺点：不支持文字+公式混合渲染2、MathView官网：GitHub-jianzhongli/Math
  • 常用Python代码 newlz2000 python
    常见的for循环去博客设置页面，选择一款你喜欢的代码片高亮样式，下面展示同样高亮的代码片.1Value=[(10,150),(100,200),(180,230)]fori,(minVal,maxVal)inenumerate(Value):plt.subplot(1,3,i+1)edges=cv2.Canny(image,minVal,maxVal)edges=cv2.GaussianBlur(
  • 浅析 DeepSeek 开源的 FlashMLA 项目 X.Cristiano FlashMLADeepSeek深度学习
    浅析DeepSeek开源的FlashMLA项目DeepSeek开源周Day1（2025年2月24日）放出的开源项目——FlashMLA，是一款针对Hopper架构GPU高效多层级注意力(Multi-LevelAttention,MLA)解码内核，专门为处理变长序列问题而设计。趁热浏览一下：GitHub-deepseek-ai/FlashMLA一、概述传统的注意力计算方法在面对变长序列或长序列推理时
  • AI碰一碰发视频为何这么火热？高效一键部署OEM定制 hy14762_ 用户运营新媒体运营流量运营人工智能
    云推碰一碰依托AI+NFC技术，用户只需拿手机碰一碰，就可以迅速生成高质量爆款视频，一键发布到D音、K手、小H书等平台，而且挂载商家门店地址，能够快速吸引3~6公里内的客户关注，提升同城曝光量。而且，云推碰一碰还支持直接进入D音点评、大众点评、高德等平台撰写好评，一键连WiFi、加好友、团购等功能。商家们用更低的预算，换来了更广泛的门店曝光。最近我们收集了上百位合作伙伴的反馈，梳理了碰一碰AI市场
  • 开发者关心的那些事 圣子足道 ios游戏编程apple支付
    我要在app里添加IAP，必须要注册自己的产品标识符（product identifiers）。产品标识符是什么？ 产品标识符（Product Identifiers）是一串字符串，它用来识别你在应用内贩卖的每件商品。App Store用产品标识符来检索产品信息，标识符只能包含大小写字母（A-Z）、数字（0-9）、下划线（-）、以及圆点(.)。你可以任意排列这些元素，但我们建议你创建标识符时使用
  • 负载均衡器技术Nginx和F5的优缺点对比 bijian1013 nginxF5
            对于数据流量过大的网络中，往往单一设备无法承担，需要多台设备进行数据分流，而负载均衡器就是用来将数据分流到多台设备的一个转发器。         目前有许多不同的负载均衡技术用以满足不同的应用需求，如软/硬件负载均衡、本地/全局负载均衡、更高
  • LeetCode[Math] - #9 Palindrome Number Cwind javaAlgorithm题解LeetCodeMath
    原题链接：#9 Palindrome Number   要求： 判断一个整数是否是回文数，不要使用额外的存储空间   难度：简单   分析： 题目限制不允许使用额外的存储空间应指不允许使用O(n)的内存空间，O(1)的内存用于存储中间结果是可以接受的。于是考虑将该整型数反转，然后与原数字进行比较。 注：没有看到有关负数是否可以是回文数的明确结论，例如
  • 画图板的基本实现 15700786134 画图板
     要实现画图板的基本功能，除了在qq登陆界面中用到的组件和方法外，还需要添加鼠标监听器，和接口实现。 首先，需要显示一个JFrame界面： public class DrameFrame extends JFrame {              //显示
  • linux的ps命令 被触发 linux
    Linux中的ps命令是Process Status的缩写。ps命令用来列出系统中当前运行的那些进程。ps命令列出的是当前那些进程的快照，就是执行ps命令的那个时刻的那些进程，如果想要动态的显示进程信息，就可以使用top命令。 要对进程进行监测和控制，首先必须要了解当前进程的情况，也就是需要查看当前进程，而 ps 命令就是最基本同时也是非常强大的进程查看命令。使用该命令可以确定有哪些进程正在运行
  • Android 音乐播放器 下一曲 连续跳几首歌 肆无忌惮_ android
    最近在写安卓音乐播放器的时候遇到个问题。在MediaPlayer播放结束时会回调 player.setOnCompletionListener(new OnCompletionListener() { @Override public void onCompletion(MediaPlayer mp) { mp.reset(); Log.i("H
  • java导出txt文件的例子 知了ing javaservlet
    代码很简单就一个servlet,如下： package com.eastcom.servlet; import java.io.BufferedOutputStream; import java.io.IOException; import java.net.URLEncoder; import java.sql.Connection; import java.sql.Resu
  • Scala stack试玩, 提高第三方依赖下载速度 矮蛋蛋 scalasbt
    原文地址： http://segmentfault.com/a/1190000002894524 sbt下载速度实在是惨不忍睹, 需要做些配置优化 下载typesafe离线包, 保存为ivy本地库 wget http://downloads.typesafe.com/typesafe-activator/1.3.4/typesafe-activator-1.3.4.zip 解压r
  • phantomjs安装(linux，附带环境变量设置) ，以及casperjs安装。 alleni123 linuxspider
    1. 首先从官网 http://phantomjs.org/下载phantomjs压缩包，解压缩到/root/phantomjs文件夹。 2. 安装依赖 sudo yum install fontconfig freetype libfreetype.so.6 libfontconfig.so.1 libstdc++.so.6 3. 配置环境变量 vi /etc/profil
  • JAVA IO FileInputStream和FileOutputStream，字节流的打包输出 百合不是茶 java核心思想JAVA IO操作字节流
    在程序设计语言中，数据的保存是基本，如果某程序语言不能保存数据那么该语言是不可能存在的，JAVA是当今最流行的面向对象设计语言之一，在保存数据中也有自己独特的一面，字节流和字符流 1，字节流是由字节构成的，字符流是由字符构成的 字节流和字符流都是继承的InputStream和OutPutStream ,java中两种最基本的就是字节流和字符流   类 FileInputStream
  • Spring基础实例（依赖注入和控制反转） bijian1013 spring
    前提条件：在http://www.springsource.org/download网站上下载Spring框架，并将spring.jar、log4j-1.2.15.jar、commons-logging.jar加载至工程1.武器接口 package com.bijian.spring.base3; public interface Weapon { void kil
  • HR看重的十大技能 bijian1013 提升能力HR成长
        一个人掌握何种技能取决于他的兴趣、能力和聪明程度，也取决于他所能支配的资源以及制定的事业目标，拥有过硬技能的人有更多的工作机会。但是，由于经济发展前景不确定，掌握对你的事业有所帮助的技能显得尤为重要。以下是最受雇主欢迎的十种技能。 　　一、解决问题的能力 　　每天，我们都要在生活和工作中解决一些综合性的问题。那些能够发现问题、解决问题并迅速作出有效决
  • 【Thrift一】Thrift编译安装 bit1129 thrift
    什么是Thrift The Apache Thrift software framework, for scalable cross-language services development, combines a software stack with a code generation engine to build services that work efficiently and s
  • 【Avro三】Hadoop MapReduce读写Avro文件 bit1129 mapreduce
    Avro是Doug Cutting(此人绝对是神一般的存在）牵头开发的。 开发之初就是围绕着完善Hadoop生态系统的数据处理而开展的（使用Avro作为Hadoop MapReduce需要处理数据序列化和反序列化的场景）,因此Hadoop MapReduce集成Avro也就是自然而然的事情。 这个例子是一个简单的Hadoop MapReduce读取Avro格式的源文件进行计数统计，然后将计算结果
  • nginx定制500，502，503，504页面 ronin47 nginx　错误显示
    server { listen 80; error_page 500/500.html; error_page 502/502.html; error_page 503/503.html; error_page 504/504.html; location /test {return502;}} 配置很简单，和配
  • java-1.二叉查找树转为双向链表 bylijinnan 二叉查找树
    import java.util.ArrayList; import java.util.List; public class BSTreeToLinkedList { /* 把二元查找树转变成排序的双向链表 题目： 输入一棵二元查找树，将该二元查找树转换成一个排序的双向链表。 要求不能创建任何新的结点，只调整指针的指向。 10 / \ 6 14 / \
  • Netty源码学习-HTTP-tunnel bylijinnan javanetty
    Netty关于HTTP tunnel的说明： http://docs.jboss.org/netty/3.2/api/org/jboss/netty/channel/socket/http/package-summary.html#package_description 这个说明有点太简略了 一个完整的例子在这里： https://github.com/bylijinnan
  • JSONUtil.serialize(map)和JSON.toJSONString(map)的区别 coder_xpf jqueryjsonmapval()
     JSONUtil.serialize(map)和JSON.toJSONString(map)的区别   数据库查询出来的map有一个字段为空   通过System.out.println()输出 JSONUtil.serialize(map)： {"one":"1","two":"nul
  • Hibernate缓存总结 cuishikuan 开源sshjavawebhibernate缓存三大框架
    一、为什么要用Hibernate缓存？ Hibernate是一个持久层框架，经常访问物理数据库。 为了降低应用程序对物理数据源访问的频次，从而提高应用程序的运行性能。 缓存内的数据是对物理数据源中的数据的复制，应用程序在运行时从缓存读写数据，在特定的时刻或事件会同步缓存和物理数据源的数据。   二、Hibernate缓存原理是怎样的？ Hibernate缓存包括两大类：Hib
  • CentOs6 dalan_123 centos
    首先su - 切换到root下面1、首先要先安装GCC GCC-C++ Openssl等以来模块：yum -y install make gcc gcc-c++ kernel-devel m4 ncurses-devel openssl-devel2、再安装ncurses模块yum -y install ncurses-develyum install ncurses-devel3、下载Erang
  • 10款用 jquery 实现滚动条至页面底端自动加载数据效果 dcj3sjt126com JavaScript
      无限滚动自动翻页可以说是web2.0时代的一项堪称伟大的技术，它让我们在浏览页面的时候只需要把滚动条拉到网页底部就能自动显示下一页的结果，改变了一直以来只能通过点击下一页来翻页这种常规做法。 无限滚动自动翻页技术的鼻祖是微博的先驱：推特(twitter)，后来必应图片搜索、谷歌图片搜索、google reader、箱包批发网等纷纷抄袭了这一项技术，于是靠滚动浏览器滚动条
  • ImageButton去边框&Button或者ImageButton的背景透明 dcj3sjt126com imagebutton
    在ImageButton中载入图片后，很多人会觉得有图片周围的白边会影响到美观，其实解决这个问题有两种方法 一种方法是将ImageButton的背景改为所需要的图片。如：android:background="@drawable/XXX" 第二种方法就是将ImageButton背景改为透明，这个方法更常用 在XML里；    <ImageBut
  • JSP之c:foreach eksliang jspforearch
    原文出自：http://www.cnblogs.com/draem0507/archive/2012/09/24/2699745.html <c:forEach>标签用于通用数据循环，它有以下属性 属 性 描 述 是否必须 缺省值 items 进行循环的项目 否 无 begin 开始条件 否 0 end 结束条件 否 集合中的最后一个项目 step 步长 否 1
  • Android实现主动连接蓝牙耳机 gqdy365 android
    在Android程序中可以实现自动扫描蓝牙、配对蓝牙、建立数据通道。蓝牙分不同类型，这篇文字只讨论如何与蓝牙耳机连接。 大致可以分三步： 一、扫描蓝牙设备： 1、注册并监听广播： BluetoothAdapter.ACTION_DISCOVERY_STARTED BluetoothDevice.ACTION_FOUND BluetoothAdapter.ACTION_DIS
  • android学习轨迹之四：org.json.JSONException: No value for hyz301 json
    org.json.JSONException: No value for items  在JSON解析中会遇到一种错误，很常见的错误   06-21 12:19:08.714 2098-2127/com.jikexueyuan.secret I/System.out﹕ Result:{"status":1,"page":1,&
  • 干货分享：从零开始学编程 系列汇总 justjavac 编程
    程序员总爱重新发明轮子，于是做了要给轮子汇总。 从零开始写个编译器吧系列 (知乎专栏) 从零开始写一个简单的操作系统 (伯乐在线) 从零开始写JavaScript框架 (图灵社区) 从零开始写jQuery框架 (蓝色理想 ) 从零开始nodejs系列文章 (粉丝日志) 从零开始编写网络游戏 
  • jquery-autocomplete 使用手册 macroli jqueryAjax脚本
    jquery-autocomplete学习 一、用前必备 官方网站：http://bassistance.de/jquery-plugins/jquery-plugin-autocomplete/ 当前版本：1.1 需要JQuery版本：1.2.6 二、使用 <script src="./jquery-1.3.2.js" type="text/ja
  • PLSQL-Developer或者Navicat等工具连接远程oracle数据库的详细配置以及数据库编码的修改 超声波 oracleplsql
    　　在服务器上将Oracle安装好之后接下来要做的就是通过本地机器来远程连接服务器端的oracle数据库，常用的客户端连接工具就是PLSQL-Developer或者Navicat这些工具了。刚开始也是各种报错，什么TNS:no listener;TNS:lost connection;TNS:target hosts...花了一天的时间终于让PLSQL-Developer和Navicat等这些客户
  • 数据仓库数据模型之：极限存储--历史拉链表 superlxw1234 极限存储数据仓库数据模型拉链历史表
    在数据仓库的数据模型设计过程中，经常会遇到这样的需求： 1. 数据量比较大; 2. 表中的部分字段会被update,如用户的地址，产品的描述信息，订单的状态等等; 3. 需要查看某一个时间点或者时间段的历史快照信息，比如，查看某一个订单在历史某一个时间点的状态，    比如，查看某一个用户在过去某一段时间内，更新过几次等等; 4. 变化的比例和频率不是很大，比如，总共有10
  • 10点睛Spring MVC4.1-全局异常处理 wiselyman spring mvc
    10.1 全局异常处理 使用@ControllerAdvice注解来实现全局异常处理; 使用@ControllerAdvice的属性缩小处理范围 10.2 演示 演示控制器 package com.wisely.web; import org.springframework.stereotype.Controller; import org.spring
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他