Eddie_Ivan
Eddie_Ivan

CUMT教务系统模拟登录

没爬过自己学校教务网站怎么能说自己会敲爬虫 : )

在此记录模拟登录cumt教务系统

P.s  Markdown学习中....没找到在哪里能插入代码...所以代码都是图片形式，在后面附上github地址


正文开始

教务系统网址


CUMT教务系统模拟登录_第1张图片

和许多学校相同，都是正方教务系统（ummm正方和煎蛋难兄难弟）

查看源代码

可以看到由五个js进行登录加密，为RSA加密，不了解rsa的看这里：RSA加密

提交表单

CUMT教务系统模拟登录_第2张图片
1

post的数据包括csrf令牌以及明文的yhm（即学号，我随便敲的），和base64加密的mm(提交了两次)，即密码

csrftoken

用来防止跨站请求伪造

源代码中搜索，找到随机生成的token表单value

CUMT教务系统模拟登录_第3张图片

登录加密

查看login.js

找到获取公钥私钥的地址


CUMT教务系统模拟登录_第4张图片

cookies问题

使用requests库的requests.session()保持会话即可


登录逻辑：从登录页面获取csrftoken，请求login_getpublickey.html提交时间参数获取rsa密钥，对获取到的密钥base64解密，用密钥对登录密码进行rsa加密，对密文再进行base64加密，最后post


rsa加密是最麻烦的地方

此处参考stackoverflow文章戳我

代码

CUMT教务系统模拟登录_第5张图片


CUMT教务系统模拟登录_第6张图片

放上代码地址，使用时导入login.py，调用httpmthd类即可

github地址

此处的requests库会有一个编码问题，按报错把库文件代码里某处的'latin1'改为'utf-8'就可以解决

模拟登录后顺便做了成绩获取


CUMT教务系统模拟登录_第7张图片

打算有时间了敲一个多线程暴力抢课脚本，但是很狗的是，敲完程序测试的机会就只有学期末抢课那几天，这学期敲好调试好要等到过一学期才能拿来用 ( :


CUMT教务系统模拟登录_第8张图片

好了不管这些，反正模拟登录成功后就可以为所欲为了


CUMT教务系统模拟登录_第9张图片


selenium脚本

除了利用RSA加密密码外，还可以使用selenium直接提交表单


CUMT教务系统模拟登录_第10张图片

缺点是button的click()有几率失效，网上有解决办法，不多讨论

P.s在此强烈谴责selenium喜新厌旧的行为！！！居然抛弃了PhantomJS转投火狐和chrome的无头版本，然而火狐无头实例化耗时比phantom多了不少

而且既然不支持phantom，为啥库文件里还是有phantom的包，直到运行的时候才报错说phantom已经过时了，请使用火狐或谷歌...莫名其妙.jpg


CUMT教务系统模拟登录_第11张图片


更多思路

还可以node.js本地运行js加密，或者提交到在线rsa加密网站

反正方法有很多，没有验证码也可以说对爬虫很友好了



第一篇博客文章end：)

2018.3.28

你可能感兴趣的:(CUMT教务系统模拟登录)

  • YashanDB完成中国信通院关系型数据库安全能力专项测试 数据库sql
    崖山数据库YashanDB产品简介崖山数据库系统是深圳计算科学研究院(简称“深算院”)和深圳崖山科技有限公司(简称“崖山科技”)自主研发设计的新型数据库管理系统，提供包括单机主备、共享集群、空间数据库、分布式实时数仓等系列数据库产品及配套开发、迁移、运维等工具体系，覆盖OLTP/HTAP/OLAP交易和分析混合负载场景，全面兼容私有化及云基础设施，为客户提供一站式的企业级融合数据管理解决方案。崖山
  • 企业价格策略优化：CRM系统中的统一管控实践 程序员算法机器学习
    在当今竞争激烈的商业环境中，价格和折扣管理是企业提升市场竞争力和盈利能力的关键因素。客户关系管理（CRM）系统为企业提供了一个强大的工具，通过实现价格和折扣的统一管控，企业能够更好地应对市场变化，满足客户需求，同时保持利润最大化。本文将探讨CRM系统如何实现价格和折扣的统一管控，以及这一功能对企业管理的价值。价格和折扣统一管控的重要性价格是影响客户购买决策的重要因素之一。通过CRM系统对价格和折扣
  • 负载均衡：提升网络服务质量与稳定性的利器 负载均衡
    在当今互联网高度发达的时代，网络服务的质量和稳定性直接关系到企业的生存和发展以及用户的体验。负载均衡技术作为一种提升网络服务质量与稳定性的利器，正日益受到广泛的关注和应用。负载均衡的核心目标是在多个服务器或计算资源之间合理地分配工作负载，以实现资源的优化利用、提高系统的整体性能和可靠性，并确保在高并发、大流量的情况下，网络服务能够快速响应并稳定运行。它通过将客户端的请求均匀地分发到后端的多个服务器
  • 负载均衡：优化网络性能与资源利用的关键技术 负载均衡
    在当今数字化时代，随着互联网业务的飞速发展和用户数量的急剧增长，服务器面临的并发请求量不断攀升，如何确保系统的高效稳定运行成为了至关重要的问题。负载均衡技术应运而生，它作为一种优化网络性能与资源利用的关键技术，在现代网络架构中发挥着不可或缺的作用。负载均衡的基本原理是将网络流量或工作负载均匀地分配到多个服务器或计算资源上，避免单点服务器因承受过大的负载而出现性能下降、响应延迟甚至系统崩溃等问题。通
  • nfs-ganesha源码编译安装配置说明 天行健，道酬勤
    一、概览nfs-ganesha是一个主要用于linux之间的网络文件共享软件，支持NFS(v3,4.0,4.1,4.1pNFS,4.2)andfor9PfromthePlan9operatingsystem.Itcansupportalltheseprotocolsconcurrently。samba则是主要用于windows和linux之间的网络文件共享软件，支持smb协议。二、环境版本系统及相
  • 《鸿蒙Next微内核：解锁人工智能决策树并行计算的加速密码》 人工智能深度学习算法
    在当今人工智能飞速发展的时代，提升运算速度是推动其进步的关键。鸿蒙Next以其独特的微内核特性，为设计决策树的并行计算框架提供了新的思路和契机。鸿蒙Next微内核特性概述鸿蒙Next的微内核架构将核心功能模块化，仅保留进程管理、内存管理和通信机制等基础功能在内核中，文件系统、网络协议等都作为独立模块在用户空间运行。这种架构使内核精简、稳定且安全，模块间低耦合也让系统可扩展性和维护性更强，能根据不同
  • 【MySQL】入门篇—MySQL简介：MySQL的历史与发展 AI人H哥会Java MySQLsqlmysql数据库
    关系数据库管理系统（RDBMS）是最常用的数据库类型之一，其中MySQL是最流行的开源关系数据库之一。MySQL因其高性能、可靠性和灵活性而被广泛应用于各种场景，包括Web应用、企业级应用和数据仓库等。了解MySQL的历史与发展，不仅可以帮助我们更好地理解其功能和架构，还能为我们在实际应用中选择合适的数据库解决方案提供参考。MySQL的历史1.起源（1979年）MySQL的历史可以追溯到1979年
  • 设计一个流程来生成测试模型安全性的问题以及验证模型是否安全 MonkeyKing.sun 模型安全ollamallama3.3
    要使用Ollama运行llama3.3:70b模型，并设计一个流程来生成测试模型安全性的问题以及验证模型是否安全，可以按照以下步骤进行设计和实现。整个过程包括环境配置、设计安全测试提示词、执行测试以及分析结果。以下是详细的步骤和指导：1.环境配置1.1安装Ollama首先，确保你的系统上已经安装了Ollama。如果尚未安装，可以按照以下步骤进行安装：下载Ollama：访问Ollama官网下载适用于
  • 一文搞懂架构设计的衡量标准：功能性、可用性、性能、可扩展性、安全性、协作效率、复杂度、成本效益 java
    大家好，我是汤师爷~架构设计的首要目标是服务于业务需求。因此，我们不应该盲目追求所谓的"最厉害的"架构，而应该致力于寻找最适合当前业务环境和未来发展需求的架构方案。衡量架构的合理性是一个复杂的过程，需要从多个角度进行全面评估。主要可以从以下视角进行分析：功能需求视角：评估架构是否有效支撑当前业务需求，并具有充分的灵活性以适应未来业务发展。非功能需求视角：评估系统的可用性、性能、可扩展性和安全性等关
  • Electron 开发者的 Tauri 2.0 实战指南：窗口管理与系统集成
    作为Electron开发者，我们已经习惯了使用BrowserWindow来管理窗口，以及通过各种内置模块来实现系统集成。在Tauri2.0中，这些功能虽然概念类似，但实现方式有所不同。本文将帮助你快速掌握Tauri的窗口管理和系统集成功能。窗口管理基础窗口操作Electron方式//main.jsconst{BrowserWindow}=require('electron')//创建窗口const
  • 大数据学习记录，Java基础（3） 灵敏的迅捷蟹 大数据学习java
    面向对象面向对象的特征：封装随着系统越来越复杂，类会越来越多，那么类之间的访问边界必须把握好，面向对象的开发原则要遵循“高内聚、低耦合”，而“高内聚，低耦合”的体现之一：高内聚：类的内部数据操作细节自己完成，不允许外部干涉；低耦合：仅暴露少量的方法给外部使用，尽量方便外部调用封装可以认为是一个保护屏障，防止该类的代码和数据被其他类随意访问，加强了代码的安全性。隐藏对象内部的复杂性，只对外公开简单和
  • 什么是IDE,新手如何选择IDE? dami_king 随笔ide
    IDE是IntegratedDevelopmentEnvironment（集成开发环境）的缩写，它是一种软件应用程序，为程序员提供了一站式的开发环境，整合了多种工具和服务，以便高效地创建、修改、编译、调试和运行软件程序。IDE集成了文本编辑器、编译器/解释器、调试器、版本控制系统以及可能还包括图形用户界面设计工具、数据库访问客户端等多种工具。对于新手来说，选择一个友好易用且功能强大的IDE很重要，
  • 配电系统中DTU与FTU的区别 贾贾乾杯 网络信息与通信自动化能源制造智能硬件经验分享
    在配电系统中，DTU（DataTransferUnit，数据传输单元）与FTU（FeederTerminalUnit，馈线终端单元）是两种重要的远程终端设备，它们在功能和应用场景上存在显著的区别。一、功能差异DTU：主要用于配电系统的数据传输。可以将串口数据转换为IP数据或将IP数据转换为串口数据，并通过无线通信网络（如GPRS、3G、4G、NB-IoT等）进行传送。支持自动心跳、保持永久在线，提
  • 6. NLP自然语言处理（Natural Language Processing） 啊波次得饿佛哥 AI人工智能自然语言处理人工智能
    自然语言是指人类日常使用的语言，如中文、英语、法语等。自然语言处理是人工智能（AI）领域中的一个重要分支，它结合了计算机科学、语言学和统计学的方法，通过算法对文本和语音进行分析，使计算机能够理解、解释和生成自然语言。随着深度学习技术的发展，NLP在文本分类、机器翻译、情感分析、对话系统等任务中取得了显著进展，推动了人工智能技术在多个领域的广泛应用。自然语言处理的核心任务涉及如何使计算机理解和处理语
  • 人工智能在医疗领域的应用 人工智能
    人工智能在医疗领域的应用前景广阔。医疗机器人是其中之一，如智能假肢、外骨骼等可修复受损身体，IBM的达・芬奇手术系统等则能承担手术或医疗保健功能.智能药物研发借助深度学习技术，可快速准确挖掘筛选化合物或生物，缩短新药研发周期、降低成本、提高成功率，在心血管药、抗肿瘤药等研发中已取得突破.智能诊疗让计算机学习专家医疗知识，模拟思维和诊断推理，给出可靠诊断与治疗方案.智能影像识别可对医学影像进行图像识
  • 想要冲击腾讯的朋友不要错过 go后端
    今天要和大家分享的是我们训练营内部整理的腾讯校招的二面面经，之前发过一面的面经，也想学习一下的朋友可以点击这里。本次的面试重点为计算机网络、操作系统、数据结构、中间件及缓存等方面，同样，我已经把所有的问题和答案都整理好了：堆和栈有什么区别答案：堆和栈在多个方面存在区别。内存分配方式：栈由程序自动创建和释放，用于存储函数调用时的临时变量、函数的返回地址等；堆则由程序员手动申请和释放，通常用于存储程序
  • HTTP 入门：认识网络通信基础 计算机毕设定制辅导-无忧学长 #HTTPhttp网络协议网络
    一、引言：HTTP在网络世界的基石地位在当今数字化的时代，网络通信如同空气一般无处不在，而HTTP协议则是网络世界中最为重要的基石之一。无论是浏览网页、使用手机APP，还是进行各种网络数据交互，HTTP都在背后默默地发挥着作用，它承载着我们日常的网页浏览、数据传输和信息交流，让不同系统、不同语言编写的程序能够实现高效的网络通信，是互联网应用得以广泛普及的核心支撑。你是否好奇，当你在浏览器地址栏输入
  • nfs-ganesha对比NFS最佳实践 磐基Stack专业服务团队 NFS云原生
    概述随着业务规模的不断扩大和数据访问需求的日益增长，现有的文件共享服务面临着诸多挑战，如性能瓶颈、扩展性不足等问题。为了有效解决这些问题，我们考虑引入NFS-Ganesha作为新一代的高性能网络文件系统解决方案。NFS-Ganesha是一款基于用户空间的高性能网络文件系统服务器，它支持多种存储后端，并且能够提供高吞吐量、低延迟的数据访问能力。通过采用NFS-Ganesha，不仅可以显著提升文件系统
  • 如何解决缓存击穿、缓存穿透、缓存雪崩？ redis布隆过滤器
    缓存击穿、缓存穿透和缓存雪崩是分布式系统中常见的缓存问题，每个问题的原因和解决方法有所不同。下面是它们的定义以及如何解决这些问题：1.缓存击穿(CacheBreakdown)定义：缓存击穿是指缓存中某个热点数据失效，并且该数据在短时间内频繁被访问，导致大量请求直接访问数据库，造成数据库压力剧增，甚至崩溃。解决方案：设置热点数据永不过期：对于一些热点数据，可以设置其缓存永不过期，但需要定期更新数据，
  • Java进阶-在Ubuntu上部署SpringBoot应用
    随着云计算和容器化技术的普及，Linux服务器已成为部署Web应用程序的主流平台之一。Java作为一种跨平台的编程语言，具有广泛的应用场景。本文将详细介绍如何在Ubuntu服务器上部署Java应用，包括环境准备、应用发布、配置反向代理（Nginx）、设置系统服务以及日志管理等步骤。一、部署准备在开始之前，请确保你具备以下条件：一台运行Ubuntu（如Ubuntu20.04或22.04）的服务器，具
  • Vue 开发者的 React 实战指南：性能优化篇
    作为Vue开发者，在迁移到React开发时，性能优化的思路和方法会有所不同。本文将从Vue开发者熟悉的角度出发，详细介绍React中的性能优化策略。渲染优化对比Vue的响应式系统Vue通过响应式系统自动追踪依赖，只有在数据真正变化时才会触发重渲染{{title}}{{description}}点击次数：{{count}}+1exportdefault{data(){return{title:'标题
  • Debian没有reboot命令记录 FJSAY debian服务器linux
    在安装服务并按照官方推荐的方式安装Debian系统时，发现无法使用reboot命令。经过一番排查，发现问题的根源在于系统环境变量中未包含常用命令所在的路径。具体来说，/sbin/和/usr/sbin/目录通常包含系统管理命令，而这些路径默认可能未包含在普通用户的环境变量中。解决方法：要解决这个问题，可以通过修改当前的PATH环境变量，将缺失的路径添加到其中。执行以下命令：exportPATH=$P
  • 【Docker-2】在 Debian 上安装 Docker 引擎 小白--AI docker容器dockerdebianeureka
    在Debian上安装Docker引擎要开始在Debian上使用Docker引擎，请确保满足先决条件，然后按照安装步骤操作。先决条件操作系统要求要安装DockerEngine，您需要以下Debian之一的64位版本版本：DebianBookworm12（稳定版）DebianBullseye11（旧稳定版）Debian的Docker引擎兼容x86_64（或amd64）、armhf、arm64、和PPC
  • CRM系统在客户精准培育中的应用与实践 程序员算法机器学习
    在竞争激烈的市场环境中，企业不仅要获取新客户，更要通过精准培育提升客户的忠诚度和价值。客户关系管理（CRM）系统为企业提供了强大的工具，帮助企业在客户生命周期的各个阶段进行精准培育，从而提高客户满意度和忠诚度，实现长期的业务增长。本文将探讨如何利用CRM系统进行精准培育客户，包括策略制定、实施步骤和实际案例分析。精准培育客户的重要性精准培育客户是指通过深入了解客户的需求、行为和偏好，制定个性化的培
  • 数据分析系统：驱动企业决策的智能引擎 qingyunliushuiyu 数据分析数据分析数据分析系统数据分析系统体系数据分析体系数据仓库ETL
    数据作为当今企业重要的资产，已经受到企业的重视。随着企业的不断发展壮大，传统的数据分析已经跟不上现代商业环境。所以高效的数据分析系统是企业在竞争环境当中脱颖而出的重要屏障。数聚就从多年的实施角度来为企业畅想构建数据分析系统应用，为企业发展壮大提供数据服务。一、数据分析系统的定义数据分析系统是指通过一系列工具和技术，对收集到的数据进行整理、分析和解释，以支持决策的过程。这些系统不仅能够处理大量的结构
  • ComfyUI - 基于节点流程的 AI 绘图操作界面 小众AI AI开源人工智能AI编程
    为Windows和macOS设计的桌面客户端，它提供了一键安装的便利性，并拥有全新的用户界面。用户可以通过加入等待名单来获得早期访问权限。这款软件的主要优点在于它的易用性和现代化的界面设计，旨在提高用户的工作效率。ComfyUI不仅是一个用户界面（UI），还是一个具有强大功能和高度模块化设计的系统，其GitHub页面描述它为“最强大且模块化的稳定扩散GUI、API和后端，带有图形/节点界面”。Co
  • 安卓系统：赋能多元设备，构建智能生态 android
    安卓系统早已突破手机的边界，如同一个万能引擎，赋能多元智能设备，构建起庞大而繁荣的智能生态。在智能手机领域，安卓占据了全球大半壁江山。它为手机带来了绚丽多彩的触摸屏交互体验，从滑动解锁、多点触控到手势导航，操作愈发便捷流畅。凭借强大的图形处理能力，手机游戏画面日益逼真，《王者荣耀》《和平精英》等热门手游在安卓设备上运行得酣畅淋漓，为玩家带来沉浸式娱乐体验。同时，基于安卓的智能语音助手不断进化，如谷
  • 安卓系统：开启移动智能时代的领航者 android
    在当今数字化浪潮汹涌澎湃的时代，安卓系统宛如一颗璀璨的明星，照亮了移动智能设备的发展之路，成为全球数十亿用户生活中不可或缺的一部分。回溯安卓系统的起源，它诞生于2003年，由安迪・鲁宾等人创立，最初旨在打造一个开放、灵活的操作系统，为移动设备赋予更多可能性。2008年，首款搭载安卓系统的手机T-MobileG1问世，尽管与如今的智能手机相比略显简陋，但却开启了一个全新的时代。此后，安卓系统凭借其开
  • 8 条程序员应知的软件开发法则，最后一条扎心了
    林迪效应（LindyEffect）存在时间较长的技术、编程语言、框架或工具更可能在未来持续存在和保持相关性。康威定律（Conway'sLaw）软件架构会反映设计它的组织的沟通结构。盖尔定律（Gall'sLaw）能运行的复杂系统是从能运行的简单系统演化而来的。布鲁克斯定律（Brooks’sLaw）向延期项目增加人手只会让项目更晚完成。墨菲定律（Murphy'sLaw）凡是可能出错的事情，都会出错。古
  • 免费通配符SSL证书获取教程 ssl证书
    通配符有着诸多实用场景，而获取免费通配符更是许多人关注的焦点。无论是用于软件开发中的代码匹配，还是网络配置中的域名筛选等领域，了解其获取流程至关重要。一、确定适用平台与场景首先，要明确你需要通配符的具体平台。不同的操作系统、软件工具对通配符的格式和获取方式有差异。如JoySSL，他们可以提供支持多种类型的SSL证书。二、注册相关账号登录JoySSL官网，注册一个新的账号，填写注册码230923可获
  • html页面js获取参数值 0624chenhong html
    1.js获取参数值js function GetQueryString(name) {      var reg = new RegExp("(^|&)"+ name +"=([^&]*)(&|$)");      var r = windo
  • MongoDB 在多线程高并发下的问题 BigCat2013 mongodbDB高并发重复数据
    最近项目用到 MongoDB , 主要是一些读取数据及改状态位的操作. 因为是结合了最近流行的 Storm进行大数据的分析处理，并将分析结果插入Vertica数据库，所以在多线程高并发的情境下, 会发现 Vertica 数据库中有部分重复的数据. 这到底是什么原因导致的呢？笔者开始也是一筹莫 展，重复去看 MongoDB 的 API , 终于有了新发现 ： com.mongodb.DB 这个类有
  • c++ 用类模版实现链表(c++语言程序设计第四版示例代码) CrazyMizzz 数据结构C++
    #include<iostream> #include<cassert> using namespace std; template<class T> class Node { private: Node<T> * next; public: T data;
  • 最近情况 麦田的设计者 感慨考试生活
       在五月黄梅天的岁月里，一年两次的软考又要开始了。到目前为止，我已经考了多达三次的软考，最后的结果就是通过了初级考试（程序员）。人啊，就是不满足，考了初级就希望考中级，于是，这学期我就报考了中级，明天就要考试。感觉机会不大，期待奇迹发生吧。这个学期忙于练车，写项目，反正最后是一团糟。后天还要考试科目二。这个星期真的是很艰难的一周，希望能快点度过。   
  • linux系统中用pkill踢出在线登录用户 被触发 linux
    由于linux服务器允许多用户登录，公司很多人知道密码，工作造成一定的障碍所以需要有时踢出指定的用户 1/#who   查出当前有那些终端登录（用 w 命令更详细） # who root     pts/0        2010-10-28 09:36 (192
  • 仿QQ聊天第二版 肆无忌惮_ qq
    在第一版之上的改进内容:  第一版链接: http://479001499.iteye.com/admin/blogs/2100893   用map存起来号码对应的聊天窗口对象,解决私聊的时候所有消息发到一个窗口的问题. 增加ViewInfo类,这个是信息预览的窗口,如果是自己的信息,则可以进行编辑.   信息修改后上传至服务器再告诉所有用户,自己的窗口
  • java读取配置文件 知了ing
    1，java读取.properties配置文件 InputStream in; try { in = test.class.getClassLoader().getResourceAsStream("config/ipnetOracle.properties");//配置文件的路径 Properties p = new Properties()
  • __attribute__ 你知多少？ 矮蛋蛋 C++gcc
    原文地址: http://www.cnblogs.com/astwish/p/3460618.html GNU C 的一大特色就是__attribute__ 机制。__attribute__ 可以设置函数属性（Function Attribute ）、变量属性（Variable Attribute ）和类型属性（Type Attribute ）。 __attribute__ 书写特征是：
  • jsoup使用笔记 alleni123 java爬虫JSoup
    <dependency> <groupId>org.jsoup</groupId> <artifactId>jsoup</artifactId> <version>1.7.3</version> </dependency> 2014/08/28 今天遇到这种形式，
  • JAVA中的集合 Collectio 和Map的简单使用及方法 百合不是茶 listmapset
             List ,set ,map的使用方法和区别 java容器类类库的用途是保存对象，并将其分为两个概念：     Collection集合：一个独立的序列，这些序列都服从一条或多条规则;List必须按顺序保存元素  ，set不能重复元素；Queue按照排队规则来确定对象产生的顺序（通常与他们被插入的
  • 杀LINUX的JOB进程 bijian1013 linuxunix
    今天发现数据库一个JOB一直在执行，都执行了好几个小时还在执行，所以想办法给删除掉   系统环境：    ORACLE 10G    Linux操作系统   操作步骤如下： 第一步.查询出来那个job在运行，找个对应的SID字段 select * from dba_jobs_running--找到job对应的sid &n
  • Spring AOP详解 bijian1013 javaspringAOP
            最近项目中遇到了以下几点需求，仔细思考之后，觉得采用AOP来解决。一方面是为了以更加灵活的方式来解决问题，另一方面是借此机会深入学习Spring AOP相关的内容。例如，以下需求不用AOP肯定也能解决，至于是否牵强附会，仁者见仁智者见智。 1.对部分函数的调用进行日志记录，用于观察特定问题在运行过程中的函数调用
  • [Gson六]Gson类型适配器(TypeAdapter) bit1129 Adapter
    TypeAdapter的使用动机  Gson在序列化和反序列化时，默认情况下，是按照POJO类的字段属性名和JSON串键进行一一映射匹配，然后把JSON串的键对应的值转换成POJO相同字段对应的值，反之亦然，在这个过程中有一个JSON串Key对应的Value和对象之间如何转换(序列化/反序列化)的问题。   以Date为例，在序列化和反序列化时，Gson默认使用java.
  • 【spark八十七】给定Driver Program， 如何判断哪些代码在Driver运行，哪些代码在Worker上执行 bit1129 driver
    Driver Program是用户编写的提交给Spark集群执行的application，它包含两部分 作为驱动： Driver与Master、Worker协作完成application进程的启动、DAG划分、计算任务封装、计算任务分发到各个计算节点(Worker)、计算资源的分配等。 计算逻辑本身，当计算任务在Worker执行时，执行计算逻辑完成application的计算任务
  • nginx 经验总结 ronin47 nginx 总结
    　　　深感nginx的强大，只学了皮毛，把学下的记录。 　　　获取Header 信息，一般是以$http_XX（ＸＸ是小写）            获取body,通过接口，再展开，根据Ｋ取Ｖ 　　　获取uri,以$arg_XX      &n
  • 轩辕互动-1.求三个整数中第二大的数2.整型数组的平衡点 bylijinnan 数组
    import java.util.ArrayList; import java.util.Arrays; import java.util.List; public class ExoWeb { public static void main(String[] args) { ExoWeb ew=new ExoWeb(); System.out.pri
  • Netty源码学习-Java-NIO-Reactor bylijinnan java多线程netty
    Netty里面采用了NIO-based Reactor Pattern 了解这个模式对学习Netty非常有帮助 参考以下两篇文章： http://jeewanthad.blogspot.com/2013/02/reactor-pattern-explained-part-1.html http://gee.cs.oswego.edu/dl/cpjslides/nio.pdf
  • AOP通俗理解 cngolon springAOP
    1.我所知道的aop     初看aop,上来就是一大堆术语，而且还有个拉风的名字，面向切面编程，都说是OOP的一种有益补充等等。一下子让你不知所措，心想着：怪不得很多人都和 我说aop多难多难。当我看进去以后，我才发现：它就是一些java基础上的朴实无华的应用，包括ioc，包括许许多多这样的名词，都是万变不离其宗而 已。 2.为什么用aop&nb
  • cursor variable 实例 ctrain variable
    create or replace procedure proc_test01 as type emp_row is record( empno emp.empno%type, ename emp.ename%type, job emp.job%type, mgr emp.mgr%type, hiberdate emp.hiredate%type, sal emp.sal%t
  • shell报bash: service: command not found解决方法 daizj linuxshellservicejps
    今天在执行一个脚本时，本来是想在脚本中启动hdfs和hive等程序，可以在执行到service hive-server start等启动服务的命令时会报错，最终解决方法记录一下：   脚本报错如下： ./olap_quick_intall.sh: line 57: service: command not found ./olap_quick_intall.sh: line 59
  • 40个迹象表明你还是PHP菜鸟 dcj3sjt126com 设计模式PHP正则表达式oop
    你是PHP菜鸟，如果你：1. 不会利用如phpDoc 这样的工具来恰当地注释你的代码2. 对优秀的集成开发环境如Zend Studio 或Eclipse PDT 视而不见3. 从未用过任何形式的版本控制系统，如Subclipse4. 不采用某种编码与命名标准 ，以及通用约定，不能在项目开发周期里贯彻落实5. 不使用统一开发方式6. 不转换（或）也不验证某些输入或SQL查询串（译注：参考PHP相关函
  • Android逐帧动画的实现 dcj3sjt126com android
    一、代码实现： private ImageView iv; private AnimationDrawable ad; @Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInstanceState); setContentView(R.layout
  • java远程调用linux的命令或者脚本 eksliang linuxganymed-ssh2
    转载请出自出处： http://eksliang.iteye.com/blog/2105862        Java通过SSH2协议执行远程Shell脚本(ganymed-ssh2-build210.jar)   使用步骤如下： 1.导包 官网下载: http://www.ganymed.ethz.ch/ssh2/ ma
  • adb端口被占用问题 gqdy365 adb
    最近重新安装的电脑，配置了新环境，老是出现： adb server is out of date. killing... ADB server didn't ACK * failed to start daemon * 百度了一下，说是端口被占用，我开个eclipse，然后打开cmd，就提示这个，很烦人。 一个比较彻底的解决办法就是修改
  • ASP.NET使用FileUpload上传文件 hvt .netC#hovertreeasp.netwebform
    前台代码： <asp:FileUpload ID="fuKeleyi" runat="server" /> <asp:Button ID="BtnUp" runat="server" onclick="BtnUp_Click" Text="上 传" />
  • 代码之谜（四）- 浮点数（从惊讶到思考） justjavac 浮点数精度代码之谜IEEE
    在『代码之谜』系列的前几篇文章中，很多次出现了浮点数。 浮点数在很多编程语言中被称为简单数据类型，其实，浮点数比起那些复杂数据类型（比如字符串）来说， 一点都不简单。 单单是说明 IEEE浮点数 就可以写一本书了，我将用几篇博文来简单的说说我所理解的浮点数，算是抛砖引玉吧。 一次面试 记得多年前我招聘 Java 程序员时的一次关于浮点数、二分法、编码的面试， 多年以后，他已经称为了一名很出色的
  • 数据结构随记_1 lx.asymmetric 数据结构笔记
    第一章   1.数据结构包括数据的 逻辑结构、数据的物理/存储结构和数据的逻辑关系这三个方面的内容。 2.数据的存储结构可用四种基本的存储方法表示，它们分别是 顺序存储、链式存储 、索引存储 和 散列存储。 3.数据运算最常用的有五种，分别是  查找/检索、排序、插入、删除、修改。 4.算法主要有以下五个特性：  输入、输出、可行性、确定性和有穷性。 5.算法分析的
  • linux的会话和进程组 网络接口 linux
    会话： 一个或多个进程组。起于用户登录，终止于用户退出。此期间所有进程都属于这个会话期。会话首进程：调用setsid创建会话的进程1.规定组长进程不能调用setsid，因为调用setsid后，调用进程会成为新的进程组的组长进程.如何保证？ 先调用fork，然后终止父进程，此时由于子进程的进程组ID为父进程的进程组ID，而子进程的ID是重新分配的，所以保证子进程不会是进程组长，从而子进程可以调用se
  • 二维数组 元素的连续求解 1140566087 二维数组ACM
    import java.util.HashMap; public class Title { public static void main(String[] args){ f(); } // 二位数组的应用 //12、二维数组中，哪一行或哪一列的连续存放的0的个数最多，是几个0。注意，是“连续”。 public static void f(){
  • 也谈什么时候Java比C++快 windshome javaC++
      刚打开iteye就看到这个标题“Java什么时候比C++快”，觉得很好笑。   你要比，就比同等水平的基础上的相比，笨蛋写得C代码和C++代码，去和高手写的Java代码比效率，有什么意义呢？   我是写密码算法的，深刻知道算法C和C++实现和Java实现之间的效率差，甚至也比对过C代码和汇编代码的效率差，计算机是个死的东西，再怎么优化，Java也就是和C
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他