cloudeagle_bupt
cloudeagle_bupt

Giraph集群测试Pagerank

[liuqiang2@mu02 bin]$  giraph ../giraph-core-1.1.0.jar  org.apache.giraph.benchmark.PageRankComputation -vif  org.apache.giraph.io.formats.IntFloatNullTextInputFormat -vip /test/youTube.txt  -vof org.apache.giraph.io.formats.IdWithValueTextOutputFormat -op /output  -w 15
 
 
16/03/18 17:32:05 INFO utils.ConfigurationUtils: No edge input format specified. Ensure your InputFormat does not require one.
16/03/18 17:32:05 INFO utils.ConfigurationUtils: No edge output format specified. Ensure your OutputFormat does not require one.
16/03/18 17:32:05 INFO job.GiraphJob: run: Since checkpointing is disabled (default), do not allow any task retries (setting mapred.map.max.attempts = 0, old value = 4)
16/03/18 17:32:13 INFO job.GiraphJob: Tracking URL: http://mu02:50030/jobdetails.jsp?jobid=job_201603181726_0002
16/03/18 17:32:13 INFO job.GiraphJob: Waiting for resources... Job will start only when it gets all 16 mappers
16/03/18 17:33:28 INFO job.HaltApplicationUtils$DefaultHaltInstructionsWriter: writeHaltInstructions: To halt after next superstep execute: 'bin/halt-application --zkServer c02b10:22181 --zkNode /_hadoopBsp/job_201603181726_0002/_haltComputation'
16/03/18 17:33:28 INFO mapred.JobClient: Running job: job_201603181726_0002
16/03/18 17:33:29 INFO mapred.JobClient:  map 100% reduce 0%
16/03/18 17:33:36 INFO mapred.JobClient: Job complete: job_201603181726_0002
16/03/18 17:33:36 INFO mapred.JobClient: Counters: 68
16/03/18 17:33:36 INFO mapred.JobClient:   Zookeeper halt node
16/03/18 17:33:36 INFO mapred.JobClient:     /_hadoopBsp/job_201603181726_0002/_haltComputation=0
16/03/18 17:33:36 INFO mapred.JobClient:   Zookeeper base path
16/03/18 17:33:36 INFO mapred.JobClient:     /_hadoopBsp/job_201603181726_0002=0
16/03/18 17:33:36 INFO mapred.JobClient:   Job Counters 
16/03/18 17:33:36 INFO mapred.JobClient:     SLOTS_MILLIS_MAPS=770552
16/03/18 17:33:36 INFO mapred.JobClient:     Total time spent by all reduces waiting after reserving slots (ms)=0
16/03/18 17:33:36 INFO mapred.JobClient:     Total time spent by all maps waiting after reserving slots (ms)=0
16/03/18 17:33:36 INFO mapred.JobClient:     Launched map tasks=16
16/03/18 17:33:36 INFO mapred.JobClient:     SLOTS_MILLIS_REDUCES=0
16/03/18 17:33:36 INFO mapred.JobClient:   Giraph Timers
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 27 PageRankComputation (ms)=1929
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 3 PageRankComputation (ms)=1732
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 1 PageRankComputation (ms)=445
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 11 PageRankComputation (ms)=210
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 23 PageRankComputation (ms)=167
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 20 PageRankComputation (ms)=2012
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 8 PageRankComputation (ms)=941
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 13 PageRankComputation (ms)=1936
16/03/18 17:33:36 INFO mapred.JobClient:     Shutdown (ms)=9213
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 2 PageRankComputation (ms)=344
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 25 PageRankComputation (ms)=2403
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 29 PageRankComputation (ms)=180
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 12 PageRankComputation (ms)=1639
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 15 PageRankComputation (ms)=1637
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 26 PageRankComputation (ms)=1597
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 18 PageRankComputation (ms)=172
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 9 PageRankComputation (ms)=1662
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 10 PageRankComputation (ms)=245
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 14 PageRankComputation (ms)=186
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 0 PageRankComputation (ms)=473
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 24 PageRankComputation (ms)=1628
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 16 PageRankComputation (ms)=1659
16/03/18 17:33:36 INFO mapred.JobClient:     Input superstep (ms)=3219
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 4 PageRankComputation (ms)=235
16/03/18 17:33:36 INFO mapred.JobClient:     Initialize (ms)=13423
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 21 PageRankComputation (ms)=171
16/03/18 17:33:36 INFO mapred.JobClient:     Setup (ms)=146
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 5 PageRankComputation (ms)=1717
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 30 PageRankComputation (ms)=132
16/03/18 17:33:36 INFO mapred.JobClient:     Total (ms)=42824
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 7 PageRankComputation (ms)=219
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 28 PageRankComputation (ms)=1664
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 17 PageRankComputation (ms)=155
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 22 PageRankComputation (ms)=1617
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 19 PageRankComputation (ms)=874
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep 6 PageRankComputation (ms)=256
16/03/18 17:33:36 INFO mapred.JobClient:   Zookeeper server:port
16/03/18 17:33:36 INFO mapred.JobClient:     c02b10:22181=0
16/03/18 17:33:36 INFO mapred.JobClient:   Giraph Stats
16/03/18 17:33:36 INFO mapred.JobClient:     Aggregate edges=2987624
16/03/18 17:33:36 INFO mapred.JobClient:     Sent message bytes=0
16/03/18 17:33:36 INFO mapred.JobClient:     Superstep=31
16/03/18 17:33:36 INFO mapred.JobClient:     Last checkpointed superstep=0
16/03/18 17:33:36 INFO mapred.JobClient:     Current workers=15
16/03/18 17:33:36 INFO mapred.JobClient:     Aggregate sent messages=89628720
16/03/18 17:33:36 INFO mapred.JobClient:     Current master task partition=0
16/03/18 17:33:36 INFO mapred.JobClient:     Sent messages=0
16/03/18 17:33:36 INFO mapred.JobClient:     Aggregate finished vertices=1134890
16/03/18 17:33:36 INFO mapred.JobClient:     Aggregate sent message message bytes=718049010
16/03/18 17:33:36 INFO mapred.JobClient:     Aggregate vertices=1134890
16/03/18 17:33:36 INFO mapred.JobClient:   File Output Format Counters 
16/03/18 17:33:36 INFO mapred.JobClient:     Bytes Written=0
16/03/18 17:33:36 INFO mapred.JobClient:   FileSystemCounters
16/03/18 17:33:36 INFO mapred.JobClient:     HDFS_BYTES_READ=29585033
16/03/18 17:33:36 INFO mapred.JobClient:     FILE_BYTES_WRITTEN=2103073
16/03/18 17:33:36 INFO mapred.JobClient:     HDFS_BYTES_WRITTEN=22520835
16/03/18 17:33:36 INFO mapred.JobClient:   File Input Format Counters 
16/03/18 17:33:36 INFO mapred.JobClient:     Bytes Read=0
16/03/18 17:33:36 INFO mapred.JobClient:   Map-Reduce Framework
16/03/18 17:33:36 INFO mapred.JobClient:     Map input records=16
16/03/18 17:33:36 INFO mapred.JobClient:     Physical memory (bytes) snapshot=4153704448
16/03/18 17:33:36 INFO mapred.JobClient:     Spilled Records=0
16/03/18 17:33:36 INFO mapred.JobClient:     CPU time spent (ms)=316270
16/03/18 17:33:36 INFO mapred.JobClient:     Total committed heap usage (bytes)=2950692864
16/03/18 17:33:36 INFO mapred.JobClient:     Virtual memory (bytes) snapshot=13605724160
16/03/18 17:33:36 INFO mapred.JobClient:     Map output records=0
16/03/18 17:33:36 INFO mapred.JobClient:     SPLIT_RAW_BYTES=704
 
 
 


                            

                        

                    

                    
                    

                    
                    
                    

                

                

                    
                

            

        

    

    

        
你可能感兴趣的:(Giraph集群测试Pagerank)

        

            

                
    
                    
  • python 加密与解密
                        mysouil
算法python算法
                        
    python加密与解密具体介绍python的加密与解密算法例如：RSA算法文章目录python加密与解密前言一、对称加密1、用途和特点：2、AES加密实现2.1加密2.2解密2.3测试二、非对称加密1、用途和特点：2、RSA加密实现2.1密钥生成2.2加密2.3解密2.4输入输出到文件2.5测试三、摘要算法（哈希算法）1、用途和特点：2、实现2.1MD5加密2.2SHA1加密2.3SHA224加密
    
                    
    • 
                    
  • 产品团队构建方案-团队建设
                        人生淡然
团队开发
                        
    团队目标融合硬件行业链优势资源，规划公司智能硬件及AI算力产品方案团队定位产品孵化中心公司智囊团团队公约科学规划精准描述高效协作规范管理闭环管理持续改进团队管理范围商业价值、行业分析和行业融合产品需求调研和分析产品方案设计产品生命周期和版本管理项目进度管理产品设计开发研发打样对接客户联调客户联调开发客户技术支持和验证测试支持售前方案支持产品价值产品方案供期计划赋能渠道商产品价值产品方案供期计划团队
    
                    
    • 
                    
  • dubbo 负载均衡策略和集群容错策略都有哪些？动态代理策略呢？
                        码农小旋风
后端
                        
    面试题dubbo负载均衡策略和集群容错策略都有哪些？动态代理策略呢？面试官心理分析继续深问吧，这些都是用dubbo必须知道的一些东西，你得知道基本原理，知道序列化是什么协议，还得知道具体用dubbo的时候，如何负载均衡，如何高可用，如何动态代理。说白了，就是看你对dubbo熟悉不熟悉：dubbo工作原理：服务注册、注册中心、消费者、代理通信、负载均衡；网络通信、序列化：dubbo协议、长连接、NI
    
                    
    • 
                    
  • Neo4j 单机和集群部署教程
                        闲人编程
大数据集群部署教程neo4j大数据集群单机部署图形数据库ACID
                        
    目录Neo4j单机和集群部署教程第一部分：Neo4j概述1.1Neo4j的特点1.2Neo4j的应用场景第二部分：Neo4j单机部署教程2.1安装Neo4j2.1.1下载和安装Neo4j2.1.2启动Neo4j2.1.3配置Neo4j2.2单机部署案例代码实现（Python）2.2.1安装Neo4jPython驱动2.2.2Python示例代码2.3常见问题及解决方法2.3.1Neo4j无法启动2
    
                    
    • 
                    
  • 【51单片机实验笔记】中断篇（二） 定时器与中断
                        悬铃木下的青春
51单片机51单片机笔记嵌入式硬件
                        
    目录前言晶振概述时序概述定时器概述工作方式寄存器（TMOD）定时器配置流程初值的简便算法微秒级定时中断的注意事项T2定时器概述定时器2控制寄存器（T2CON）定时器2模式寄存器（T2MOD）定时器2配置软件实现1.定时器测试延时精度2.单个独立按键的定时器消抖3.按键事件封装（短按、长按、双击、组合键）4.数码管的定时器刷新5.矩阵按键的定时器扫描检测遇到的问题总结前言你是否好奇过电子时钟的实现机
    
                    
    • 
                    
  • pytorch基于GloVe实现的词嵌入
                        纠结哥_Shrek
pytorch人工智能python
                        
    PyTorch实现GloVe（GlobalVectorsforWordRepresentation）的完整代码，使用中文语料进行训练，包括共现矩阵构建、模型定义、训练和测试。1.GloVe介绍基于词的共现信息（不像Word2Vec使用滑动窗口预测）适合较大规模的数据（比Word2Vec更稳定）学习出的词向量能捕捉语义信息（如类比关系）importtorchimporttorch.nnasnnimp
    
                    
    • 
                    
  • Kubernetes 中 LimitRange 与 ResourceQuota 的深度剖析
                        大大宝的博客
k8skubernetes贪心算法容器
                        
    摘要：Kubernetes（简称k8s）作为容器编排领域的事实标准，提供了丰富的资源管理机制来确保集群的高效、稳定运行。LimitRange和ResourceQuota是其中两个重要的资源管理工具，它们在不同层面发挥着关键作用。本文深入探讨了LimitRange和ResourceQuota的用途、工作原理，并详细分析了它们之间的差异，旨在帮助读者全面理解和有效运用这两个工具，提升Kubernete
    
                    
    • 
                    
  • SDK级的kubectl，client-go的深度封装：kom使用指南
                        大大宝的博客
k8sgolang开发语言后端云原生kubernetes
                        
    目录什么是kom特点示例程序安装使用示例1.多集群管理注册多集群显示已注册集群选择默认集群选择指定集群2.内置资源对象的增删改查以及Watch示例创建某个资源Get查询某个资源List查询资源列表通过Label查询资源列表通过多个Label查询资源列表通过Field查询资源列表更新资源内容PATCH更新资源删除资源通用类型资源的获取（适用于k8s内置类型以及CRD）Watch资源变更3.YAML创
    
                    
    • 
                    
  • 智能化Kubernetes管理：AI与ChatGPT提升运维效率的创新实践
                        大大宝的博客
k8skubernetes人工智能chatgpt
                        
    摘要随着云计算技术的飞速发展，Kubernetes（K8s）已成为企业进行容器化应用管理的标准平台。然而，Kubernetes集群的管理在复杂度、规模和资源优化等方面仍然面临巨大挑战。传统的Kubernetes运维方式往往依赖手动操作，导致效率低下，且容易产生人为错误。随着人工智能（AI）技术的成熟，特别是基于自然语言处理（NLP）的智能体如ChatGPT的出现，AI智能体能够在Kubernete
    
                    
    • 
                    
  • Cypress测试框架详解-----轻松实现端到端自动化测试
                        王大傻0928
自动化测试自动化javascriptnode.js
                        
    Cypress是一个功能强大、易于使用的自动化测试工具，适用于现代Web应用的端到端测试。它的自动化处理、实时反馈、调试功能和易于集成的特性，使得它成为现在测试人员的热门测试框架选择。什么是Cypress框架？Cypress是一款开源的JavaScript自动化测试框架，是基于NodeJS的现代自动化工具，专为端到端测试设计，用于简化Web应用的测试自动化。支持使用JavaScript或TypeS
    
                    
    • 
                    
  • JMeter(九)：Java单元测试或二次开发
                        职说测试
JMeter性能测试全攻略java编程二次开发jmeter
                        
    先说需求：写一个字节流输出服务，将定义的参数通过IO存入本地文件。知识点：熟悉java的IO工具类，及jmeter二次开发的源码jar包在工具中如何引用。1、打开eclipse，编写java代码，在创建好的maven工程添加ApacheJMeter_java、ApacheJMeter_core依赖包，或是java工程添加外部jar包，自己选择喜欢的方式开发。packagecom.selenium.
    
                    
    • 
                    
  • jmeter工具功能界面布局
                        一一一一一一一一一一
测试jmeter介绍
                        
    一、使用jmeter进行接口测试1.1问题：执行100次50个请求同时请求1.2使用jmeter的解决方案（1）添加【测试计划】（2）基于添加的测试计划添加【线程组】，循环次数设置为100次（3）在【取样器】中基于线程组添加HTTP请求（4）在【监听器】基于线程组添加【察看结果树】（5）在监听器基于线程组添加【聚合报告】二、TestPlan（测试计划）2.1独立运行每个线程组（1）进程：每个正在运
    
                    
    • 
                    
  • 性能测试后期的性能调优
                        Feng.Lee
漫谈测试性能优化测试工具可用性测试
                        
    目录性能调优的常规手段有如下几种。(1)空间换时间。(2)时间换空间。(3)分而治之。(4)异步处理。(5)并行。(6)离用户更近一点。(7)一切可扩展，业务模块化、服务化(无状态、幂等)、良好的水平扩展能力。下面将详细探讨一些关键的性能调优策略，并引用相关资料中的细节。设计优化算法优化代码优化JVM优化参数优化数据库优化高可用性，高可靠性，可扩展性及运维能力是高并发系统的设计要求（当然也要顾及成
    
                    
    • 
                    
  • ESP32-C3在MQTT访问时出现“Last error code reported from esp-tls: 0x8001”和问题的分析（2）
                        蓝天居士
ESP32-C3ESP32ESP-IDF
                        
    接前一篇文章：ESP32-C3在MQTT访问时出现“Lasterrorcodereportedfromesp-tls:0x8001”和问题的分析（1）上一回说明了笔者在调试测试MQTT的过程中遇到的另一个问题：“Lasterrorcodereportedfromesp-tls:0x8001”。结合log给出了初步分析：本回继续深入探查。上一回解析的log都出自于main.c中的MQTT事件回调函数
    
                    
    • 
                    
  • 一个用于测试的 HL7 Server
                        月巴月巴白勺合鸟月半
MicrosoftVisualStudio开发技术分享医疗行业开发技术分享服务器前端C#健康医疗
                        
    说明一个用于测试的HL7Server。在过NIST的认证时，需要演示检验数据通过HL7进行传输，所以写了这工具。HL7的消息解析和编码使用了NHapi。包含两个服务：ReceiveServiceSendService这2个服务都继承自BaseService publicclassBaseService  {    protectedManualResetEvent_ServiceExitEvent
    
                    
    • 
                    
  • 自动化测试-短信验证码处理
                        weixin_30719711
数据库测试c/c++
                        
    之前接触的的验证码都是图形验证码，可以借助图片识别来实现，不过识别率不太高后又研究绕过验证码实现登录。最近有遇到短信验证码的问题，网上看了有各种处理方法。1、cookie登录自己先尝试了，使用cookie登录的方法，具体详见代码1、获取cookie#FileName:VerifyCodeLogin.py#Author:Adil#DateTime:2018/4/913:09#SoftWare:PyC
    
                    
    • 
                    
  • 软件测试面试笔试题-选择题（物联网）
                        测试界媛姐
自动化测试软件测试面试软件测试面试职场和发展软件测试
                        
    1.在软件生命周期中，测试人员从那个阶段开始参与更有利于软件项目的成功()a)需求分析阶段b)设计阶段c)编码阶段d)系统测试阶段2.在Bugzilla缺陷跟踪系统中，下列选项中属于缺陷状态的是()(选两项)a)newb)fixedclaterd)verified3.在Bugzilla中，如果一个缺陷的处理状态被开发人员置为Wontfix，则表明()a)这个Bug中描述的不是问题d)这个Bug中描
    
                    
    • 
                    
  • [Linux]el8安全配置faillock：登录失败达阈值自动锁定账户配置
                        wingaso
运维经验总结linux安全运维ssh
                        
    前言本篇文章的配置仅使用于el8版本的Linux，目前已在centos8、BCLinux8上验证成功，其他版本系统是否可行还得考查。el8中管理用户登录失败锁定账户所用的模块是faillock.so，如果想要将配置应用与其他版本的Linux，建议确认Linux上是否存在faillock模块，并且在配置之前使用同版本的虚拟机进行配置测试，并在正式配置之前进行必要的备份操作。——这个配置的风险可能会远
    
                    
    • 
                    
  • KOA框架编程2-路由使用
                        独行侠_阿涛
前端0-1#KOA从0到1#node-excel从0到1
                        
    目录背景创建路由路由中间件注册测试背景上一篇文章已经完成了KOA骨架的搭建。这节课来讲解下如何添加路由。大家都知道，路由其实就是用来标识应用上的唯一的一个接口，所以接口通常又被称为资源。在express的使用过程大家都知道我们可以借用express-router来实现路由编程。那么在KOA里头同样有这么一个包，称为koa-router，这个包在上一节课里头，我已经提前安装。创建路由在项目根目录下新
    
                    
    • 
                    
  • 软件架构设计方法之The Clean Architecture 整洁架构
                        颯沓如流星
架构系统架构
                        
    前言CleanArchitecture（整洁架构）是一种软件设计理念，由RobertC.Martin（也称为UncleBob）提出，旨在提高软件系统的可维护性、可扩展性和可测试性。清洁架构的核心思想是将系统分为多个层次，并通过严格的依赖规则来管理层之间的交互。以下是清洁架构的主要特点和原则。TheCleanArchitectureTheCleanArchitecture是一种处理高度复杂领域的设计
    
                    
    • 
                    
  • Vue.js 组件开发：从基础到进阶
                        学不完了是吧
Vuevue.js
                        
    Vue.js是一个渐进式的JavaScript框架，其核心理念之一就是基于组件的开发。组件可以极大地提高代码的复用性、可维护性和可测试性。本篇文章将从基础到进阶，带你了解Vue.js的组件开发方法和最佳实践。什么是组件？在Vue.js中，组件是一个具有独立功能的可复用模块。组件可以包含HTML模板、CSS样式和JavaScript逻辑。通过组件化开发，可以将复杂的页面分解为多个易于管理的部分。组件
    
                    
    • 
                    
  • 【项目集成Husky】
                        软件205
在线工具箱（毕设）vue
                        
    项目集成Husky安装初始化Husky在.husky→pre-commit文件中添加想要执行的命令安装使用Husky可以帮助你在Git钩子中运行脚本，例如在提交代码前运行测试或格式化代码pnpmadd--save-devhusky初始化Huskynpxhuskyinit这会在项目根目录下创建一个.husky目录在.husky→pre-commit文件中添加想要执行的命令pnpmrunformat官
    
                    
    • 
                    
  • 必须得会的汽车ECU研发基础—软件开发流程6
                        SOA开发者
单元测试
                        
    为了保证软件（应用层和底层）开发的质量和效率，当前成熟的ECU软件开发都会采用V流程形式。1V流程是什么V流程来源于软件开发过程中一个称为快速应用开发的模型，由于该模型的构图形似字母V，所以俗称V模型。V模型是软件开发、测试中最重要的一种模型，其大体可划分为几个不同的阶段步骤，即功能需求、功能开发、软件开发、软件集成测试、功能集成测试、整车标定，如上图所示。左边为需求分析和设计开发的过程，右边则为
    
                    
    • 
                    
  • Hadoop--HA架构详解
                        娘子，出来看上帝
HadoopHadoop大数据HA
                        
    一、HA架构工作背景HDFS集群中的nameNode存在单点故障因素。对于只有一个nameNode工作的集群来说，一旦nameNode出现意外情况，会导致整个集群无法工作，直到nameNode重新启动。为了解决上述问题，Hadoop给出了高容错，高可用的HA方案：一个HDFS集群至少存在两个nameNode，一个nameNode处在active（主）状态，其他nameNode处在standby（备
    
                    
    • 
                    
  • Hadoop HA 架构
                        weixin_30569033
shell大数据
                        
    为什么要用集群?企业里面,多台机器伪分布式每一个角色都是一个进程HDFS:NNSNNDNYARN:RMNM大数据所有组件,都是主从架构master-slaveHDFS读写请求都是先到NN节点,但是,HBase读写请求不是经过master,建表和删除表是需要经过masterNN节点挂了,就不能提供对外服务(-put,-get)需要配置两个NN节点(实时的,任何时刻只有一台active对外,另外一台是
    
                    
    • 
                    
  • WSL开发环境配置（linux + python + nodejs + docker）
                        Lilixxs
环境搭建基础设施linux运维服务器
                        
    配置要求及目标总体目标：完整的Linux开发环境可开发基于node.js的前端程序可开发基于python的后端程序（仅日常程序，不包含机器学习程序）可运行docker容器，用于快速搭建测试环境Linux环境要求支持centos发行版类似的操作方式和指令（如使用rpm、dnf进行软件包管理）登录用户具有root权限（执行高权限命令，输入sudo即可执行）可从国内源更新软件基本优化：内核指令优化、禁用
    
                    
    • 
                    
  • 「前端工具」postman接口测试工具详解
                        吴维炜
前端就那么回事postman前端工具API开发工具RESTfulAPIpostman自动化测试
                        
    Postman是一款流行的API开发工具，用于构建和测试RESTfulAPI。以下是Postman的一些关键特性和使用方法的详解：1.界面和基本操作工作区：Postman的主界面，用于显示集合、环境和全局变量。请求构建器：用于输入请求的URL、HTTP方法、请求头、请求体等。响应区：显示服务器的响应，包括状态码、响应头和响应体。2.创建请求GET请求：获取资源。POST请求：提交新资源。PUT请求
    
                    
    • 
                    
  • redis从安装到三主三从集群
                        敲代码的旺财
架构进阶分布式redis集群redis主从redis哨兵
                        
    文章目录一、为什么要使用Redis1、读写的二八原则2、信息的统一管理二、常见缓存方案的对比三、安装redis1、下载redis安装包、上传linux服务器2、安装依赖3、解压安装包4、进入文件夹、编译并安装5、修改redis的核心配置文件6、修改redis的启动脚本7、配置开机启动8、运行reids四、redis各数据类型的基本命令1、通用的命令2、String的命令3、hash的命令4、lis
    
                    
    • 
                    
  • postman接口测试工具详解
                        109702008
编程postman人工智能学习
                        
    GPT-4o(OpenAI)Postman是一个广泛使用的API测试工具，用于开发人员和测试人员执行API测试和调试。它提供了一个用户友好的界面，并支持多种HTTP方法和各种类型的请求和响应数据格式。以下是Postman的一些核心功能和用法详解：1.安装和设置-下载与安装：从Postman的官方网站(https://www.postman.com/downloads/)下载适用于不同操作系统的安装
    
                    
    • 
                    
  • 半导体制造工艺流程
                        Stestack
制造
                        
    半导体制造工艺过程非常多，据说有几百甚至几千个步骤。一个百亿投资的工厂做的可能也只是其中的一小部分工艺过程。对于这么复杂的工艺，可分为五个大类进行解说：晶圆制造、光刻蚀刻、离子注入、薄膜沉积、封装测试。另一种划分：每个半导体元件产品的制造都需要数百道工序。经过整理，整个制造过程分为八个步骤：晶圆加工、氧化、照相、蚀刻、薄膜沉积、互连、测试、封装一、半导体生产工艺（1）晶圆制造(WaferManuf
    
                    
    • 
                                
  • ASM系列六 利用TreeApi 添加和移除类成员
                                    lijingyao8206
jvm动态代理ASM字节码技术TreeAPI
                                    
        同生成的做法一样，添加和移除类成员只要去修改fields和methods中的元素即可。这里我们拿一个简单的类做例子，下面这个Task类，我们来移除isNeedRemove方法，并且添加一个int 类型的addedField属性。 
  
package asm.core;

/**
 * Created by yunshen.ljy on 2015/6/
    
                                
    • 
                                
  • Springmvc-权限设计
                                    bee1314
springWebjsp
                                    
     
 万丈高楼平地起。 
 
权限管理对于管理系统而言已经是标配中的标配了吧，对于我等俗人更是不能免俗。同时就目前的项目状况而言，我们还不需要那么高大上的开源的解决方案，如Spring Security，Shiro。小伙伴一致决定我们还是从基本的功能迭代起来吧。 
目标：  
1.实现权限的管理（CRUD）
2.实现部门管理 （CRUD)
3.实现人员的管理 （CRUD）
4.实现部门和权限
    
                                
    • 
                                
  • 算法竞赛入门经典（第二版）第2章习题
                                    CrazyMizzz
c算法
                                    
    2.4.1 输出技巧 
#include <stdio.h> 
 
int 
main() 
{ 
 int i, n; 
 
 scanf("%d", &n); 
 for (i = 1; i <= n; i++) 
 printf("%d\n", i); 
 return 0; 
} 
 
习题2-2 水仙花数(daffodil
    
                                
    • 
                                
  • struts2中jsp自动跳转到Action
                                    麦田的设计者
jspwebxmlstruts2自动跳转
                                    
    1、在struts2的开发中，经常需要用户点击网页后就直接跳转到一个Action，执行Action里面的方法，利用mvc分层思想执行相应操作在界面上得到动态数据。毕竟用户不可能在地址栏里输入一个Action（不是专业人士） 
  
2、＜jsp:forward page="xxx.action" /＞ ，这个标签可以实现跳转，page的路径是相对地址,不同与jsp和j
    
                                
    • 
                                
  • php 操作webservice实例
                                    IT独行者
PHPwebservice
                                    
    首先大家要简单了解了何谓webservice，接下来就做两个非常简单的例子，webservice还是逃不开server端与client端。我测试的环境为：apache2.2.11 php5.2.10做这个测试之前，要确认你的php配置文件中已经将soap扩展打开，即extension=php_soap.dll; 
OK 现在我们来体验webservice 
//server端 serve
    
                                
    • 
                                
  • Windows下使用Vagrant安装linux系统
                                    _wy_
windowsvagrant
                                    
    准备工作： 
下载安装 VirtualBox ：https://www.virtualbox.org/ 
下载安装 Vagrant ：http://www.vagrantup.com/ 
下载需要使用的 box ： 
官方提供的范例：http://files.vagrantup.com/precise32.box 
还可以在 http://www.vagrantbox.es/ 
    
                                
    • 
                                
  • 更改linux的文件拥有者及用户组(chown和chgrp)
                                    无量
clinuxchgrpchown
                                    
    本文（转）  
http://blog.163.com/yanenshun@126/blog/static/128388169201203011157308/   
http://ydlmlh.iteye.com/blog/1435157   
一、基本使用：    
使用chown命令可以修改文件或目录所属的用户： 
       命令
    
                                
    • 
                                
  • linux下抓包工具
                                    矮蛋蛋
linux
                                    
    原文地址： 
http://blog.chinaunix.net/uid-23670869-id-2610683.html 
tcpdump -nn -vv -X udp port 8888 
上面命令是抓取udp包、端口为8888 
netstat -tln 命令是用来查看linux的端口使用情况 
 
13 . 列出所有的网络连接 
lsof -i 
14. 列出所有tcp 网络连接信息 
l
    
                                
    • 
                                
  • 我觉得mybatis是垃圾！：“每一个用mybatis的男纸，你伤不起”
                                    alafqq
mybatis
                                    
    最近看了  
每一个用mybatis的男纸，你伤不起 
原文地址 ：http://www.iteye.com/topic/1073938 
发表一下个人看法。欢迎大神拍砖； 
 
个人一直使用的是Ibatis框架，公司对其进行过小小的改良； 
最近换了公司，要使用新的框架。听说mybatis不错；就对其进行了部分的研究； 
 
发现多了一个mapper层；个人感觉就是个dao； 
 
 
    
                                
    • 
                                
  • 解决java数据交换之谜
                                    百合不是茶
数据交换
                                    
    交换两个数字的方法有以下三种  ，其中第一种最常用
 
  
/*
输出最小的一个数
*/
public class jiaohuan1 {

	public static void main(String[] args) {
	int a =4;
	int b = 3;
		if(a<b){
         //  第一种交换方式
		int tmep =
    
                                
    • 
                                
  • 渐变显示
                                    bijian1013
JavaScript
                                    
    <style type="text/css">
 #wxf {
  FILTER: progid:DXImageTransform.Microsoft.Gradient(GradientType=0, StartColorStr=#ffffff, EndColorStr=#97FF98);
  height: 25px;
 }
</style>
    
                                
    • 
                                
  • 探索JUnit4扩展：断言语法assertThat
                                    bijian1013
java单元测试assertThat
                                    
    一.概述 
        JUnit 设计的目的就是有效地抓住编程人员写代码的意图，然后快速检查他们的代码是否与他们的意图相匹配。 JUnit 发展至今，版本不停的翻新，但是所有版本都一致致力于解决一个问题，那就是如何发现编程人员的代码意图，并且如何使得编程人员更加容易地表达他们的代码意图。JUnit 4.4 也是为了如何能够
    
                                
    • 
                                
  • 【Gson三】Gson解析{"data":{"IM":["MSN","QQ","Gtalk"]}}
                                    bit1129
gson
                                    
       
如何把如下简单的JSON字符串反序列化为Java的POJO对象? 
{"data":{"IM":["MSN","QQ","Gtalk"]}} 
  
下面的POJO类Model无法完成正确的解析： 
  
import com.google.gson.Gson;
    
                                
    • 
                                
  • 【Kafka九】Kafka High Level API vs. Low Level API
                                    bit1129
kafka
                                    
    1. Kafka提供了两种Consumer API 
 
 High Level Consumer API 
 Low Level Consumer API(Kafka诡异的称之为Simple Consumer API，实际上非常复杂) 
 
在选用哪种Consumer API时，首先要弄清楚这两种API的工作原理，能做什么不能做什么，能做的话怎么做的以及用的时候，有哪些可能的问题 
 
    
                                
    • 
                                
  • 在nginx中集成lua脚本：添加自定义Http头，封IP等
                                    ronin47
nginx lua
                                    
    Lua是一个可以嵌入到Nginx配置文件中的动态脚本语言，从而可以在Nginx请求处理的任何阶段执行各种Lua代码。刚开始我们只是用Lua 把请求路由到后端服务器，但是它对我们架构的作用超出了我们的预期。下面就讲讲我们所做的工作。 强制搜索引擎只索引mixlr.com 
Google把子域名当作完全独立的网站，我们不希望爬虫抓取子域名的页面，降低我们的Page rank。 
location /{
    
                                
    • 
                                
  • java-归并排序
                                    bylijinnan
java
                                    
    
import java.util.Arrays;


public class MergeSort {

	
	public static void main(String[] args) {

		int[] a={20,1,3,8,5,9,4,25};
		mergeSort(a,0,a.length-1);
		System.out.println(Arrays.to
    
                                
    • 
                                
  • Netty源码学习-CompositeChannelBuffer
                                    bylijinnan
javanetty
                                    
    CompositeChannelBuffer体现了Netty的“Transparent Zero Copy” 
 
查看API（ 
http://docs.jboss.org/netty/3.2/api/org/jboss/netty/buffer/package-summary.html#package_description） 
可以看到，所谓“Transparent Zero Copy”是通
    
                                
    • 
                                
  • Android中给Activity添加返回键
                                    hotsunshine
Activity
                                    
           
// this need android:minSdkVersion="11"
 getActionBar().setDisplayHomeAsUpEnabled(true);
 
 
 
   
 @Override
    public boolean onOptionsItemSelected(MenuItem item) {
        
    
                                
    • 
                                
  • 静态页面传参
                                    ctrain
静态
                                    
    
$(document).ready(function () {
	var request = {
		QueryString :
		function (val) {
			var uri = window.location.search;
			var re = new RegExp("" + val + "=([^&?]*)", &
    
                                
    • 
                                
  • Windows中查找某个目录下的所有文件中包含某个字符串的命令
                                    daizj
windows查找某个目录下的所有文件包含某个字符串
                                    
    findstr可以完成这个工作。 
     
[html]  
view plain 
copy       
 
 >findstr /s /i "string" *.*   
  
上面的命令表示，当前目录以及当前目录的所有子目录下的所有文件中查找"string&qu
    
                                
    • 
                                
  • 改善程序代码质量的一些技巧
                                    dcj3sjt126com
编程PHP重构
                                    
    有很多理由都能说明为什么我们应该写出清晰、可读性好的程序。最重要的一点，程序你只写一次，但以后会无数次的阅读。当你第二天回头来看你的代码 时，你就要开始阅读它了。当你把代码拿给其他人看时，他必须阅读你的代码。因此，在编写时多花一点时间，你会在阅读它时节省大量的时间。让我们看一些基本的编程技巧：    尽量保持方法简短    尽管很多人都遵
    
                                
    • 
                                
  • SharedPreferences对数据的存储
                                    dcj3sjt126com

                                    
    SharedPreferences简介：                                                   &nbs
    
                                
    • 
                                
  • linux复习笔记之bash shell (2) bash基础
                                    eksliang
bashbash shell
                                    
    转载请出自出处：
http://eksliang.iteye.com/blog/2104329  
1.影响显示结果的语系变量（locale） 
 1.1locale这个命令就是查看当前系统支持多少种语系，命令使用如下： 
[root@localhost shell]# locale
LANG=en_US.UTF-8
LC_CTYPE="en_US.UTF-8"

    
                                
    • 
                                
  • Android零碎知识总结
                                    gqdy365
android
                                    
    1、CopyOnWriteArrayList add(E) 和remove(int index)都是对新的数组进行修改和新增。所以在多线程操作时不会出现java.util.ConcurrentModificationException错误。 
所以最后得出结论：CopyOnWriteArrayList适合使用在读操作远远大于写操作的场景里，比如缓存。发生修改时候做copy，新老版本分离，保证读的高
    
                                
    • 
                                
  • HoverTree.Model.ArticleSelect类的作用
                                    hvt
Web.netC#hovertreeasp.net
                                    
    ArticleSelect类在命名空间HoverTree.Model中可以认为是文章查询条件类，用于存放查询文章时的条件，例如HvtId就是文章的id。HvtIsShow就是文章的显示属性，当为-1是，该条件不产生作用，当为0时，查询不公开显示的文章，当为1时查询公开显示的文章。HvtIsHome则为是否在首页显示。HoverTree系统源码完全开放，开发环境为Visual Studio 2013
    
                                
    • 
                                
  • PHP 判断是否使用代理 PHP Proxy Detector
                                    天梯梦
proxy
                                    
    1. php 类 
I found this class looking for something else actually but I remembered I needed some while ago something similar and I never found one. I'm sure it will help a lot of developers who try to 
    
                                
    • 
                                
  • apache的math库中的回归——regression（翻译）
                                    lvdccyb
Mathapache
                                    
    这个Math库，虽然不向weka那样专业的ML库，但是用户友好，易用。 
多元线性回归，协方差和相关性（皮尔逊和斯皮尔曼），分布测试（假设检验，t，卡方，G），统计。 
  
数学库中还包含，Cholesky，LU，SVD，QR，特征根分解，真不错。 
  
基本覆盖了：线代，统计，矩阵， 
最优化理论 
曲线拟合 
常微分方程 
遗传算法（GA）， 
还有3维的运算。。。 

    
                                
    • 
                                
  • 基础数据结构和算法十三：Undirected Graphs (2)
                                    sunwinner
Algorithm
                                    
      
Design pattern for graph processing.  
Since we consider a large number of graph-processing algorithms, our initial design goal is to decouple our implementations from the graph representation
    
                                
    • 
                                
  • 云计算平台最重要的五项技术
                                    sumapp
云计算云平台智城云
                                    
    云计算平台最重要的五项技术 
 
 
 
1、云服务器 
 
 
云服务器提供简单高效，处理能力可弹性伸缩的计算服务，支持国内领先的云计算技术和大规模分布存储技术，使您的系统更稳定、数据更安全、传输更快速、部署更灵活。 
 
 
特性 
 
机型丰富 
 
通过高性能服务器虚拟化为云服务器，提供丰富配置类型虚拟机，极大简化数据存储、数据库搭建、web服务器搭建等工作； 
 
仅需要几分钟，根据CP
    
                                
    • 
                                
  • 《京东技术解密》有奖试读获奖名单公布
                                    ITeye管理员
活动
                                    
    ITeye携手博文视点举办的12月技术图书有奖试读活动已圆满结束，非常感谢广大用户对本次活动的关注与参与。  
 
 
12月试读活动回顾： 
http://webmaster.iteye.com/blog/2164754 
 
 
本次技术图书试读活动获奖名单及相应作品如下： 
 
 
一等奖（两名） 
 
 
 Microhardest：http://microhardest.ite
    
                                
    • 
                

            

        

    




    

        

            按字母分类：
            ABCDEFGHIJKLMNOPQRSTUVWXYZ其他