大数据小应用
大数据小应用

基于ambari hadoop平台的搭建

环境准备

1:jdk安装,防止在/opt/data下,tar –zxf 安装包在/opt/apps下   所有节点都需要

2:sudo apt update  源升级,所有节点都需要

3:/etc/hosts

10.68.29.243   iZwz9870dk1soyw67s3ephZ

10.68.29.244   iZwz9870dk1soyw67s3epgZ

10.68.29.245   iZwz9870dk1soyw67s3eplZ

10.68.29.246   iZwz9870dk1soyw67s3epjZ

10.68.29.247   iZwz9870dk1soyw67s3epkZ

10.68.29.248   iZwz9870dk1soyw67s3epiZ


4:sudo apt-get install mysql-server  10.68.29.246节点安装mysql

vi /etc/mysql/mysql.conf.d/mysqld.cnf

#bind-address           =127.0.0.1

sudo/etc/init.d/mysql restart

GRANT ALL PRIVILEGES ON *.* TO 'root'@'iZwz9870dk1soyw67s3epjZ'IDENTIFIED BY 'newpass' WITH GRANT OPTION;

FLUSH PRIVILEGES;

在/usr/share/java 上次mysql驱动

改名: mvmysql-connector-java-8.0.12.jar mysql-connector-java.jar

5:在/opt/data目录下执行下面命令

nohup python -m SimpleHTTPServer    >> SimpleHTTPServer.log 2>&1&

得到的url为:ttp://47.106.167.81:8000/


6:解压下面文件

ambari-2.6.2.2-ubuntu16.tar.gz

HDP-2.6.5.0-ubuntu16-deb.tar.gz

HDP-GPL-2.6.5.0-ubuntu16-gpl.tar.gz

HDP-UTILS-1.1.0.22-ubuntu16.tar.gz


7: 在/etc/apt/sources.list.d/下创建两个文件

ambari.list

deb http:// iZwz9870dk1soyw67s3epjZ:8000/ambari/ubuntu16/2.6.2.2-1/  Ambari main

ambari-hdp.list

deb http://iZwz9870dk1soyw67s3epjZ:8000/HDP/ubuntu16/2.6.5.0-292/HDP main

deb http://iZwz9870dk1soyw67s3epjZ:8000/HDP-GPL/ubuntu16/2.6.5.0-292/HDP-GPL main

deb http://iZwz9870dk1soyw67s3epjZ:8000/HDP-UTILS/ubuntu16/1.1.0.22/HDP-UTILS main

并scp到其他相同目录的节点

8: 配置获取公钥

apt-key adv --recv-keys--keyserver keyserver.ubuntu.com B9733A7A07513CAD  （其中keyserver.ubuntu.com表示可下载公钥的服务器，B9733A7A07513CAD为签名）

9: apt-get update

sudo apt-get installambari-agent ambari-metrics-assembly agent节点执行

10: ambari-server的安装

 apt-get install -y ambari-server  server节点

更改配置:

在/etc/ambari-server/conf/ambari.properties配置

jdk1.8.url=http://iZwz9870dk1soyw67s3epjZ:8000/jdk-8u171-linux-x64.tar.gz

添加一行server.jdbc.driver.path=/usr/share/java/mysql-connector-java.jar

更改/var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

新增文本:

# USE @schema;

CREATE DATABASE ambari;

CREATE DATABASE hive;

GRANT ALL PRIVILEGES ONambari.* TO 'ambari'@'%'

IDENTIFIED BY 'ambari';

GRANT ALL PRIVILEGES ON hive.*TO 'hive'@'%'

IDENTIFIED BY 'hive';

FLUSH PRIVILEGES;

use ambari;


mysql里面: source  /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

10:更改/etc/ambari-agent/conf/ambari-agent.ini

[server]

hostname=iZwz9870dk1soyw67s3epjZ

(这个需要更改)

在security下加入force_https_protocol=PROTOCOL_TLSv1_2   不然会报PROTOCOL异常


开始配置HDP

1:ambari-serversetup

选用自定义jdk

选用mysql数据库


启动服务

ambari-server  start   server节点

ambari-agent start    agent节点


出现下面的情况需要更改配置文件

将hostname更换


正式安装HDP

在windows上配置外网ip映射

47.106.167.81  iZwz9870dk1soyw67s3epjZ

39.108.98.125   iZwz9870dk1soyw67s3epkZ

47.106.120.70   iZwz9870dk1soyw67s3epiZ



点击next


开始进行资源自定义配置


发布:


最后

NameNode的HA 配置

ResourceManager的HA

遇到的坑:

1. server需要先启动,

2. mysql驱动版本不能低于5.6,

3. mysql安装后需要进行配置文件的修改

4. 端口号8020,50070需要开放,hosts的本地回环需要去掉.

5.  zk的配置文件最后多了一行是官网的坑,需要删除

/usr/hdp/current/zookeeper-server/conf/zoo.cfg

这里会多出一行,有个非法字符

6: root@iZwz9870dk1soyw67s3epgZ:/etc/apt/sources.list.d#sudo apt update

Get:1 file:/var/nvidia-diag-driver-local-repo-396.26  InRelease

Ign:1file:/var/nvidia-diag-driver-local-repo-396.26 InRelease

Get:2file:/var/nvidia-diag-driver-local-repo-396.26 Release [574 B]

Hit:3http://mirrors.cloud.aliyuncs.com/ubuntu xenial InRelease      

Get:2file:/var/nvidia-diag-driver-local-repo-396.26 Release [574 B]

Get:4http://mirrors.cloud.aliyuncs.com/ubuntu xenial-updates InRelease [109 kB]

Get:5http://mirrors.cloud.aliyuncs.com/ubuntu xenial-security InRelease [107kB] 

Get:7 http://mirrors.cloud.aliyuncs.com/ubuntuxenial-updates/main amd64 Packages [892 kB]

Get:8http://mirrors.cloud.aliyuncs.com/ubuntu xenial-updates/main i386 Packages [790kB]     

Get:9http://mirrors.cloud.aliyuncs.com/ubuntu xenial-updates/universe amd64 Packages[715 kB]     

Get:10http://mirrors.cloud.aliyuncs.com/ubuntu xenial-updates/universe i386 Packages[655 kB]         

0% [Waiting for headers]^Z


卡在这里:

rm -rf /var/lib/apt/lists/*

apt-get clean

apt-get update


apt-get  remove hdp-select 卸载成功后再进行安装


问题3：EOF occurred in violation of protocol (_ssl.c:579)

vi/etc/ambari-agent/conf/ambari-agent.ini

添加

[security]

ssl_verify_cert=0

force_https_protocol=PROTOCOL_TLSv1_2

脑裂

重启ambari-server遇到resourceManager脑裂,两个处于standby 状态

re you sure you want to continue? (Y or N)Y

18/12/20 16:17:19 WARN ha.HAAdmin:Proceeding with manual HA state management even though

automatic failover is enabled fororg.apache.hadoop.yarn.client.RMHAServiceTarget@212bf671

Operation failed: Error when transitioningto Active mode

       atorg.apache.hadoop.yarn.server.resourcemanager.AdminService.transitionToActive(AdminService.java:334)

       atorg.apache.hadoop.ha.protocolPB.HAServiceProtocolServerSideTranslatorPB.transitionToActive(HAServiceProtocolServerSideTranslatorPB.java:107)

       atorg.apache.hadoop.ha.proto.HAServiceProtocolProtos$HAServiceProtocolService$2.callBlockingMethod(HAServiceProtocolProtos.java:4460)

       atorg.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:640)

       at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:982)

       at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2351)

       at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2347)

       at java.security.AccessController.doPrivileged(Native Method)

       at javax.security.auth.Subject.doAs(Subject.java:422)

       at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1869)

       at org.apache.hadoop.ipc.Server$Handler.run(Server.java:2347)

Caused by:org.apache.hadoop.service.ServiceStateException:org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.ipc.RetriableException):org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot createfile/system/yarn/node-labels/nodelabel.mirror.writing. Name node is in safemode.

The reported blocks 6070 needs additional373 blocks to reach the threshold 0.9900 of total blocks 6508.

The number of live datanodes 6 has reachedthe minimum number 0. Safe mode will be turned off automatically once thethresholds have been reached.

       at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkNameNodeSafeMode(FSNamesystem.java:1426)

       atorg.apache.hadoop.hdfs.server.namenode.FSNamesystem.startFileInt(FSNamesystem.java:2697)

       atorg.apache.hadoop.hdfs.server.namenode.FSNamesystem.startFile(FSNamesystem.java:2586)

       at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.create(NameNodeRpcServer.java:736)

       atorg.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.create(ClientNamenodeProtocolServerSideTranslatorPB.java:409)

       at org.apache.hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos$ClientNamenodeProtocol$2.callBlockingMethod(ClientNamenodeProtocolProtos.java)

       atorg.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:640)

       at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:982)

       at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2351)

       at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:2347)

       at java.security.AccessController.doPrivileged(Native Method)

       at javax.security.auth.Subject.doAs(Subject.java:422)

       atorg.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1869)

       at org.apache.hadoop.ipc.Server$Handler.run(Server.java:2347)

是namenode处于安全模式

hdfs dfsadmin –safemode leave

然后yarn rmadmin -transitionToActive --forcemanual  rm1手动的切换active

你可能感兴趣的:(基于ambari hadoop平台的搭建)

  • JAVA泛型 TraceChen JAVAjava
    JAVA泛型Java泛型（generic）是在JDK1.5版本引用的一种新的特性，泛型提供编译时安全检查机制，该机制允许程序员在编译时检查非安全的类型。一、泛型本质泛型本质是数据化类型，即先给类型指定一个参数，然后使用时再指定参数具体的值，那么这个类型可以在使用时候决定，这种参数类型可以用在类、接口、方法中，分别被称为泛型类、泛型接口、泛型方法。    Listlist=newArrayListl
  • stm32h7关串口中断怎么弄_stm32h7“HardFault_Handler（硬件异常中断）分析” weixin_39926191 stm32h7关串口中断怎么弄
    在stm32调试中有时候会进入硬件异常中断HardFault_Handler。SEGGER公司(旗下有大名鼎鼎的emWin图形工具)提供一种硬件异常中断HardFault_Handler定位调试方法。在MDK和IAR开发环境都适用。这里，我们在MDK开发环境上记录一次调试经历。1、硬件异常案例主函数是对按键K1和摇杆OK的接收处理操作，如伪代码1伪代码1intmain(void){//按键初始化函
  • 服务器使用宝塔上传文件时卡住了的解决办法 Frozen-tzy 服务器运维linux
    当我用宝塔向服务器上传文件时，它一直显示上传速度是0，卡住不动了。还有一种情况是上传到一半失败了，这时报了一个磁盘空间不足的错。这时我们来看宝塔面板首页的磁盘空间，一般会看到它是红色的，接近100%，这时我们就需要清理掉服务器中不必要的文件（比如日志、缓存等）我们也可以通过命令来查看磁盘的使用情况：通过SSH登录服务器df-h输出示例FilesystemSizeUsedAvailUse%Mount
  • 什么是联盟营销？2025新手怎么入局联盟营销？ 跨境知识搬运工 facebook大数据
    联盟营销为商家和营销人员提供了一个低成本、高效益的合作平台，同时也让消费者能够享受更多的优惠和产品推荐。那么，什么是联盟营销？如何入局联盟营销，尤其是对于新手来说，又该如何开始这项业务？本文将详细介绍这些问题，并帮助你了解如何顺利入局联盟营销。一、什么是联盟营销？联盟营销是一种基于成果的合作营销模式。在这种模式下，商家与联盟营销者（即“推广者”或“发布者”）合作，推广其产品或服务。联盟营销者通过推
  • 使用CSS3实现炫酷的3D翻转卡片效果 木木黄木木 css33d前端
    使用CSS3实现炫酷的3D翻转卡片效果这里写目录标题使用CSS3实现炫酷的3D翻转卡片效果项目介绍技术要点分析1.3D空间设置2.核心CSS属性3.布局和定位实现难点和解决方案1.3D效果的流畅性2.卡片内容布局3.响应式设计性能优化建议浏览器兼容性总结项目介绍在这个项目中，我们使用纯CSS3技术实现了一个具有3D翻转效果的交互卡片。当用户将鼠标悬停在卡片上时，卡片会沿Y轴优雅地旋转180度，展示
  • ApplicationContext介绍 lgily-1225 日常积累java后端spring
    一、概述ApplicationContext是Spring框架中的一个核心接口，它扩展了BeanFactory接口，并提供了更全面的功能。ApplicationContext不仅包含了BeanFactory的所有功能，还添加了国际化支持、资源访问、事件传播、以及更高级的容器特性，如自动装配和生命周期管理等。它是Spring应用中的核心容器，负责管理和配置应用中的对象（称为beans）。二、主要功能
  • Maven中dependency标签参数 lgily-1225 日常积累mavenjava后端
    Maven中dependency标签参数如下：一、type有时候我们引入某一个依赖时，必须指定type，这是因为用于匹配dependency引用和dependencyManagement部分的最小信息集实际上是{groupId，artifactId，type，classifier}。在很多情况下，这些依赖关系将引用没有classifier的jar依赖。这允许我们将标识设置为{groupId，art
  • 计算机视觉毕业设计选题推荐：选题技巧 建议收藏 HaiLang_IT 毕业设计人工智能计算机视觉
    目录前言毕设选题开题指导建议更多精选选题选题帮助最后前言大家好,这里是海浪学长毕设专题!大四是整个大学期间最忙碌的时光，一边要忙着准备考研、考公、考教资或者实习为毕业后面临的升学就业做准备,一边要为毕业设计耗费大量精力。学长给大家整理了人工智能专业最新精选选题，如遇选题困难或选题有任何疑问，都可以问学长哦(见文末)!对毕设有任何疑问都可以问学长哦!更多选题指导:最新最全计算机专业毕设选题精选推荐汇
  • 深入理解 C# 反射 的使用 鲤籽鲲 C#c#开发语言C#知识捡漏C#反射
    总目录前言反射是.NET框架中一个强大的特性，允许程序在运行时检查和操作类型信息。通过反射，开发者可以动态地创建对象、调用方法、访问属性等，为程序提供了极大的灵活性。本文将详细讲解C#反射的使用方法及其应用场景。一、什么是反射？1.定义反射（Reflection）是指程序在运行时能够检查和操作其自身的类型信息。通过反射，可以获取类型的成员（如方法、属性、事件等）并动态地调用它们。在.NET框架中，
  • 什么是联盟营销？2025新手怎么入局联盟营销？ 纯干苹果派 人工智能大数据
    联盟营销为商家和营销人员提供了一个低成本、高效益的合作平台，同时也让消费者能够享受更多的优惠和产品推荐。那么，什么是联盟营销？如何入局联盟营销，尤其是对于新手来说，又该如何开始这项业务？本文将详细介绍这些问题，并帮助你了解如何顺利入局联盟营销。一、什么是联盟营销？联盟营销是一种基于成果的合作营销模式。在这种模式下，商家与联盟营销者（即“推广者”或“发布者”）合作，推广其产品或服务。联盟营销者通过推
  • 数学建模清风课程笔记——第二章 TOPSIS法 minpengyuanBITer 数学建模数学建模笔记
    TOPSIS(TechniqueforOrderPreferencebySimilaritytoIdealSolution)可翻译为逼近理想解排序法，国内简称为优劣解距离法。TOPSIS法是一种常用的综合评价方法，其能充分利用原始数据的信息，其结果能够精确地反映各评价方案之间的差距。评价类问题1TOPSIS法TOPSIS法概念：TOPSIS法是一种常用的综合评价方法，能充分利用原始数据的信息，其结
  • 鸿蒙NEXT开发之开屏广告实现 怀男孩 harmonyosharmonyos华为
    1.广告请求服务的实现首先，你需要创建一个广告请求服务来处理广告的加载和展示。你已经在代码中实现了requestAd函数，接下来需要处理广告加载、显示、点击等事件。可以考虑以下结构：1.1创建广告加载函数import{advertising,identifier}from'@kit.AdsKit';import{hilog}from'@kit.PerformanceAnalysisKit';imp
  • async和 await 的基本使用 怀男孩 前端javascript开发语言
    目录1.async/await是什么？2.async/await基本语法3.async函数和await的特点3.1async函数的特点3.2async函数的特点代码演示3.3await的特点4.try/catch捕获错误1.async/await是什么？async/await是一种用于处理异步操作的Promise语法糖。(语法糖:更易读、更简洁或更符合人类思维习惯而设计的一种语法方式)通过使用as
  • JDK8 Stream 数据流效率分析，Java开发你需要了解的那些事 气质大叔 程序员后端面试java
    此外还有一系列特化流，如IntStream，LongStream，DoubleStream等），Java8引入的的Stream主要用于取代部分Collection的操作，每个流代表一个值序列，流提供一系列常用的聚集操作，可以便捷的在它上面进行各种运算。集合类库也提供了便捷的方式使我们可以以操作流的方式使用集合、数组以及其它数据结构；作为阅读福利，小编也整理了一些Java学习笔记（包含面试真题+脑图
  • 3.ArkTS语法介绍 北辰星Charih HarmonyNextharmonyos
    一、具体内容ArkTS语法介绍-华为开发者学堂(huawei.com)二、习题整理2.1判断题1.ArkTS中使用const声明常量。正确(True)错误(False)答案：正确(True)2.允许在容器组件内使用if/else条件渲染语句构建不同的子组件。正确(True)错误(False)答案：正确(True)3.@Entry装饰的自定义组件将作为UI页面的入口。在单个UI页面中可以使用多个@E
  • 基础篇：ArkTS基础语法介绍 言程序plus 鸿蒙Next开发javascriptarkts鸿蒙
    前言：目前流行的编程语言TypeScript是在JavaScript基础上通过添加类型定义扩展而来的，而ArkTS则是TypeScript的进一步扩展。TypeScript深受开发者的喜爱，因为它提供了一种更结构化的JavaScript编码方法。ArkTS旨在保持TypeScript的大部分语法，为现有的TypeScript开发者实现无缝过渡，让移动开发者快速上手ArkTS。ArkTS比typeS
  • LeetCode每日一题——30. 串联所有单词的子串 hyk今天写算法了吗 #算法实例leetcode算法职场和发展数据结构python
    文章目录题目示例思路题解题目给定一个字符串s和一些长度相同的单词words。找出s中恰好可以由words中所有单词串联形成的子串的起始位置。注意子串要与words中的单词完全匹配，中间不能有其他字符，但不需要考虑words中单词串联的顺序。示例示例1：输入：s=“barfoothefoobarman”,words=[“foo”,“bar”]输出：[0,9]解释：从索引0和9开始的子串分别是“bar
  • 前端面经分享（25/03/18） CreatorRay react面试前端前端面试react
    北京一家做边缘云服务提供商公司，技术一面，15k-20k，要求3-5年上家公司的项目为什么会选择MQTT进行通信React常用Hook为什么React不能在条件语句里用Hook前端常见的优化策略React如何捕获子组件的错误React给节点加key会有什么效果最近俩家公司都用WebSocket做了什么HTTP各个版本的区别跨域的常见解决方案前端常见布局WebSocket和SSE的区别A页面滚动到一
  • React中useEffect和useLayoutEffect的区别 CreatorRay 前端面试reactreact.js前端面试
    在最近一次面试中被问到，我印象中好像从来没用过useLayoutEffect，就没答上来。但是看名字应该是跟布局相关的，而且跟useEffect会有类似的作用。在React中，useEffect和useLayoutEffect都是用于处理副作用的Hooks，但它们的执行时机和对渲染流程的影响有显著区别。以下是两者的核心差异及使用场景：公众号：Code程序人生，个人网站：https://creato
  • 「Python数据分析」Pandas基础，筛选数据利器：布尔索引 奕澄羽邦 python数据分析pandas
    我们在处理数据的时候，数据筛选是一个重要的过程。利用布尔索引，我们可以选择需要的数据区间。布尔索引，是利用各种不等式，以及与或非操作，来对数据区间进行选择。在pandas中，与操作，对应的是&这个符号，表示选取两个数据集重合的部分。或操作，对应的是|这个符号，表示选择两个数据集中，只要在一个数据集中出现的部分。非操作，对应的是~这个符号，表示选取一个数据集中，相反的部分。我们下面通过具体的例子，来
  • 探索高效加载动画：Loading Animation Widget 盛言蓓Juliana
    探索高效加载动画：LoadingAnimationWidgetloading_animation_widgetFlutterloadinganimationwidget.项目地址:https://gitcode.com/gh_mirrors/lo/loading_animation_widget在现代应用开发中，加载动画不仅是提升用户体验的关键元素，也是品牌形象展示的重要途径。今天，我们将深入介绍
  • 流式编程 JDK8 Stream的简单使用方法介绍 桔仔 javajdkstream
    JDK8Stream文章目录JDK8Stream概念特点代码简洁多核友好示例foreach方式Stream方式流程操作特性常用操作符具体用法一、流的创建1.1使用Collection下的stream()和parallelStream()方法。1.2使用Arrays中的stream()方法，将数组转成流。1.3使用Stream中的静态方法：of()、iterate()、generate()。1.4使
  • 智慧物流数字管理系统设计案例分析 UI设计开发服务商 数据分析数据挖掘
    你好，宝子们！艾斯视觉团队在此，我们专注于UI设计和前端开发领域10年有余。非常高兴能与您分享我们的经验和见解。如果您觉得有所帮助，请给予我们支持和关注，并随时私信我们，共同探讨进步！谢谢您的鼓励！随着科技的飞速发展，数字化已经成为现代物流业的重要发展趋势。智慧物流数字管理系统旨在通过先进的技术手段，实现物流信息的实时共享、智能分析和优化决策，从而提高物流效率、降低成本并提升客户满意度。本文将以一
  • 编译时报错“LNK2019 无法解析的外部符号”的可能原因及其解决办法 烟锁池塘柳0 程序设计与编程语言c++
    在VS2022中运行C++程序的时候，有时候会遇到这样的问题：1>（源文件名称）.obj:errorLNK2019:无法解析的外部符号"public:__cdecl（函数名(参数列表)）"(??0（函数名与乱码）@@QEAA@XZ)，函数main中引用了该符号1>项目路径\x64\Debug\可执行程序名.exe:fatalerrorLNK1120:1个无法解析的外部命令遇到这种问题，可以说是很难
  • 【数学建模】层次分析法(AHP)详解及其应用 烟锁池塘柳0 数学建模数学建模
    层次分析法(AHP)详解及其应用引言在现实生活和工作中，我们经常面临复杂的决策问题，这些问题通常涉及多个评价准则，且各准则之间可能存在相互影响。如何在这些复杂因素中做出合理的决策？层次分析法(AnalyticHierarchyProcess,AHP)作为一种系统、灵活的多准则决策方法，为我们提供了科学的决策工具。文章目录层次分析法(AHP)详解及其应用引言什么是层次分析法？层次分析法的基本原理层次
  • 【数学建模】模糊综合评价模型详解、模糊集合论简介 烟锁池塘柳0 数学建模数学建模
    模糊综合评价模型详解文章目录模糊综合评价模型详解1.模糊综合评价模型概述2.模糊综合评价的基本原理2.1基本概念2.2评价步骤3.模糊综合评价的数学模型3.1数学表达3.2模糊合成运算4.模糊综合评价的应用领域5.模糊综合评价的优缺点5.1优点5.2缺点6.模糊综合评价的实现步骤7.模糊综合评价在实际项目中的应用案例8.结论参考资料1.模糊综合评价模型概述模糊综合评价法(FuzzyComprehe
  • 【数学建模】灰色关联分析模型详解与应用 烟锁池塘柳0 数学建模数学建模算法
    灰色关联分析模型详解与应用文章目录灰色关联分析模型详解与应用引言灰色系统理论简介灰色关联分析基本原理灰色关联分析计算步骤1.确定分析序列2.数据无量纲化处理3.计算关联系数4.计算关联度灰色关联分析应用实例实例：某企业生产效率影响因素分析灰色关联分析在各领域的应用灰色关联分析的Python实现灰色关联分析的局限性结论引言在数据分析领域，我们经常面临样本量少、信息不完全、数据不确定性高的情况。传统的
  • 查看 Linux 系统中安装的 CUDA 版本 烟锁池塘柳0 LinuxCUDAlinuxubuntu
    查看Linux系统中安装的CUDA版本的常见方法：文章目录1查看/usr/local/cuda目录2使用nvcc命令3检查libcublas版本注意：nvidia-smi1查看/usr/local/cuda目录通常，CUDA被安装在/usr/local/cuda目录下，所以可以使用ls命令来查看这个目录是否存在，以及查看其中的内容。ls/usr/local/cuda如果这个目录存在，通常它会是一个
  • 数据分析_python进行数据筛选1_行筛选 Monkey*王 python数据分析pandas
    以titanic的训练数据为例进行展示，为了简化取前十行为例首先导入模块，导入数据importpandasaspdimportnumpyasnpdf=pd.read_csv(r"C:\Users\admin\Desktop\train.csv")df=df.head(10)df.index=['a','b','c','d','e','f','g','h','i','g']筛选单行1.利用df[行索
  • 前端面经真题解析10-字节/抖音电商/前端/超详细记录 浪里个浪zxf 前端面试前端
    文章目录1.自我介绍2.介绍下自己的项目3.看你项目里面用了axios,说下请求拦截和响应拦截怎么做？4.说下项目里面前后端交互过程及设计？5.怎么处理切换分页请求数据的，优化手段？6.说下你爬取别人网站数据的时候，别人如果设置了拦截，你的解决方案是？7.你说下http请求的refer字段？**Origin字段：****Referer字段：****Host字段****区别：**8.看你做了路由懒加
  • ztree异步加载 3213213333332132 JavaScriptAjaxjsonWebztree
    相信新手用ztree的时候,对异步加载会有些困惑，我开始的时候也是看了API花了些时间才搞定了异步加载，在这里分享给大家。 我后台代码生成的是json格式的数据，数据大家按各自的需求生成，这里只给出前端的代码。 设置setting，这里只关注async属性的配置 var setting = { //异步加载配置
  • thirft rpc 具体调用流程 BlueSkator 中间件rpcthrift
    Thrift调用过程中，Thrift客户端和服务器之间主要用到传输层类、协议层类和处理类三个主要的核心类，这三个类的相互协作共同完成rpc的整个调用过程。在调用过程中将按照以下顺序进行协同工作：         （1）     将客户端程序调用的函数名和参数传递给协议层（TProtocol），协议
  • 异或运算推导, 交换数据 dcj3sjt126com PHP异或^
    /* * 5 0101 * 9 1010 * * 5 ^ 5 * 0101 * 0101 * ----- * 0000 * 得出第一个规律: 相同的数进行异或, 结果是0 * * 9 ^ 5 ^ 6 * 1010 * 0101 * ---- * 1111 * * 1111 * 0110 * ---- * 1001
  • 事件源对象 周华华 JavaScript
    <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/xhtml&q
  • MySql配置及相关命令 g21121 mysql
            MySQL安装完毕后我们需要对它进行一些设置及性能优化，主要包括字符集设置，启动设置，连接优化，表优化，分区优化等等。           一 修改MySQL密码及用户      
  • [简单]poi删除excel 2007超链接 53873039oycg Excel
          采用解析sheet.xml方式删除超链接，缺点是要打开文件2次,代码如下:      public void removeExcel2007AllHyperLink(String filePath) throws Exception { OPCPackage ocPkg = OPCPac
  • Struts2添加 open flash chart 云端月影
    准备以下开源项目： 1. Struts 2.1.6 2. Open Flash Chart 2 Version 2 Lug Wyrm Charmer (28th, July 2009) 3. jofc2，这东西不知道是没做好还是什么意思，好像和ofc2不怎么匹配，最好下源码，有什么问题直接改。 4. log4j 用eclipse新建动态网站，取名OFC2Demo，将Struts2 l
  • spring包详解 aijuans spring
    下载的spring包中文件及各种包众多，在项目中往往只有部分是我们必须的，如果不清楚什么时候需要什么包的话，看看下面就知道了。 aspectj目录下是在Spring框架下使用aspectj的源代码和测试程序文件。Aspectj是java最早的提供AOP的应用框架。 dist 目录下是Spring 的发布包，关于发布包下面会详细进行说明。 docs&nb
  • 网站推广之seo概念 antonyup_2006 算法Web应用服务器搜索引擎Google
       持续开发一年多的b2c网站终于在08年10月23日上线了。作为开发人员的我在修改bug的同时，准备了解下网站的推广分析策略。     所谓网站推广，目的在于让尽可能多的潜在用户了解并访问网站，通过网站获得有关产品和服务等信息，为最终形成购买决策提供支持。     网站推广策略有很多，seo，email，adv
  • 单例模式,sql注入,序列 百合不是茶 单例模式序列sql注入预编译
      序列在前面写过有关的博客,也有过总结,但是今天在做一个JDBC操作数据库的相关内容时 需要使用序列创建一个自增长的字段  居然不会了,所以将序列写在本篇的前面    1,序列是一个保存数据连续的增长的一种方式; 序列的创建; CREATE SEQUENCE seq_pro 2 INCREMENT BY 1 -- 每次加几个 3
  • Mockito单元测试实例 bijian1013 单元测试mockito
    Mockito单元测试实例： public class SettingServiceTest { private List<PersonDTO> personList = new ArrayList<PersonDTO>(); @InjectMocks private SettingPojoService settin
  • 精通Oracle10编程SQL(9)使用游标 bijian1013 oracle数据库plsql
    /* *使用游标 */ --显示游标 --在显式游标中使用FETCH...INTO语句 DECLARE CURSOR emp_cursor is select ename,sal from emp where deptno=1; v_ename emp.ename%TYPE; v_sal emp.sal%TYPE; begin ope
  • 【Java语言】动态代理 bit1129 java语言
      JDK接口动态代理 JDK自带的动态代理通过动态的根据接口生成字节码(实现接口的一个具体类)的方式，为接口的实现类提供代理。被代理的对象和代理对象通过InvocationHandler建立关联   package com.tom; import com.tom.model.User; import com.tom.service.IUserService;
  • Java通信之URL通信基础 白糖_ javajdkwebservice网络协议ITeye
    java对网络通信以及提供了比较全面的jdk支持，java.net包能让程序员直接在程序中实现网络通信。 在技术日新月异的现在，我们能通过很多方式实现数据通信，比如webservice、url通信、socket通信等等，今天简单介绍下URL通信。 学习准备：建议首先学习java的IO基础知识   URL是统一资源定位器的简写，URL可以访问Internet和www，可以通过url
  • 博弈Java讲义 - Java线程同步 (1) boyitech java多线程同步锁
      在并发编程中经常会碰到多个执行线程共享资源的问题。例如多个线程同时读写文件，共用数据库连接，全局的计数器等。如果不处理好多线程之间的同步问题很容易引起状态不一致或者其他的错误。    同步不仅可以阻止一个线程看到对象处于不一致的状态，它还可以保证进入同步方法或者块的每个线程，都看到由同一锁保护的之前所有的修改结果。处理同步的关键就是要正确的识别临界条件（cri
  • java-给定字符串，删除开始和结尾处的空格，并将中间的多个连续的空格合并成一个。 bylijinnan java
    public class DeleteExtraSpace { /** * 题目：给定字符串，删除开始和结尾处的空格，并将中间的多个连续的空格合并成一个。 * 方法1.用已有的String类的trim和replaceAll方法 * 方法2.全部用正则表达式，这个我不熟 * 方法3.“重新发明轮子”，从头遍历一次 */ public static v
  • An error has occurred.See the log file错误解决！ Kai_Ge MyEclipse
    今天早上打开MyEclipse时，自动关闭！弹出An error has occurred.See the log file错误提示！ 很郁闷昨天启动和关闭还好着！！！打开几次依然报此错误，确定不是眼花了！ 打开日志文件！找到当日错误文件内容： --------------------------------------------------------------------------
  • [矿业与工业]修建一个空间矿床开采站要多少钱? comsci
           地球上的钛金属矿藏已经接近枯竭...........        我们在冥王星的一颗卫星上面发现一些具有开采价值的矿床.....        那么,现在要编制一个预算,提交给财政部门..
  • 解析Google Map Routes dai_lm google api
    为了获得从A点到B点的路劲，经常会使用Google提供的API，例如 [url] http://maps.googleapis.com/maps/api/directions/json?origin=40.7144,-74.0060&destination=47.6063,-122.3204&sensor=false [/url] 从返回的结果上，大致可以了解应该怎么走，但
  • SQL还有多少“理所应当”？ datamachine sql
    转贴存档，原帖地址：http://blog.chinaunix.net/uid-29242841-id-3968998.html、http://blog.chinaunix.net/uid-29242841-id-3971046.html！ ------------------------------------华丽的分割线--------------------------------
  • Yii使用Ajax验证时，如何设置某些字段不需要验证 dcj3sjt126com Ajaxyii
    经常像你注册页面,你可能非常希望只需要Ajax去验证用户名和Email,而不需要使用Ajax再去验证密码,默认如果你使用Yii 内置的ajax验证Form,例如: $form=$this->beginWidget('CActiveForm', array(        'id'=>'usuario-form',&
  • 使用git同步网站代码 dcj3sjt126com crontabgit
    转自:http://ued.ctrip.com/blog/?p=3646?tn=gongxinjun.com   管理一网站，最开始使用的虚拟空间，采用提供商支持的ftp上传网站文件，后换用vps，vps可以自己搭建ftp的，但是懒得搞，直接使用scp传输文件到服务器，现在需要更新文件到服务器，使用scp真的很烦。发现本人就职的公司，采用的git+rsync的方式来管理、同步代码，遂
  • sql基本操作 蕃薯耀 sqlsql基本操作sql常用操作
    sql基本操作 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> 蕃薯耀 2015年6月1日 17:30:33 星期一     &
  • Spring4+Hibernate4+Atomikos3.3多数据源事务管理 hanqunfeng Hibernate4
    Spring3+后不再对JTOM提供支持，所以可以改用Atomikos管理多数据源事务。Spring2.5+Hibernate3+JTOM参考：http://hanqunfeng.iteye.com/blog/1554251Atomikos官网网站：http://www.atomikos.com/   一.pom.xml <dependency> <
  • jquery中两个值得注意的方法one()和trigger()方法 jackyrong trigger
      在jquery中，有两个值得注意但容易忽视的方法，分别是one()方法和trigger()方法,这是从国内作者<<jquery权威指南》一书中看到不错的介绍 1） one方法     one方法的功能是让所选定的元素绑定一个仅触发一次的处理函数，格式为    one(type,${data},fn) &nb
  • 拿工资不仅仅是让你写代码的 lampcy 工作面试咨询
    这是我对团队每个新进员工说的第一件事情。这句话的意思是，我并不关心你是如何快速完成任务的，哪怕代码很差，只要它像救生艇通气门一样管用就行。这句话也是我最喜欢的座右铭之一。 这个说法其实很合理：我们的工作是思考客户提出的问题，然后制定解决方案。思考第一，代码第二，公司请我们的最终目的不是写代码，而是想出解决方案。 话粗理不粗。 付你薪水不是让你来思考的，也不是让你来写代码的，你的目的是交付产品
  • 架构师之对象操作----------对象的效率复制和判断是否全为空 nannan408 架构师
    1.前言。   如题。 2.代码。 (1)对象的复制，比spring的beanCopier在大并发下效率要高，利用net.sf.cglib.beans.BeanCopier Src src=new Src(); BeanCopier beanCopier = BeanCopier.create(Src.class, Des.class, false);
  • ajax 被缓存的解决方案 Rainbow702 JavaScriptjqueryAjaxcache缓存
    使用jquery的ajax来发送请求进行局部刷新画面，各位可能都做过。 今天碰到一个奇怪的现象，就是，同一个ajax请求，在chrome中，不论发送多少次，都可以发送至服务器端，而不会被缓存。但是，换成在IE下的时候，发现，同一个ajax请求，会发生被缓存的情况，只有第一次才会被发送至服务器端，之后的不会再被发送。郁闷。 解决方法如下： ① 直接使用 JQuery提供的 “cache”参数，
  • 修改date.toLocaleString()的警告 tntxia String
      我们在写程序的时候，经常要查看时间，所以我们经常会用到date.toLocaleString()，但是date.toLocaleString()是一个过时 的API，代替的方法如下：   package com.tntxia.htmlmaker.util; import java.text.SimpleDateFormat; import java.util.
  • 项目完成后的小总结 xiaomiya js总结项目
    项目完成了，突然想做个总结但是有点无从下手了。 做之前对于客户端给的接口很模式。然而定义好了格式要求就如此的愉快了。 先说说项目主要实现的功能吧 1，按键精灵 2，获取行情数据 3，各种input输入条件判断 4，发送数据（有json格式和string格式） 5，获取预警条件列表和预警结果列表， 6，排序， 7，预警结果分页获取 8，导出文件（excel，text等） 9，修
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他