Miniebin
Miniebin

MATLAB-相机标定

MATLAB-相机标定

这篇文章主要介绍如何使用Matlab进行相机，其实有很多方法可以实现相机的标定，比如使用OpenCV, ROS camera calibration 等等工具。但是我自己还是比较喜欢用MATLAB， 因为方便简单，只需要拍些照片，读取进去就直接能得到内参。

实现前提：安装了camera calibration 在Matlab

  1. 打印棋盘格 ，打印成A4 size, 可以在这里下载棋盘格，然后用标定相机，各个角度拍棋盘格，存起来待标定
    我打印的是：A4 - 25mm squares - 8x6 verticies, 9x7 squares
    25 mm 后面在导入图片时候要填的checkerboard square size

MATLAB-相机标定_第1张图片
2. 打开MATLAB Apps 下的 camera calibration 软件
MATLAB-相机标定_第2张图片

3.点击 add images
MATLAB-相机标定_第3张图片

4.填写棋盘格的大小，这个大小跟你下载的棋盘格有关
MATLAB-相机标定_第4张图片

5.选择所有图片并导入
MATLAB-相机标定_第5张图片
6. 导入成功后，点击Calibrate
MATLAB-相机标定_第6张图片
7. 拖动红色线，选择平均误差比较小（小于0.5)的图片
MATLAB-相机标定_第7张图片

8.然后点击Export Camera Parameters to workspace
MATLAB-相机标定_第8张图片
9. 回到Matlab 工作空间界面，你会看到有camera parameters， Intrinsics 里面就包括了相机的内参
MATLAB-相机标定_第9张图片
10. Intrinsics Matrix 就是内参矩阵， RadiaDistortion 就是径向畸变，TangentialDistortion 就是切向畸变
MATLAB-相机标定_第10张图片
11. 内参矩阵各个数值的含义,更多详情参考Matlab 官网
MATLAB-相机标定_第11张图片

你可能感兴趣的:(matlab,自动驾驶)

  • 书籍-《控制理论的数学导论（第三版）》 机器人数学
    书籍：AMathematicalIntroductiontoControlTheory作者：ShlomoEngelberg出版：WorldScientificPublishingCompany编辑：陈萍萍的公主@一点人工一点智能下载：《控制理论的数学导论（第三版）》01书籍介绍本书在数学严谨性和工程应用之间达到了完美的平衡，有助于学生全面理解控制理论的数学和工程层面。本书不仅有效运用了MATLAB
  • MATLAB代码实现了一个图形用户界面（GUI）程序，主要用于处理与水的物理性质相关的计算和绘图任务 go5463158465 MATLAB专栏深度学习算法matlab前端javascript
    functionvarargout=ruanjian(varargin)%RUANJIANMATLABcodeforruanjian.fig%RUANJIAN,byitself,createsanewRUANJIANorraisestheexisting%singleton*.%%H=RUANJIANreturnsthehandletoanewRUANJIANorthehandleto%theex
  • MATLAB中count函数用法 jk_101 Matlabmatlab开发语言
    目录语法说明示例对出现次数计数使用模式对数字和字母进行计数多个子字符串的所有出现次数忽略大小写对字符向量中的子字符串进行计数count函数的功能是计算字符串中模式的出现次数。语法A=count(str,pat)A=count(str,pat,'IgnoreCase',true)说明A=count(str,pat)返回pat在str中的出现次数。如果pat是包含多个模式的数组，则count返回pat
  • 基于图像处理的裂缝宽度检测系统-matlab 人工智能专属驿站 计算机视觉图像处理人工智能
    图像处理技术广泛地应用于桥梁、房屋、道路等工程施工中出现的表面裂缝,利用数字图像处理技术来测量结构物表面裂缝宽度是一种无损检测方法.基于图像处理的裂缝宽度检测系统需采用的图像处理算法有:（1）读取裂缝图像；（2）图像转化为灰度图像；（3）图像的增强；（4）平滑滤波；（5）阈值分割；（6）形态学去噪；（7）边缘检测(Canny算子)；（8）边缘坐标点的提取；结果见：源程序见：基于图像处理的裂缝宽度检
  • 通过MATLAB/Simulink平台，使用时域分析法评估一个典型控制系统的响应速度性能指标 xiaoheshang_123 MATLAB开发项目实例1000例专栏手把手教你学MATLAB专栏simulinkmatlab
    目录基于Simulink的时域分析法评估系统的响应速度性能指标1.背景介绍1.1项目背景1.2系统描述1.3应用场景2.系统架构设计2.1系统框图2.2数学模型3.Simulink仿真模型步骤3.1创建Simulink模型3.2添加模块3.2.1阶跃输入模块3.2.2系统模型模块3.2.3输出显示模块3.2.4数据记录模块3.3连接模块3.4设置仿真参数3.5运行仿真4.响应速度性能指标计算5.参
  • matlab 延迟算子,时间序列分析-----2---时间序列预处理 这块必被安排 matlab延迟算子
    既然有了序列，那怎么拿来分析呢？时间序列分析方法分为描述性时序分析和统计时序分析。1、描述性时序分析通过直观的数据比较或绘图观测，寻找序列中蕴含的发展规律，这种分析方法就称为描述性时序分析。描述性时序分析方法具有操作简单、直观有效的特点，它通常是人们进行统计时序分析的第一步。2、统计时序分析(1)频域分析方法原理：假设任何一种无趋势的时间序列都可以分解成若干不同频率的周期波动发展过程：1)早期的频
  • 智能优化算法应用：基于群居蜘蛛算法与双伽马校正的图像自适应增强算法 智能算法研学社（Jack旭） 智能优化算法应用图像增强算法计算机视觉人工智能
    智能优化算法应用：基于群居蜘蛛算法与双伽马校正的图像自适应增强算法-附代码文章目录智能优化算法应用：基于群居蜘蛛算法与双伽马校正的图像自适应增强算法-附代码1.全局双伽马校正2.群居蜘蛛算法3.适应度函数设计4.实验与算法结果5.参考文献6.Matlab代码摘要：本文主要介绍基于群居蜘蛛算法与双伽马校正的图像自适应增强算法。1.全局双伽马校正设图像的灰度值范围被归一化到[0,1]范围之内，基于全局
  • 基于遗传算法求解带有时间窗、车载容量限制、多车辆、单配送中心路径优化VRPTW（多约束）matlab代码 天天Matlab科研工作室 智能优化算法matlab仿真无人机matlab仿真电子资源matlab算法自动驾驶
    1数学模型(1)有关模型的说明和假设1)模型中的已知量有：各需求点的位置坐标、各需求点的物料需求数量，各需求点的物料的到达时间要求，配送中心到各需求点的最短行驶距离，各需求点互相之间的最短运输距离。2)现场调查发现，需要配送的物料是可以混装在同一物料架上的，且各需求点需要的物料数量小于物料仓库的库存量。3)忽略在配送过程中车辆遇到的拥挤排队等不利于生产进行的外界因素，也就是说整个装配车间正常运行。
  • LightGBM+NRBO-Transformer-BiLSTM多变量回归预测 Matlab代码 前程算法屋 私信获取源码transformer回归matlab
    LightGBM+NRBO-Transformer-BiLSTM多变量回归预测Matlab代码一、引言1.1、研究背景与意义在现代数据科学领域，多变量回归预测问题一直是一个研究热点。随着互联网和物联网技术的迅速发展，数据量呈指数级增长，如何从这些海量数据中提取有用的信息，并进行准确预测，成为了一个亟待解决的问题。多变量回归预测模型在金融风险管理、气象预报、医疗健康等多个领域具有广泛的应用。例如，在
  • 自动驾驶系列—颠覆未来驾驶：深入解析自动驾驶线控转向系统技术 学步_技术 自动驾驶自动驾驶人工智能机器学习线控系统
    欢迎来到我的技术小筑，一个专为技术探索者打造的交流空间。在这里，我们不仅分享代码的智慧，还探讨技术的深度与广度。无论您是资深开发者还是技术新手，这里都有一片属于您的天空。让我们在知识的海洋中一起航行，共同成长，探索技术的无限可能。探索专栏：学步_技术的首页——持续学习，不断进步，让学习成为我们共同的习惯，让总结成为我们前进的动力。技术导航：人工智能：深入探讨人工智能领域核心技术。自动驾驶：分享自动
  • 根据deepseek模型微调训练自动驾驶模型及数据集的思路 ywfwyht 自动驾驶深度学习人工智能自动驾驶人工智能机器学习
    以下是使用DeepSeek模型微调训练自动驾驶模型的详细步骤和代码示例。本流程假设你已有自动驾驶领域的数据集（如驾驶指令、传感器数据等），并基于PyTorch框架实现。Step1:环境准备#安装依赖库pipinstalltorchtransformersdatasetsnumpypandasStep2:数据准备假设数据集格式为JSON，包含输入文本（传感器/场景描述）和输出控制指令：//data/
  • 自动驾驶---Motion Planning之参考线Path平滑 智能汽车人 自动驾驶人工智能
    1背景有了由lane_segment插值得到的粗糙参考线，这种参考线是无法输出给下游使用的，需要进一步的处理使得参考线更加平滑，才能供下游控制模块使用。Apollo中共有三种参考线平滑算法，分别为：1.QpSplineSmoother2.SpiralReferenceLineSmoother3.DiscretePointsSmoother目前Apollo中默认配置为最后一种，基于离散点的平滑。这种
  • 自动驾驶---Motion Planning之LaneChange 智能汽车人 自动驾驶人工智能
    1背景在Apollo中，有比较多的Decider（决策器），上篇博客《自动驾驶---MotionPlanning之Decider》中笔者也大概介绍了每个Deicder的作用。本篇博客笔者主要介绍换道的决策内容，因为在自动驾驶中（严格意义上来讲，目前还属于辅助驾驶），变道的灵活性是用户评价该功能是否好用很重要的一部分，变道迟缓或者激进都是不好的体验，所以本篇博客会结合Apollo中的LaneChan
  • matlab等距离差值,科学网—等距点插值法向牛顿前插值matlab程序 - 殷春武的博文... 老李校长 matlab等距离差值
    %%%程序编写者西北工业大学自动化学院Email：[email protected]%%Allrightsreservedclearclcx0=input('输入起始节点坐标x0=')h=input('输入步长h=')y=input('输入节点坐标函数值f(x)=')x2=input('输入所要计算的节点x2=')symstn=length(y);fori=1:nx1(i)=
  • 【DBO三维路径规划】基于matlab改进的蜣螂算法FADBO复杂山地危险模型无人机路径规划【含Matlab源码 9740期】 Matlab仿真科研站 matlab
    欢迎来到Matlab仿真科研站博客之家✅博主简介：热爱科研的Matlab仿真开发者，修心和技术同步精进，Matlab项目合作可私信。个人主页：Matlab仿真科研站博客之家代码获取方式：扫描文章底部QQ二维码⛳️座右铭：行百里者，半于九十；路漫漫其修远兮，吾将上下而求索。⛄更多Matlab路径规划（仿真科研站版）仿真内容点击Matlab路径规划（仿真科研站版）⛄一、改进的蜣螂算法FADBO复杂山地
  • cst计算rcs后如何导入matlab,用CST计算舰船RCS的问题？ 宛丘之
    背景：在做一个舰船RCS缩减的课题，用CST计算RCS，初学，遇到了一些问题不知道怎么解决？1、我用的是CST2008sp6，进入软件的时候是不是应该选RCS-largeobjects(I-solver)模板？2、探测舰船的雷达波频率一般为2GHz13GHz，是不是应该在频率范围(Frequencyrange)处设置最小2GHz，最大13GHz？3、频率范围(Frequencyrange)的设置是
  • matlab调用cst计算扫频,CST MWS I算法求解单站RCS是否可以进行扫频设置 林为珮 matlab调用cst计算扫频
    如题，利用I算法的FastRCSSweep求解单站RCS是否可以添加扫频设置？如果有如何添加？因为需要，必须计算一个介质目标的单站RCS，所以A算法用不了了。而I算法里面的快速RCS里又没找到扫频的设置，我知道有双站远场监视器的宏，但是单站RCS就不知道怎么办了，请各位大大帮忙解答网友回复:看看在这里设置一下fromto能不能解决扫频问题。网友回复:提供一个新思路，如果是介质的话可以用涂覆操作，这
  • 第四章：Matlab 数据处理与分析 正是读书时 《邂逅matlab人工智能大数据
    第四章：Matlab数据处理与分析4.1数据的导入与导出4.1.1从文件导入数据文本文件:使用load,importdata,textscan等函数。Excel文件:使用xlsread,readtable等函数。MAT文件:使用load函数。代码示例:%从文本文件导入数据(假设文件名为data.txt)%load函数适用于纯数值数据data1=load('data.txt');%importdat
  • Matlab基础入门手册（第三章：运算符） freexyn matlab线性代数矩阵
    目录第三章运算符1.16算术运算1.17算术常用函数1.18逻辑运算1.19关系运算1.20运算符的优先级1.21兼容性第三章运算符1.16算术运算1.算术运算（arithmetic）主要指加减乘除、幂和舍入等运算2.说明Matlab有两种不同类型的算术运算：数组运算和矩阵运算数组运算基于元素的运算，支持任意向量、矩阵和多维数组矩阵运算遵循线性代数的规则字符（.）区分矩阵运算和数组运算数组运算和矩
  • 计算四个锚点TOA定位中GDOP的详细步骤和MATLAB例程 MATLAB卡尔曼 MATLAB定位程序与详解matlab开发语言
    该MATLAB代码演示了在三维空间中，使用四个锚点的TOA（到达时间）定位技术计算几何精度衰减因子（GDOP）的过程。如需帮助，或有导航、定位滤波相关的代码定制需求，请联系作者文章目录DOP计算原理MATLAB例程运行结果示例关键点说明扩展方向另有文章：多锚点Wi-Fi定位和基站选择方法，基于GDOP、基站距离等因素DOP计算原理GDOP（几何精度衰减因子）用于评估定位系统中锚点几何分布对定位精度
  • 第一章：Matlab 基础入门 正是读书时 《邂逅matlab
    第一章：Matlab基础入门1.1基本数据类型MATLAB支持多种数据类型，包括数值型、字符型、逻辑型等。了解这些数据类型是使用MATLAB进行编程的基础。1.1.1数值型数据整数:表示整数值，例如1,-5,100等。浮点数:表示带有小数部分的数值，例如3.14,-0.001,2.71828等。代码示例:%定义整数a=10;b=-5;%定义浮点数c=3.14159;d=-0.001;%显示变量类型
  • 一文带你了解人工智能：现状、应用、变革及未来展望 空青726 人工智能chatgptai大数据机器学习深度学习创业创新
    近年来，人工智能（AI）的发展势头迅猛，它已经渗透到了我们生活的方方面面。从智能手机的语音助手到自动驾驶汽车，从智能家居到医疗诊断，AI正在改变着我们的生活方式。本文将结合时事，为大家介绍当前人工智能的发展形势、在生活中的应用、人工智能的变革以及未来的发展方向。一、人工智能的发展形势1.深度学习：深度学习是当前AI领域的热门话题。通过模拟人脑神经元之间的相互作用，深度学习算法能够从大量数据中提取出
  • simulink介绍-ChatGPT4o作答 部分分式 matlab
    Simulink是MATLAB的一个附加模块，由MathWorks开发，用于多领域的动态系统建模、仿真和分析。它提供了基于图形化的拖放式界面，让用户可以通过图形化的方式构建复杂的系统模型，从而进行控制系统、信号处理、通信系统、自动控制等应用领域的设计和仿真。以下是Simulink的详细介绍：1.Simulink的核心功能Simulink的主要功能包括：图形化建模：Simulink提供直观的图形化界
  • 基于A*算法与贝塞尔曲线的路径规划与可视化：从栅格地图到平滑路径生成 机器懒得学习 pygamepython
    引言在机器人导航、自动驾驶和游戏开发等领域，路径规划是一个核心问题。如何高效地找到从起点到终点的最优路径，并且确保路径的平滑性和安全性，是许多应用场景中的关键挑战。本文将介绍一种结合A算法和贝塞尔曲线的路径规划方法，并通过Pygame实现可视化。我们将从栅格地图的加载与处理开始，逐步讲解A算法的实现、贝塞尔曲线的生成，以及如何通过鼠标交互实现动态路径规划。通过本文，你将掌握如何在实际项目中应用这些
  • 《DeepSeek Janus Pro 7B：多模态人工智能大模型部署全攻略》 空云风语 神经网络人工智能深度学习人工智能
    《DeepSeekJanusPro7B：多模态人工智能大模型部署全攻略》引言：开启多模态AI新世界在科技飞速发展的当下，多模态AI已成为人工智能领域中最耀眼的明星，正以前所未有的速度改变着我们的生活与工作方式。从智能语音助手到图像识别系统，从自动驾驶汽车到智能医疗诊断，多模态AI的身影无处不在，它让机器能够理解和处理多种类型的信息，如文本、图像、音频等，从而实现更加智能、高效的交互。DeepSee
  • 【教程4＞第5章＞第28节】基于帧同步+相位同步+位同步的QPSK调制解调通信系统整体性能分析 fpga和matlab #fpga开发帧同步+相位同步+位同步QPSK教程4
    欢迎订阅FPGA/MATLAB/Simulink系列教程《★教程1:matlab入门100例》《★教程2:fpga入门100例》《★教程3:simulink入门60例》《★教程4:FPGA/MATLAB/Simulink联合开发入门与进阶X例》目录1.软件版本2.系统资源占用3.系统性能分析3.1信噪比设置3.2时偏设置3.3相位偏差设置4.总结
  • MATLAB出现“变量似乎要更改脚本中每个循环迭代的大小。请考虑对速度进行预分配。”警告如何解决... 滚菩提哦呢 算法
    这个警告意味着你在MATLAB脚本中使用了一个循环，循环迭代中修改了变量的大小，但是未对该变量进行预分配。这可能会影响脚本的效率和性能。解决方案是：在循环开始前，通过预先分配内存来提高脚本的性能。例如，如果要循环一百次并将结果保存在数组中，可以在循环前执行以下操作：result=zeros(1,100);fori=1:100result(i)=...end这样可以避免MATLAB在循环中多次分配内
  • 优化算法全景解析：从梯度下降到群体智能 welcome_123_ 算法python人工智能
    一、引言：为什么需要优化算法？在AlphaGo击败人类围棋冠军的背后，在特斯拉自动驾驶系统实时决策的瞬间，在推荐系统精准推送内容的过程中，优化算法始终是推动这些技术落地的核心引擎。无论是机器学习模型的训练，还是复杂系统的参数调优，优化算法的本质是：在给定的约束条件下，找到使目标函数最优的解。本文将深入解析优化算法的核心原理、经典方法、现代进展及实战应用，助你全面掌握这一技术利器。二、优化算法分类图
  • 基于深度学习YOLOv8的海洋动物检测系统（Python+PySide6界面+训练代码） 深度学习&目标检测实战项目 深度学习YOLOpython目标检测人工智能开发语言
    引言近年来，计算机视觉技术在各行各业中得到了广泛的应用，特别是在智能监控、自动驾驶、医疗诊断等领域。深度学习，尤其是卷积神经网络（CNN）的出现，极大地提高了计算机处理图像和视频的能力。在这一领域，YOLO（YouOnlyLookOnce）系列模型以其高效且准确的目标检测能力，成为了当下最为流行的深度学习模型之一。在海洋生物保护、海洋环境监测等应用中，快速识别和检测海洋动物种类对于科学研究和保护工
  • matlab 代码通过有限差分法模拟了二维非稳态导热问题，并将初始时刻、最终时刻的温度分布以及温度场随时间的变化进行了可视化展示 go5463158465 算法matlabmatlab算法开发语言
    clc;clearall;closeall;xlength=1;%x方向长度ylength=1;%y方向长度a=1e-4;%导温系数nx=15;%x方向网格数目ny=15;%y方向网格数目deltax=xlength/nx;%x方向单个网格长度deltay=ylength/ny;%y方向单个网格长度t=1600;%总时间nt=150;%时间步长deltat=t/nt;%时间步%给网格点编号，定义边
  • jdk tomcat 环境变量配置 Array_06 javajdktomcat
    Win7 下如何配置java环境变量 1。准备jdk包，win7系统，tomcat安装包（均上网下载即可） 2。进行对jdk的安装，尽量为默认路径（但要记住啊！！以防以后配置用。。。） 3。分别配置高级环境变量。   电脑-->右击属性-->高级环境变量-->环境变量。 分别配置 : path    &nbs
  • Spring调SDK包报java.lang.NoSuchFieldError错误 bijian1013 javaspring
            在工作中调另一个系统的SDK包，出现如下java.lang.NoSuchFieldError错误。 org.springframework.web.util.NestedServletException: Handler processing failed; nested exception is java.l
  • LeetCode[位运算] - #136 数组中的单一数 Cwind java题解位运算LeetCodeAlgorithm
    原题链接：#136 Single Number 要求： 给定一个整型数组，其中除了一个元素之外，每个元素都出现两次。找出这个元素 注意：算法的时间复杂度应为O(n)，最好不使用额外的内存空间 难度：中等 分析： 题目限定了线性的时间复杂度，同时不使用额外的空间，即要求只遍历数组一遍得出结果。由于异或运算 n XOR n = 0, n XOR 0 = n，故将数组中的每个元素进
  • qq登陆界面开发 15700786134 qq
    今天我们来开发一个qq登陆界面，首先写一个界面程序，一个界面首先是一个Frame对象，即是一个窗体。然后在这个窗体上放置其他组件。代码如下： public class First {         public void initul(){        jf=ne
  • Linux的程序包管理器RPM 被触发 linux
    在早期我们使用源代码的方式来安装软件时，都需要先把源程序代码编译成可执行的二进制安装程序，然后进行安装。这就意味着每次安装软件都需要经过预处理-->编译-->汇编-->链接-->生成安装文件--> 安装，这个复杂而艰辛的过程。为简化安装步骤，便于广大用户的安装部署程序，程序提供商就在特定的系统上面编译好相关程序的安装文件并进行打包，提供给大家下载，我们只需要根据自己的
  • socket通信遇到EOFException 肆无忌惮_ EOFException
    java.io.EOFException at java.io.ObjectInputStream$PeekInputStream.readFully(ObjectInputStream.java:2281) at java.io.ObjectInputStream$BlockDataInputStream.readShort(ObjectInputStream.java:
  • 基于spring的web项目定时操作 知了ing javaWeb
    废话不多说，直接上代码，很简单 配置一下项目启动就行 1，web.xml <?xml version="1.0" encoding="UTF-8"?> <web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="h
  • 树形结构的数据库表Schema设计 矮蛋蛋 schema
    原文地址： http://blog.csdn.net/MONKEY_D_MENG/article/details/6647488     程序设计过程中，我们常常用树形结构来表征某些数据的关联关系，如企业上下级部门、栏目结构、商品分类等等，通常而言，这些树状结构需要借助于数据库完成持久化。然而目前的各种基于关系的数据库，都是以二维表的形式记录存储数据信息，
  • maven将jar包和源码一起打包到本地仓库 alleni123 maven
    http://stackoverflow.com/questions/4031987/how-to-upload-sources-to-local-maven-repository <project> ... <build> <plugins> <plugin> <groupI
  • java IO操作 与 File 获取文件或文件夹的大小，可读，等属性！！！ 百合不是茶
    类 File File是指文件和目录路径名的抽象表示形式。 1，何为文件： 标准文件（txt doc mp3...） 目录文件（文件夹） 虚拟内存文件   2，File类中有可以创建文件的 createNewFile（）方法,在创建新文件的时候需要try{} catch(）{}因为可能会抛出异常；也有可以判断文件是否是一个标准文件的方法isFile();这些防抖都
  • Spring注入有继承关系的类（2） bijian1013 javaspring
    被注入类的父类有相应的属性，Spring可以直接注入相应的属性，如下所例：1.AClass类 package com.bijian.spring.test4; public class AClass { private String a; private String b; public String getA() { retu
  • 30岁转型期你能否成为成功人士 bijian1013 成长励志
            很多人由于年轻时走了弯路，到了30岁一事无成，这样的例子大有人在。但同样也有一些人，整个职业生涯都发展得很优秀，到了30岁已经成为职场的精英阶层。由于做猎头的原因，我们接触很多30岁左右的经理人，发现他们在职业发展道路上往往有很多致命的问题。在30岁之前，他们的职业生涯表现很优秀，但从30岁到40岁这一段，很多人
  • 【Velocity四】Velocity与Java互操作 bit1129 velocity
    Velocity出现的目的用于简化基于MVC的web应用开发，用于替代JSP标签技术，那么Velocity如何访问Java代码.本篇继续以Velocity三http://bit1129.iteye.com/blog/2106142中的例子为基础，      POJO    package com.tom.servlets; public
  • 【Hive十一】Hive数据倾斜优化 bit1129 hive
    什么是Hive数据倾斜问题   操作：join,group by,count distinct 现象：任务进度长时间维持在99%（或100%），查看任务监控页面，发现只有少量（1个或几个）reduce子任务未完成；查看未完成的子任务，可以看到本地读写数据量积累非常大，通常超过10GB可以认定为发生数据倾斜。 原因：key分布不均匀 倾斜度衡量：平均记录数超过50w且
  • 在nginx中集成lua脚本：添加自定义Http头，封IP等 ronin47 nginx lua csrf
    Lua是一个可以嵌入到Nginx配置文件中的动态脚本语言，从而可以在Nginx请求处理的任何阶段执行各种Lua代码。刚开始我们只是用Lua 把请求路由到后端服务器，但是它对我们架构的作用超出了我们的预期。下面就讲讲我们所做的工作。 强制搜索引擎只索引mixlr.com Google把子域名当作完全独立的网站，我们不希望爬虫抓取子域名的页面，降低我们的Page rank。 location /{
  • java-3.求子数组的最大和 bylijinnan java
    package beautyOfCoding; public class MaxSubArraySum { /** * 3.求子数组的最大和 题目描述： 输入一个整形数组，数组里有正数也有负数。 数组中连续的一个或多个整数组成一个子数组，每个子数组都有一个和。 求所有子数组的和的最大值。要求时间复杂度为O(n)。 例如输入的数组为1, -2, 3, 10, -4,
  • Netty源码学习-FileRegion bylijinnan javanetty
    今天看org.jboss.netty.example.http.file.HttpStaticFileServerHandler.java 可以直接往channel里面写入一个FileRegion对象，而不需要相应的encoder： //pipeline（没有诸如“FileRegionEncoder”的handler）： public ChannelPipeline ge
  • 使用ZeroClipboard解决跨浏览器复制到剪贴板的问题 cngolon 跨浏览器复制到粘贴板Zero Clipboard
    Zero Clipboard的实现原理 Zero Clipboard 利用透明的Flash让其漂浮在复制按钮之上，这样其实点击的不是按钮而是 Flash ，这样将需要的内容传入Flash，再通过Flash的复制功能把传入的内容复制到剪贴板。 Zero Clipboard的安装方法 首先需要下载 Zero Clipboard的压缩包，解压后把文件夹中两个文件：ZeroClipboard.js
  • 单例模式 cuishikuan 单例模式
    第一种（懒汉，线程不安全）： public class Singleton {   2     private static Singleton instance;   3     pri
  • spring+websocket的使用 dalan_123
    一、spring配置文件 <?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"    xmlns:xsi="http://www.w3.or
  • 细节问题：ZEROFILL的用法范围。 dcj3sjt126com mysql
    1、zerofill把月份中的一位数字比如1，2，3等加前导0 mysql> CREATE TABLE t1 (year YEAR(4), month INT(2) UNSIGNED ZEROFILL,    -> day
  • Android开发10——Activity的跳转与传值 dcj3sjt126com Android开发
    Activity跳转与传值，主要是通过Intent类，Intent的作用是激活组件和附带数据。   一、Activity跳转 方法一Intent intent = new Intent(A.this, B.class); startActivity(intent)   方法二Intent intent = new Intent();intent.setCla
  • jdbc 得到表结构、主键 eksliang jdbc 得到表结构、主键
    转自博客：http://blog.csdn.net/ocean1010/article/details/7266042 假设有个con DatabaseMetaData dbmd = con.getMetaData(); rs = dbmd.getColumns(con.getCatalog(), schema, tableName, null); rs.getSt
  • Android 应用程序开关GPS gqdy365 android
    要在应用程序中操作GPS开关需要权限： <uses-permission android:name="android.permission.WRITE_SECURE_SETTINGS" /> 但在配置文件中添加此权限之后会报错，无法再eclipse里面正常编译，怎么办？ 1、方法一：将项目放到Android源码中编译； 2、方法二：网上有人说cl
  • Windows上调试MapReduce zhiquanliu mapreduce
    1.下载hadoop2x-eclipse-plugin https://github.com/winghc/hadoop2x-eclipse-plugin.git 把 hadoop2.6.0-eclipse-plugin.jar 放到eclipse plugin 目录中。 2.下载 hadoop2.6_x64_.zip http://dl.iteye.com/topics/download/d2b
  • 如何看待一些知名博客推广软文的行为？ justjavac 博客
    本文来自我在知乎上的一个回答：http://www.zhihu.com/question/23431810/answer/24588621 互联网上的两种典型心态： 当初求种像条狗，如今撸完嫌人丑 当初搜贴像条犬，如今读完嫌人软 你为啥感觉不舒服呢？ 难道非得要作者把自己的劳动成果免费给你用，你才舒服？ 就如同 Google 关闭了 Gooled Reader，那是
  • sql优化总结 macroli sql
    为了是自己对sql优化有更好的原则性，在这里做一下总结，个人原则如有不对请多多指教。谢谢！   要知道一个简单的sql语句执行效率，就要有查看方式，一遍更好的进行优化。   一、简单的统计语句执行时间 declare @d datetime ---定义一个datetime的变量set @d=getdate() ---获取查询语句开始前的时间select user_id
  • Linux Oracle中常遇到的一些问题及命令总结 超声波 oraclelinux
    1.linux更改主机名   (1)#hostname oracledb　　　　临时修改主机名 (2) vi /etc/sysconfig/network 　　修改hostname (3) vi /etc/hosts　　　　　　　　修改IP对应的主机名   2.linux重启oracle实例及监听的各种方法 （注意操作的顺序应该是先监听，后数据库实例） &nbs
  • hive函数大全及使用示例 superlxw1234 hadoophive函数
      具体说明及示例参 见附件文档。     文档目录：   目录 一、关系运算： 4 1. 等值比较: = 4 2. 不等值比较: <> 4 3. 小于比较: < 4 4. 小于等于比较: <= 4 5. 大于比较: > 5 6. 大于等于比较: >= 5 7. 空值判断: IS NULL 5
  • Spring 4.2新特性-使用@Order调整配置类加载顺序 wiselyman spring 4
    4.1 @Order Spring 4.2 利用@Order控制配置类的加载顺序 4.2 演示 两个演示bean package com.wisely.spring4_2.order; public class Demo1Service { } package com.wisely.spring4_2.order; public class
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他