- 《音视频:将h264裸流转为YUV》
编程界的小学生、
音视频开发音视频嵌入式
文章目录一,前言二,分解步骤2.1初始化解码器2.2释放解码器资源2.3获取完整帧数据2.4h264转yuv2.5h264裸流文件转yuv2.6解RTP包后h264转yuv三,完整代码一,前言本文旨在将h264裸流数据转为yuv数据,分为两种情况一种是读取h264文件,一次性将读取到的所有h264数据给到解码器转为yuv,一种是从网络中接收含h264数据的RTP,这种情况下需要先对RTP包进行解包
- OpenHarmony AVCodec模块分析(五):扩展新的视频编解码格式
少年的云河月
#OpenHarmony媒体编解码组件视频编解码
一、简介目前AVCodec支持的视频编解码格式有限,只支持H264和H265视频编解码格式,但实际场景可能需要其他的编解码格式,本篇介绍如何扩展新的视频编解码格式。二、前言版本信息:OpenHarmony-4.0-Release(不同版本代码可能略有不同)新增格式:以添加视频解码AV1为例,mimetype为"video/x-av1"备注:下面代码中“+”代表新增,“-”代表删除三、扩展流程1、C
- H.264---序列参数集(SPS)---宽高获取
SXM19940913sxm
H264
SequenceParamaterSet(NALUnit=7)SPS和PPS一般处于码流的起始位置,但也可能出现在码流中间,主要原因是:1、解码器需要在码流中间开始解码;2、编码器在编码的过程中改变了码流的参数(如图像分辨率等);SPS结构(H264文档7.3.2.1)/**
[email protected]*
- FFmpeg 4.3 音视频-多路H265监控录放C++开发十三:将AVFrame转换成AVPacket。视频编码原理.编码相关api,H264特殊参数说明
hunandede
FFmpeg4.3ffmpeg音视频c++
前提:从前面的学习我们知道AVFrame中是最原始的视频数据,这一节开始我们需要将这个最原始的视频数据压缩成AVPacket数据,我们前面,将YUV数据或者RGBA数据装进入了AVFrame里面,并且在SDL中显示。也就是说:对于安防项目来说,我们将原始从摄像头数据(YUV,RGB)转换成AVFrame后,可以直接显示出来。但是如果我们将要数据存储,则要将AVFrame转成AVPacket.视频编
- RV1126视频采集
weixin_45281309
嵌入式Linux音视频c++嵌入式硬件
简介:将摄像头采集的视频以H264编码存储在本地文件test_out.h264里,并以ffmpeg播放**1.**流程图2.源代码bananapeelx_h264.h#ifndefBANANAPEELX_H264_H#defineBANANAPEELX_H264_H#include#include#include#include#include#include#include#include#in
- FFmpeg--解码:mp4文件解码为音频aac和视频h264
八月的雨季997
ffmpegaac
mp4文件解封装:视频文件(mp4)–解封装—音频流(aac),视频流(h264)流程code命令行参数:input.mp4out.h264out.aac#include#include"libavutil/log.h"#include"libavformat/avformat.h"#defineERROR_STRING_SIZE1024#defineADTS_HEADER_LEN7;intadt
- 2025-03-06 ffmpeg提取SPS/PPS/SEI ( extradata )
ihmhm12345
ffmpegffmpeg
一、需求在某些情况下,可能需要直接使用H264/H265等原始数据流进行解码,比较常用的udp下的h264/h265。这时需要av_parser_parse2来组AVPacket,但对于视频的信息:宽高、格式等,可以根据AVCodecParserContext来获取,也可以直接提取sps/pps/sei这些原始数据extradata本文讲如何从原始数据流(AVPacket)中找出extradata
- WebRTC新增FFmpeg视频编解码模块
程序员老舅
音视频开发进阶webrtc视频编解码实时音视频音视频c++
1整体描述目前webrtc内置的视频编解码器包括:VP8、VP9、AV1和H264。一般情况下载pc端基本可以满足大部分的需求,但是有时候为了进行编解码器的扩展包括支持H265或者是支持硬件编解码以提升效率时需要新增编解码模块。2新增外部编码器编码器实现的要点包括两个部分:一是需要实现以VideoEncoder为基类的编码器对象,核心API实现如下:(1)初始化编码器,将编码参数传入进行初始化。v
- Linux音视频学习--音视频编解码相关基本概念介绍
文艺小少年
IPC项目实践之音视频相关整理音视频linuxdspisp
一、引言二、ISP、DSP------>1、ISP------------>内置isp------>2、DSP三、编解码------>1、视频编码------------>各个格式(H264/H265)的编码------------>码率调节------>2、音频编码------>3、码流、采样率、比特率、采样点数概念介绍------>4、采样点数一、引言入职的事终于告一段落,现在要慢慢开始熟悉新
- RV1126的OSD模块和SDL_TTF结合输出H264文件
weixin_51931174
ffmpeg
目录一.RV1126多线程处理输出OSD字符叠加图层的流程1.1.VI模块的初始化1.2.初始化VENC模块:1.3.初始化RGN模块:1.4.绑定VI模块和VENC模块,伪代码如下1.5.创建多线程进行OSD字库的叠加:1.6.获取每一帧处理过后的VENC数据:二.程序代码三.运行结果一.RV1126多线程处理输出OSD字符叠加图层的流程用RV1126多线程输出OSD叠加需要经过上面几个重要步骤
- 【FFMPEG】各种音视频编解码学习详解 h264 ,mpeg4 ,aac 等所有音视频格式
weixin_30906425
ffmpeg大数据操作系统
目录(?)[-]编解码学习笔记二codec类型编解码学习笔记三Mpeg系列Mpeg1和Mpeg2编解码学习笔记四Mpeg系列Mpeg4编解码学习笔记五Mpeg系列AAC音频编解码学习笔记六H26x系列编解码学习笔记七微软WindowsMedia系列编解码学习笔记八Real系列编解码学习笔记九QuickTime系列编解码学习笔记十Ogg系列编解码学习笔记十一FlashVideo系列编解码学习笔记十二
- 基于RK3588 Gstreamer 硬件解码MPP 代码实例
家有工程师
RK3568Android12RK3588MPPNV12
目录1:在此之前先看比较2条指令2:重要的输出信息3:代码说明3.1appsink元素说明3.2GstCaps收到数据的格式3.3完整代码3.4CMakeList及文件结构1:在此之前先看比较2条指令gst-launch-1.0rtspsrclocation=rtsp://admin:
[email protected]:554/ch01.264!rtph264depay!h264parse
- 3.1 RK3588 MPP硬件编码YUYV为H264(待更新)
kw23571113
RK3588入门教程h.264
3.1.1资源功能描述获取USB摄像头1080P@5fpsYUYV格式图片,经过MPP编码成H264,然后写入文件。3.1.2开发环境准备(使用rock5b_debain开发)#下载依赖应用sudoaptinstall-ygitmakecmakegccg++wget#下载mpp库githttps://github.com/rockchip-linux/mpp.gitcd./mpp/build/li
- ffmpeg拉流rtmp保存h264和aac
农民工-IT
ffmpeg源码解析ffmpegaac
代码实现#include#include#includeextern"C"{#include#include}intmp4toannexb(AVBSFContext*bsf_ctx,AVPacket*pkt,std::ofstream&out){intret;ret=av_bsf_send_packet(bsf_ctx,pkt);if(retdata,pkt->size);}return0;}in
- 【音视频】 H264 H265
gma999
音视频
概述项目中接触到一些音视频领域的技术,主要对自己接触到的技术,结合自己的学习内容,进行阶段性总结,如有不正确的地方恳请指正安防领域摄像头的编码格式目前主流的是H265,但是也存在H264的视频流。项目中经常需要获取H264H265的视频流或者是将这两种视频流推送到指定的客户端,测试可以使用ZLM这种流媒体框架,具体应用开发中遇到了将视频流推送到GB28181平台。文章的主要重点也只聚焦在编解码H2
- 【音视频】RTP封包H264信息
gma999
音视频
H264-RTP封包逻辑单个NALU结构分析012301234567890123456789012345678901+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+|F|NRI|Type||+-+-+-+-+-+-+-+-+||||Bytes2..nofasingleNALunit||||+-+-+-+-+-+-+-
- H264视频编码系列教程-3关键参数集与解码初始化
TogetherWeShare
音视频人工智能算法
H264关键参数集与解码初始化1.参数集整体架构1.1层级包含关系视频码流VPS层SPS层PPS层约束约束图像参数PPS工具参数序列参数SPS工具配置编码能力VPS性能限制H264参数集采用三层架构设计,这种设计充分体现了参数管理的层次化和模块化思想。让我们深入分析每一层的功能和特点:===H264参数集层级结构===+-------------------VPS层----------------
- linux中流设备_设备端SDK(Linux)文档
知酒僧
linux中流设备
设备端SDK(Linux)文档更新时间:2019-03-1421:55:00功能描述摄像头直播:支持RTMP推流,当前视频支持H264,音频支持G711a以及AAC_LC格式.存储卡录像查看:将存储在SD卡等外存中的录像文件推到服务端,支持seek到指定位置操作.语音对讲:与App端建立双向语音通道,设备端采集录音并实时发送至App端,同时接收到App端发送的语音进行播放.拍照:抓拍当前摄像头画面
- 前端视频开发之初始化MSE SourceBuffer时正确传参——H264 codecs生成
前端mseh264codecs
本片文章主要是对H264格式的视频源进行介绍以及生成的codecs只考虑视频源不考虑音频一、场景介绍使用MSE进行视频播放时,首先需要创建一个sourceBuffer用于推流,例如constmediaSource=newMediaSource();constsourceBuffer=mediaSource.addSourceBuffer('video/mp4;codecs="avc1.64001f
- TX2+FFmpeg+OpenCV读取显示网络摄像头
宗而研之
#NVIDIAJetson
作者:JasonDing链接:https://www.jianshu.com/p/6ef3c18d61b0來源:简书著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。引子OpenCV中有自己的用于处理图片和视频的类VideoCapture,可以很方便的读入文件和显示。现在视频数据流是ffmpeg解码h264文件得到的,由于要依赖该数据源进行相应的后续处理,所以需要将ffmpeg中
- 【音视频】RTSP拉流: RTP协议头部详解(二)
自由柿
音视频
此文为系列文章,此系列主要讲解RTSP客户端的拉流及播放,文章持续更新,会从rtsp的基本协议讲起,如何一步步实现音视频的拉流过程,包括一系列涉及到的协议,rtsp,sdp,rtp(本系列文章的核心内容会放在rtp协议,会重点介绍讲解rtp负载部分),rtcp,从rtp解析aac,h264数据帧,得到帧后如何交给解码库(ffmpeg,libVLC,live555等)进行解码,音视频同步并播放音
- h264和h265视频流SDP描述详解
艾浅觅
流媒体协议开发知识音视频
h264和h265视频流SDP描述详解文章目录h264和h265视频流SDP描述详解1SDP概述2.SDP媒体描述极其扩展属性2.1m属性介绍2.2a=control附加属性介绍2.3a=rtpmap附加属性介绍2.4a=fmtp附加属性介绍SDP(SessionDescriptionProtocol)会话描述协议,是一种用来描述信息格式的标准,它不是一种用于传输的协议而是由ITEF组织下的MMu
- webrtc报错:Unable to load:src/third_party/usrsctp/BUILD.gn
、、、、南山小雨、、、、
webrtcwebrtc音视频ffmpeg
gngenout/linux--args=‘is_debug=truetarget_os=“linux”target_cpu=“x64”is_clang=falsetreat_warnings_as_errors=falsertc_include_tests=falsertc_use_h264=trueis_component_build=falseuse_custom_libcxx=falser
- cefsharp131升级132测试(WinForms.NETCore)
久爱物联网
久爱CefsharpCsharp久爱学习cefsharpcefsharp132.3WinForm.NetCorecef132
一、升级(Nuget)版本说明(readme):最低.NETCore3.1(NET5.0+)+VisualC++2019Redist二、试运行、兼容性测试三、后记说明支持H264版本推荐版本63,79,84,88,100,111,125(支持h264和pdf预览)其他H264版本109,124,126,128,131.0.x(支持h264,支持pdf预览有异常)私聊jiuailtd留言CefSha
- OrangePi香橙派usb摄像头+srs服务+ffmpeg+h264解码
Fatfish_treeFans
ffmpegh.264linuxwebrtc视频编解码
1、香橙派用的zero2,debian系统,usb免驱摄像头usb摄像头默认地址:/dev/video0查看usb是否识别:lsusb。查看可以用:ls/dev/video*,查看所有设备。2、安装srs服务,并推流webrtc参考:Build|SRS下载镜像到当前命令行路径:gitclone-bdevelophttps://gitee.com/ossrs/srs.git编译,注意需要切换到srs
- ffmpeg 硬件解码 264 265 各个平台
爱学习的大牛123
音视频ffmpeg
一.命令行介绍FFmpeg支持多种平台的硬件解码,包括H.264(AVC)和H.265(HEVC)编解码器。以下是在不同平台上使用FFmpeg进行硬件解码的概述:1.NVIDIAGPU(NVDEC)适用于Windows、Linux和macOS(较旧的Mac设备)。-H.264:`-c:vh264_cuvid`-H.265:`-c:vhevc_cuvid`示例:```ffmpeg-hwaccelcu
- mpp rtsp 硬解码
AI算法网奇
嵌入式c++入门宝典网络
目录opencv保存mp4linux系统RK3588MPP硬解码rtsp源代码内存泄露问题硬编码和硬解码mpp保存mp4h264格式判断ffmpeg把mp4转为h264裸流有的电脑报错:Unabletofindasuitableoutputformatfor'output.264'ffmpeg_rtsp_mpp:ffmpeg拉取rtsph264流,使用mpp解码,目前在firefly板子上跑通了m
- html5 h265播放器,PC端播放H265
健康和谐男哥
html5h265播放器
说明需要在PC端浏览器(Chrome)中播放直播视频,视频格式有H264/H265。有不少三方库可以实现。通过video.js(支持H264,不支持H265)videojs-contrib-hlsembedVideo.jsExampleEmbeddata-setup='{}'>参考地址:通过hls.js(支持H264,不支持H265)pcplaym3u8(hlsjs)video{width:600
- Ubuntu 20.04 x64下 编译安装ffmpeg
daqinzl
linuxffmpegubuntuFFmpeg编译安装
试验的ffmpeg版本4.1.3本文使用的config命令./configure--prefix=host--enable-shared--disable-static--disable-doc--enable-postproc--enable-gpl--enable-swscale--enable-nonfree--enable-libfdk-aac--enable-decoder=h264--
- H264原始码流格式分析
程序猿玖月柒
音视频开发语言音视频
1.H264码流结构组成H.264裸码流(RawBitstream)数据主要由一系列的NALU(网络抽象层单元)组成。每个NALU包含一个NAL头和一个RBSP(原始字节序列载荷)。1.1H.264码流层次H.264码流的结构可以分为两个层次:VCL(视频编码层)和NAL(网络抽象层)。下图为H.264码流中的层次图:VCL层:负责对视频的原始数据进行压缩。VCL数据编码器直接输出的原始数据比特串
- 辗转相处求最大公约数
沐刃青蛟
C++漏洞
无言面对”江东父老“了,接触编程一年了,今天发现还不会辗转相除法求最大公约数。惭愧惭愧!
为此,总结一下以方便日后忘了好查找。
1.输入要比较的两个数a,b
忽略:2.比较大小(因为后面要的是大的数对小的数做%操作)
3.辗转相除(用循环不停的取余,如a%b,直至b=0)
4.最后的a为两数的最大公约数
&
- F5负载均衡会话保持技术及原理技术白皮书
bijian1013
F5负载均衡
一.什么是会话保持? 在大多数电子商务的应用系统或者需要进行用户身份认证的在线系统中,一个客户与服务器经常经过好几次的交互过程才能完成一笔交易或者是一个请求的完成。由于这几次交互过程是密切相关的,服务器在进行这些交互过程的某一个交互步骤时,往往需要了解上一次交互过程的处理结果,或者上几步的交互过程结果,服务器进行下
- Object.equals方法:重载还是覆盖
Cwind
javagenericsoverrideoverload
本文译自StackOverflow上对此问题的讨论。
原问题链接
在阅读Joshua Bloch的《Effective Java(第二版)》第8条“覆盖equals时请遵守通用约定”时对如下论述有疑问:
“不要将equals声明中的Object对象替换为其他的类型。程序员编写出下面这样的equals方法并不鲜见,这会使程序员花上数个小时都搞不清它为什么不能正常工作:”
pu
- 初始线程
15700786134
暑假学习的第一课是讲线程,任务是是界面上的一条线运动起来。
既然是在界面上,那必定得先有一个界面,所以第一步就是,自己的类继承JAVA中的JFrame,在新建的类中写一个界面,代码如下:
public class ShapeFr
- Linux的tcpdump
被触发
tcpdump
用简单的话来定义tcpdump,就是:dump the traffic on a network,根据使用者的定义对网络上的数据包进行截获的包分析工具。 tcpdump可以将网络中传送的数据包的“头”完全截获下来提供分析。它支 持针对网络层、协议、主机、网络或端口的过滤,并提供and、or、not等逻辑语句来帮助你去掉无用的信息。
实用命令实例
默认启动
tcpdump
普通情况下,直
- 安卓程序listview优化后还是卡顿
肆无忌惮_
ListView
最近用eclipse开发一个安卓app,listview使用baseadapter,里面有一个ImageView和两个TextView。使用了Holder内部类进行优化了还是很卡顿。后来发现是图片资源的问题。把一张分辨率高的图片放在了drawable-mdpi文件夹下,当我在每个item中显示,他都要进行缩放,导致很卡顿。解决办法是把这个高分辨率图片放到drawable-xxhdpi下。
&nb
- 扩展easyUI tab控件,添加加载遮罩效果
知了ing
jquery
(function () {
$.extend($.fn.tabs.methods, {
//显示遮罩
loading: function (jq, msg) {
return jq.each(function () {
var panel = $(this).tabs(&
- gradle上传jar到nexus
矮蛋蛋
gradle
原文地址:
https://docs.gradle.org/current/userguide/maven_plugin.html
configurations {
deployerJars
}
dependencies {
deployerJars "org.apache.maven.wagon
- 千万条数据外网导入数据库的解决方案。
alleni123
sqlmysql
从某网上爬了数千万的数据,存在文本中。
然后要导入mysql数据库。
悲剧的是数据库和我存数据的服务器不在一个内网里面。。
ping了一下, 19ms的延迟。
于是下面的代码是没用的。
ps = con.prepareStatement(sql);
ps.setString(1, info.getYear())............;
ps.exec
- JAVA IO InputStreamReader和OutputStreamReader
百合不是茶
JAVA.io操作 字符流
这是第三篇关于java.io的文章了,从开始对io的不了解-->熟悉--->模糊,是这几天来对文件操作中最大的感受,本来自己认为的熟悉了的,刚刚在回想起前面学的好像又不是很清晰了,模糊对我现在或许是最好的鼓励 我会更加的去学 加油!:
JAVA的API提供了另外一种数据保存途径,使用字符流来保存的,字符流只能保存字符形式的流
字节流和字符的难点:a,怎么将读到的数据
- MO、MT解读
bijian1013
GSM
MO= Mobile originate,上行,即用户上发给SP的信息。MT= Mobile Terminate,下行,即SP端下发给用户的信息;
上行:mo提交短信到短信中心下行:mt短信中心向特定的用户转发短信,你的短信是这样的,你所提交的短信,投递的地址是短信中心。短信中心收到你的短信后,存储转发,转发的时候就会根据你填写的接收方号码寻找路由,下发。在彩信领域是一样的道理。下行业务:由SP
- 五个JavaScript基础问题
bijian1013
JavaScriptcallapplythisHoisting
下面是五个关于前端相关的基础问题,但却很能体现JavaScript的基本功底。
问题1:Scope作用范围
考虑下面的代码:
(function() {
var a = b = 5;
})();
console.log(b);
什么会被打印在控制台上?
回答:
上面的代码会打印 5。
&nbs
- 【Thrift二】Thrift Hello World
bit1129
Hello world
本篇,不考虑细节问题和为什么,先照葫芦画瓢写一个Thrift版本的Hello World,了解Thrift RPC服务开发的基本流程
1. 在Intellij中创建一个Maven模块,加入对Thrift的依赖,同时还要加上slf4j依赖,如果不加slf4j依赖,在后面启动Thrift Server时会报错
<dependency>
- 【Avro一】Avro入门
bit1129
入门
本文的目的主要是总结下基于Avro Schema代码生成,然后进行序列化和反序列化开发的基本流程。需要指出的是,Avro并不要求一定得根据Schema文件生成代码,这对于动态类型语言很有用。
1. 添加Maven依赖
<?xml version="1.0" encoding="UTF-8"?>
<proj
- 安装nginx+ngx_lua支持WAF防护功能
ronin47
需要的软件:LuaJIT-2.0.0.tar.gz nginx-1.4.4.tar.gz &nb
- java-5.查找最小的K个元素-使用最大堆
bylijinnan
java
import java.util.Arrays;
import java.util.Random;
public class MinKElement {
/**
* 5.最小的K个元素
* I would like to use MaxHeap.
* using QuickSort is also OK
*/
public static void
- TCP的TIME-WAIT
bylijinnan
socket
原文连接:
http://vincent.bernat.im/en/blog/2014-tcp-time-wait-state-linux.html
以下为对原文的阅读笔记
说明:
主动关闭的一方称为local end,被动关闭的一方称为remote end
本地IP、本地端口、远端IP、远端端口这一“四元组”称为quadruplet,也称为socket
1、TIME_WA
- jquery ajax 序列化表单
coder_xpf
Jquery ajax 序列化
checkbox 如果不设定值,默认选中值为on;设定值之后,选中则为设定的值
<input type="checkbox" name="favor" id="favor" checked="checked"/>
$("#favor&quo
- Apache集群乱码和最高并发控制
cuisuqiang
apachetomcat并发集群乱码
都知道如果使用Http访问,那么在Connector中增加URIEncoding即可,其实使用AJP时也一样,增加useBodyEncodingForURI和URIEncoding即可。
最大连接数也是一样的,增加maxThreads属性即可,如下,配置如下:
<Connector maxThreads="300" port="8019" prot
- websocket
dalan_123
websocket
一、低延迟的客户端-服务器 和 服务器-客户端的连接
很多时候所谓的http的请求、响应的模式,都是客户端加载一个网页,直到用户在进行下一次点击的时候,什么都不会发生。并且所有的http的通信都是客户端控制的,这时候就需要用户的互动或定期轮训的,以便从服务器端加载新的数据。
通常采用的技术比如推送和comet(使用http长连接、无需安装浏览器安装插件的两种方式:基于ajax的长
- 菜鸟分析网络执法官
dcj3sjt126com
网络
最近在论坛上看到很多贴子在讨论网络执法官的问题。菜鸟我正好知道这回事情.人道"人之患好为人师" 手里忍不住,就写点东西吧. 我也很忙.又没有MM,又没有MONEY....晕倒有点跑题.
OK,闲话少说,切如正题. 要了解网络执法官的原理. 就要先了解局域网的通信的原理.
前面我们看到了.在以太网上传输的都是具有以太网头的数据包. 
- Android相对布局属性全集
dcj3sjt126com
android
RelativeLayout布局android:layout_marginTop="25dip" //顶部距离android:gravity="left" //空间布局位置android:layout_marginLeft="15dip //距离左边距
// 相对于给定ID控件android:layout_above 将该控件的底部置于给定ID的
- Tomcat内存设置详解
eksliang
jvmtomcattomcat内存设置
Java内存溢出详解
一、常见的Java内存溢出有以下三种:
1. java.lang.OutOfMemoryError: Java heap space ----JVM Heap(堆)溢出JVM在启动的时候会自动设置JVM Heap的值,其初始空间(即-Xms)是物理内存的1/64,最大空间(-Xmx)不可超过物理内存。
可以利用JVM提
- Java6 JVM参数选项
greatwqs
javaHotSpotjvmjvm参数JVM Options
Java 6 JVM参数选项大全(中文版)
作者:Ken Wu
Email:
[email protected]
转载本文档请注明原文链接 http://kenwublog.com/docs/java6-jvm-options-chinese-edition.htm!
本文是基于最新的SUN官方文档Java SE 6 Hotspot VM Opt
- weblogic创建JMC
i5land
weblogicjms
进入 weblogic控制太
1.创建持久化存储
--Services--Persistant Stores--new--Create FileStores--name随便起--target默认--Directory写入在本机建立的文件夹的路径--ok
2.创建JMS服务器
--Services--Messaging--JMS Servers--new--name随便起--Pers
- 基于 DHT 网络的磁力链接和BT种子的搜索引擎架构
justjavac
DHT
上周开发了一个磁力链接和 BT 种子的搜索引擎 {Magnet & Torrent},本文简单介绍一下主要的系统功能和用到的技术。
系统包括几个独立的部分:
使用 Python 的 Scrapy 框架开发的网络爬虫,用来爬取磁力链接和种子;
使用 PHP CI 框架开发的简易网站;
搜索引擎目前直接使用的 MySQL,将来可以考虑使
- sql添加、删除表中的列
macroli
sql
添加没有默认值:alter table Test add BazaarType char(1)
有默认值的添加列:alter table Test add BazaarType char(1) default(0)
删除没有默认值的列:alter table Test drop COLUMN BazaarType
删除有默认值的列:先删除约束(默认值)alter table Test DRO
- PHP中二维数组的排序方法
abc123456789cba
排序二维数组PHP
<?php/*** @package BugFree* @version $Id: FunctionsMain.inc.php,v 1.32 2005/09/24 11:38:37 wwccss Exp $*** Sort an two-dimension array by some level
- hive优化之------控制hive任务中的map数和reduce数
superlxw1234
hivehive优化
一、 控制hive任务中的map数: 1. 通常情况下,作业会通过input的目录产生一个或者多个map任务。 主要的决定因素有: input的文件总个数,input的文件大小,集群设置的文件块大小(目前为128M, 可在hive中通过set dfs.block.size;命令查看到,该参数不能自定义修改);2. 
- Spring Boot 1.2.4 发布
wiselyman
spring boot
Spring Boot 1.2.4已于6.4日发布,repo.spring.io and Maven Central可以下载(推荐使用maven或者gradle构建下载)。
这是一个维护版本,包含了一些修复small number of fixes,建议所有的用户升级。
Spring Boot 1.3的第一个里程碑版本将在几天后发布,包含许多