- weedfs简单使用
Feng_Sir
>weed.exemaster-ip=192.168.20.208-port=9333>weed.exevolume-dir="data"-max=5-mserver="192.168.20.208:9333"-port=8080-ip=192.168.20.208curlhttp://192.168.20.208:9333/dir/assign{"fid":"3,0f7007667d","url
- golang开源分布式文件系统weed-fs
scmsgxz
golang分布式文件系统weed-fs
weedfs,http://code.google.com/p/weed-fs/go语言,代码很少,3个可执行文件,很强悍#lsweedclientweedmasterweedvolume部署测试,服务器,192.168.2.1001.启动master服务:#./weedmaster2012/07/2515:10:15VolumeSizeLimitis32768MB2012/07/2515:10:
- 图片服务器架构选择
sun007700
存储
tfs,fastdfs,weedfs.对比https://www.cnblogs.com/yswenli/p/7234579.html对比说明/文件系统TFSFastDFSMogileFSMooseFSGlusterFSCeph开发语言C++CPerlCCC++开源协议GPLV2GPLV3GPLGPLV3GPLV3LGPL数据存储方式块文件/Trunk文件块文件/块对象/文件/块集群节点通信协议私
- 使用minio搭建高性能对象存储-第一部分:原型
Tony Bai
近期参与了一个项目,该项目有存储大量图片、短视频、音频等非结构化数据的需求。于是我优先在Go社区寻找能满足这类需求的开源项目,minio就这样进入了我的视野。图:miniologo其实三年前我就知道了minio,并还下载玩(研)耍(究)了一番,但那时minio的成熟程度与今天相比还是相差较远的(当时需求简单,于是选择了较为熟悉的weedfs)。而如今的minio在github上收获了广泛的关注,小
- weedfs文件使用记录
懒人烂命
文件系统go
源码目录结构核心模块weed入口目录weed/weed_server入口目录与HTTP服务相关topology核心模块,主要包括【DataCenter,Rack,DataNode】三层拓扑结构。storage核心模块,主要包括【Store,Volume,Needle】这三大块存储相关的源码。辅助模块sequence负责FileID的全局有序生成filer提供支持HTTPREST操作的文件服务器,其
- Nginx+Lua+WeedFS安装手记
leonpengweicn
nginxLinux
http://www.myexception.cn/web/1651547.html安装手记首先下载WeedFShttps://bintray.com/chrislusf/Weed-FS/weed下载最新的WeedFSServertarzxvfweed_0.57_linux_amd64.tar.gz启动Masterserver以及volumeserverweedmaster-mdir="/data
- weedfs
michael_hujiakuan
1.weed.tar.gz解压即用启动:cd/usr/local/weed/&&shstart.sh停止:killallweedstart.sh中的内容如下:/usr/local/weed/bin/weed-alsologtostderr=true-v=0-log_dir="/data/logs/weed/m1"master-mdir=/usr/local/weed/m1-port=9333-ip
- weedfs的简易安装以及使用Java编写的简单上传代码
bigdataFang
weedfs是一个适用于需要存储大量小文件的一个分布式文件系统,全名为Seaweed-fs,是一个使用go语言开发的简单的高可用的系统。开创之初weedfs是源于一篇Facebook的论文实现,下面介绍在服务器中的安装部署步骤。一、安装1、首先安装配置golang开发环境go的最新版本是1.9.1可到https://www.golangtc.com/download下载go1.9.1.linux-
- weedfs client
懒人烂命
java
weedFSClientForJavaFeaturesSeaweedFSisasimpleandhighlyscalabledistributedfilesystemandstartedbyimplementingFacebook'sHaystackdesignpaper.SeaweedFSiscurrentlygrowing,withmorefeaturesontheway.ThisJavacl
- iOS 不能播放远程视频(Android 可以)的问题
颐和园
iPhone开发
问题描述:1、同样的url,Android能放,iOS不能放。后台给的url是这个样子(mp4文件格式):http://192.168.80.102:28085/schcommonweb/weedfs/rdownload/2@8a54d21abc2、用KVO监听AVPlayerItem的status发现报错:Code=-11850Code=-12939OperationStoppedTheserv
- weed-fs 压力测试
dench2001
阅读《Weed-FS/杂草文件系统小文件存储集群安装使用测试》中提到weedfs的负载压力不是很好,在看过代码后进行了相应测试,未发现负载压力有何问题。weedfsmasterweedfsvolume操作系统我weed_0.45_amd64.debweed_0.45_amd64.debubuntu12.0464棋仙博客weed_0.45_linux_amd64.tar.gzweed_0.45_li
- seaweedfs实践
stepyu
测试weedfs的故障恢复时间测试,简便起见#!/bin/bashset-ex#ps-ef|grepweed|grep-vgrep|kill-9`awk'{print$2}'`mkdirmdirt_v1t_v2t_v3v_mdirnohup./weedmaster-mdir=./mdir-port=9333-defaultReplication="001">>./mdir/server_sfs.l
- retrofit使用
stepyu
定义接口packagecom.weedfs.client.yj.weedfsClient.Interface;importcom.weedfs.client.yj.weedfsClient.dto.Upload;importretrofit.client.Response;importretrofit.http.GET;importretrofit.http.Multipart;importret
- 分布式小文件系统fastdfs与weedfs的对比
白乔
大数据技术与系统
https://www.tuicool.com/articles/uaiimu最近拿一台双核1G的kvmvps搭建了一个图片的服务器,前面用百度云加速扛着,有了个专业图片存储及CDN的样子。每天还是有50W左右的PV,流量在30G左右。总结一下最近接触过的两个分布式小文件系统weedfs和fastdfs。fastdfs的详细介绍看这里=》传送门weedfs官方地址=>传送门在两个系统中都有一个负责
- 初窥weedfs分布式文件系统
samsing
介绍Seaweedfs是一个简单,高扩展性的分布式文件系统,它的两个目标分别是:存储数十亿级的文件快速响应文件。seaweedfs选择以键值对(key->file)的实现方式,这有点像“NoSQL",你可以陈其为”NoFS“。seaweedfs的中心节点(centermaster)并不会管理所有文件的元数据而仅仅管理文件卷(filevolmume),文件及其元数据的管理是由volumeserver
- centos weedfs安装配置
bobochen21
weedfs
下载https://github.com/chrislusf/seaweedfs/releases/download/0.76/linux_amd64.tar.gz这里下载linux_amd64版本解压mkdir/usr/local/weeddftar-zxvflinux_arm64.tar.gz-C/usr/local/weeddf/设置开机启动两个进程一个marster一个volume配置ma
- 分布式文件存储Seaweedfs源码剖析
silentsharer
分布式系统
转载地址:http://yanyiwu.com/work/2015/01/09/weed-fs-source-analysis.html1、前言基于源码版本号0.67,【Seaweedfs以前旧版叫Weedfs】Seaweedfs是一个非常优秀的由golang开发的分布式存储开源项目,虽然在我刚开始关注的时候它在github.com上面只有star50+,但是我觉得这个项目是一个几千star量级的
- weedfs getsockopt: connection timed out
forrestsun
启动masterweedmaster-ip10.191.197.133-mdir/namenode-ip.bind10.191.197.133
I080916:53:517721file_util.go:20]Folder/namenodePermission:-rwxr-xr-x
I080916:53:517721master_server.go:59]VolumeSizeLimitis30
- hd_file / file system / fastdfs / weedfs / hdfs / MogileFS / GlusterFS / GridFS
siemens800
fastDFS
s一个基于Golang的分布式存储开源项目/weed-fshttp://blog.csdn.net/love_se/article/details/7951771 项目地址:https://code.google.com/p/weed-fs/weed-fs是一个简单且高性能的分布式存储系统,它有两个目标:1、存储海量文件2、快速访问所存的文件weed-fs选择了key~file映射的方式实现文件寻
- hd_file / file system / fastdfs / weedfs / hdfs / MogileFS / GlusterFS / GridFS
siemens800
fastDFS
s一个基于Golang的分布式存储开源项目/weed-fshttp://blog.csdn.net/love_se/article/details/7951771 项目地址:https://code.google.com/p/weed-fs/weed-fs是一个简单且高性能的分布式存储系统,它有两个目标:1、存储海量文件2、快速访问所存的文件weed-fs选择了key~file映射的方式实现文件寻
- hd_file / file system / fastdfs / weedfs / hdfs / MogileFS / GlusterFS / GridFS
siemens800
阅读更多s一个基于Golang的分布式存储开源项目/weed-fshttp://blog.csdn.net/love_se/article/details/7951771项目地址:https://code.google.com/p/weed-fs/weed-fs是一个简单且高性能的分布式存储系统,它有两个目标:1、存储海量文件2、快速访问所存的文件weed-fs选择了key~file映射的方式实现
- WeedFS0.6.8-引用库列表
DFS
WeedFS 0.68新增了对cassandra数据库存储的支持及JSON Web Token(JWTs)安全的支持.
github.com/gocql/gocql
//filer/cassandra_store/cassandra_store.go
github.com/syndtr/goleveldb/leveldb //filer/embedded_filer/file_in_leve
- WeedFS问题收集
DFS
weed fs FAQ Moving files to a different server Q:
Hello,is it possible to move manually the .dat and .idx to a different volume? A:
Moving it to a different volume server? Yes! Steps: 1. shut down
- WeedFS依赖库 0.6.1
DFS
WeedFS依赖库
版本 0.6.1
=======================================================================glog=======================================================================http://code.google.com/p/google-g
- Nginx+Lua+WeedFS安装手记
soltex
阅读更多安装手记首先下载WeedFShttps://bintray.com/chrislusf/Weed-FS/weed下载最新的WeedFSServertarzxvfweed_0.57_linux_amd64.tar.gz启动Masterserver以及volumeserverweedmaster-mdir="/data/weedfs/weedfs-server/"&weedvolume-dir
- Nginx+Lua+WeedFS安装手记
soltex
nginx
安装手记
首先下载WeedFS
https://bintray.com/chrislusf/Weed-FS/weed
下载最新的WeedFS Server
tar zxvf weed_0.57_linux_amd64.tar.gz
启动Master server 以及 volume server
weed master -mdir="/data/weedfs/weedfs
- weed-fs 压力测试
压力测试
阅读《Weed-FS/杂草文件系统 小文件存储集群 安装 使用 测试》中提到weedfs的负载压力不是很好,在看过代码后进行了相应测试,未发现负载压力有何问题。 weedfs master weedfs volume 操作系统 我 weed_0.45_amd64.deb weed_0.45_amd64.deb ubuntu 12.04 64 &n
- weed-fs参数列表
参数
weed-fs没有详细的帮助文档,为了方便阅读,特意把有用的参数帮助罗列出来。未列出的两个命令为version(版本查询) 及shell(这个命令在0.45版本只有回显功能)nerc@Ubuntu:~/data1$ weed -h
WeedFS is a software to store billions of files and serve them fast!
Usage:
- golang开源分布式文件系统weed-fs
jimmygan
golang分布式文件系统weed-fs
阅读更多weedfs,http://code.google.com/p/weed-fs/go语言,代码很少,3个可执行文件,很强悍[root@ghost-riderweedfs]#lsweedclientweedmasterweedvolume部署测试,服务器,192.168.2.1001.启动master服务:[root@ghost-riderweedfs]#./weedmaster2012/0
- golang开源分布式文件系统weed-fs
jimmygan
分布式文件系统golangweed-fs
weedfs,http://code.google.com/p/ weed-fs /
go语言,代码很少,3个可执行文件,很强悍
[root@ghost-rider weedfs]# ls
weedclient weedmaster weedvolume
部署测试,
服务器,192.168.2.100
1.启动master服务:
[root@g
- jquery实现的jsonp掉java后台
知了ing
javajsonpjquery
什么是JSONP?
先说说JSONP是怎么产生的:
其实网上关于JSONP的讲解有很多,但却千篇一律,而且云里雾里,对于很多刚接触的人来讲理解起来有些困难,小可不才,试着用自己的方式来阐释一下这个问题,看看是否有帮助。
1、一个众所周知的问题,Ajax直接请求普通文件存在跨域无权限访问的问题,甭管你是静态页面、动态网页、web服务、WCF,只要是跨域请求,一律不准;
2、
- Struts2学习笔记
caoyong
struts2
SSH : Spring + Struts2 + Hibernate
三层架构(表示层,业务逻辑层,数据访问层) MVC模式 (Model View Controller)
分层原则:单向依赖,接口耦合
1、Struts2 = Struts + Webwork
2、搭建struts2开发环境
a>、到www.apac
- SpringMVC学习之后台往前台传值方法
满城风雨近重阳
springMVC
springMVC控制器往前台传值的方法有以下几种:
1.ModelAndView
通过往ModelAndView中存放viewName:目标地址和attribute参数来实现传参:
ModelAndView mv=new ModelAndView();
mv.setViewName="success
- WebService存在的必要性?
一炮送你回车库
webservice
做Java的经常在选择Webservice框架上徘徊很久,Axis Xfire Axis2 CXF ,他们只有一个功能,发布HTTP服务然后用XML做数据传输。
是的,他们就做了两个功能,发布一个http服务让客户端或者浏览器连接,接收xml参数并发送xml结果。
当在不同的平台间传输数据时,就需要一个都能解析的数据格式。
但是为什么要使用xml呢?不能使json或者其他通用数据
- js年份下拉框
3213213333332132
java web ee
<div id="divValue">test...</div>测试
//年份
<select id="year"></select>
<script type="text/javascript">
window.onload =
- 简单链式调用的实现技术
归来朝歌
方法调用链式反应编程思想
在编程中,我们可以经常遇到这样一种场景:一个实例不断调用它自身的方法,像一条链条一样进行调用
这样的调用你可能在Ajax中,在页面中添加标签:
$("<p>").append($("<span>").text(list[i].name)).appendTo("#result");
也可能在HQ
- JAVA调用.net 发布的webservice 接口
darkranger
webservice
/**
* @Title: callInvoke
* @Description: TODO(调用接口公共方法)
* @param @param url 地址
* @param @param method 方法
* @param @param pama 参数
* @param @return
* @param @throws BusinessException
- Javascript模糊查找 | 第一章 循环不能不重视。
aijuans
Way
最近受我的朋友委托用js+HTML做一个像手册一样的程序,里面要有可展开的大纲,模糊查找等功能。我这个人说实在的懒,本来是不愿意的,但想起了父亲以前教我要给朋友搞好关系,再加上这也可以巩固自己的js技术,于是就开始开发这个程序,没想到却出了点小问题,我做的查找只能绝对查找。具体的js代码如下:
function search(){
var arr=new Array("my
- 狼和羊,该怎么抉择
atongyeye
工作
狼和羊,该怎么抉择
在做一个链家的小项目,只有我和另外一个同事两个人负责,各负责一部分接口,我的接口写完,并全部测联调试通过。所以工作就剩下一下细枝末节的,工作就轻松很多。每天会帮另一个同事测试一些功能点,协助他完成一些业务型不强的工作。
今天早上到公司没多久,领导就在QQ上给我发信息,让我多协助同事测试,让我积极主动些,有点责任心等等,我听了这话,心里面立马凉半截,首先一个领导轻易说
- 读取android系统的联系人拨号
百合不是茶
androidsqlite数据库内容提供者系统服务的使用
联系人的姓名和号码是保存在不同的表中,不要一下子把号码查询来,我开始就是把姓名和电话同时查询出来的,导致系统非常的慢
关键代码:
1, 使用javabean操作存储读取到的数据
package com.example.bean;
/**
*
* @author Admini
- ORACLE自定义异常
bijian1013
数据库自定义异常
实例:
CREATE OR REPLACE PROCEDURE test_Exception
(
ParameterA IN varchar2,
ParameterB IN varchar2,
ErrorCode OUT varchar2 --返回值,错误编码
)
AS
/*以下是一些变量的定义*/
V1 NUMBER;
V2 nvarc
- 查看端号使用情况
征客丶
windows
一、查看端口
在windows命令行窗口下执行:
>netstat -aon|findstr "8080"
显示结果:
TCP 127.0.0.1:80 0.0.0.0:0 &
- 【Spark二十】运行Spark Streaming的NetworkWordCount实例
bit1129
wordcount
Spark Streaming简介
NetworkWordCount代码
/*
* Licensed to the Apache Software Foundation (ASF) under one or more
* contributor license agreements. See the NOTICE file distributed with
- Struts2 与 SpringMVC的比较
BlueSkator
struts2spring mvc
1. 机制:spring mvc的入口是servlet,而struts2是filter,这样就导致了二者的机制不同。 2. 性能:spring会稍微比struts快。spring mvc是基于方法的设计,而sturts是基于类,每次发一次请求都会实例一个action,每个action都会被注入属性,而spring基于方法,粒度更细,但要小心把握像在servlet控制数据一样。spring
- Hibernate在更新时,是可以不用session的update方法的(转帖)
BreakingBad
Hibernateupdate
地址:http://blog.csdn.net/plpblue/article/details/9304459
public void synDevNameWithItil()
{Session session = null;Transaction tr = null;try{session = HibernateUtil.getSession();tr = session.beginTran
- 读《研磨设计模式》-代码笔记-观察者模式
bylijinnan
java设计模式
声明: 本文只为方便我个人查阅和理解,详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
import java.util.ArrayList;
import java.util.List;
import java.util.Observable;
import java.util.Observer;
/**
* “观
- 重置MySQL密码
chenhbc
mysql重置密码忘记密码
如果你也像我这么健忘,把MySQL的密码搞忘记了,经过下面几个步骤就可以重置了(以Windows为例,Linux/Unix类似):
1、关闭MySQL服务
2、打开CMD,进入MySQL安装目录的bin目录下,以跳过权限检查的方式启动MySQL
mysqld --skip-grant-tables
3、新开一个CMD窗口,进入MySQL
mysql -uroot
 
- 再谈系统论,控制论和信息论
comsci
设计模式生物能源企业应用领域模型
再谈系统论,控制论和信息论
偶然看
- oracle moving window size与 AWR retention period关系
daizj
oracle
转自: http://tomszrp.itpub.net/post/11835/494147
晚上在做11gR1的一个awrrpt报告时,顺便想调整一下AWR snapshot的保留时间,结果遇到了ORA-13541这样的错误.下面是这个问题的发生和解决过程.
SQL> select * from v$version;
BANNER
-------------------
- Python版B树
dieslrae
python
话说以前的树都用java写的,最近发现python有点生疏了,于是用python写了个B树实现,B树在索引领域用得还是蛮多了,如果没记错mysql的默认索引好像就是B树...
首先是数据实体对象,很简单,只存放key,value
class Entity(object):
'''数据实体'''
def __init__(self,key,value)
- C语言冒泡排序
dcj3sjt126com
算法
代码示例:
# include <stdio.h>
//冒泡排序
void sort(int * a, int len)
{
int i, j, t;
for (i=0; i<len-1; i++)
{
for (j=0; j<len-1-i; j++)
{
if (a[j] > a[j+1]) // >表示升序
- 自定义导航栏样式
dcj3sjt126com
自定义
-(void)setupAppAppearance
{
[[UILabel appearance] setFont:[UIFont fontWithName:@"FZLTHK—GBK1-0" size:20]];
[UIButton appearance].titleLabel.font =[UIFont fontWithName:@"FZLTH
- 11.性能优化-优化-JVM参数总结
frank1234
jvm参数性能优化
1.堆
-Xms --初始堆大小
-Xmx --最大堆大小
-Xmn --新生代大小
-Xss --线程栈大小
-XX:PermSize --永久代初始大小
-XX:MaxPermSize --永久代最大值
-XX:SurvivorRatio --新生代和suvivor比例,默认为8
-XX:TargetSurvivorRatio --survivor可使用
- nginx日志分割 for linux
HarborChung
nginxlinux脚本
nginx日志分割 for linux 默认情况下,nginx是不分割访问日志的,久而久之,网站的日志文件将会越来越大,占用空间不说,如果有问题要查看网站的日志的话,庞大的文件也将很难打开,于是便有了下面的脚本 使用方法,先将以下脚本保存为 cutlog.sh,放在/root 目录下,然后给予此脚本执行的权限
复制代码代码如下:
chmo
- Spring4新特性——泛型限定式依赖注入
jinnianshilongnian
springspring4泛型式依赖注入
Spring4新特性——泛型限定式依赖注入
Spring4新特性——核心容器的其他改进
Spring4新特性——Web开发的增强
Spring4新特性——集成Bean Validation 1.1(JSR-349)到SpringMVC
Spring4新特性——Groovy Bean定义DSL
Spring4新特性——更好的Java泛型操作API
Spring4新
- centOS安装GCC和G++
liuxihope
centosgcc
Centos支持yum安装,安装软件一般格式为yum install .......,注意安装时要先成为root用户。
按照这个思路,我想安装过程如下:
安装gcc:yum install gcc
安装g++: yum install g++
实际操作过程发现,只能有gcc安装成功,而g++安装失败,提示g++ command not found。上网查了一下,正确安装应该
- 第13章 Ajax进阶(上)
onestopweb
Ajax
index.html
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/
- How to determine BusinessObjects service pack and fix pack
blueoxygen
BO
http://bukhantsov.org/2011/08/how-to-determine-businessobjects-service-pack-and-fix-pack/
The table below is helpful. Reference
BOE XI 3.x
12.0.0.
y BOE XI 3.0 12.0.
x.
y BO
- Oracle里的自增字段设置
tomcat_oracle
oracle
大家都知道吧,这很坑,尤其是用惯了mysql里的自增字段设置,结果oracle里面没有的。oh,no 我用的是12c版本的,它有一个新特性,可以这样设置自增序列,在创建表是,把id设置为自增序列
create table t
(
id number generated by default as identity (start with 1 increment b
- Spring Security(01)——初体验
yang_winnie
springSecurity
Spring Security(01)——初体验
博客分类: spring Security
Spring Security入门安全认证
首先我们为Spring Security专门建立一个Spring的配置文件,该文件就专门用来作为Spring Security的配置