文件分割

以太坊Merkle Patricia Tree(MPT)技术深度解读

为了快速下载大块数据并验证，更好的办法是把大文件分割成小的数据块（例如把大文件分割
bit小兵·2020-07-12 07:25

PHP大文件分割上传（分片上传）

问题服务端为什么不能直接传大文件？跟php.ini里面的几个配置有关upload_max_filesize=2M//PHP最大能接受的文件大小post_max_size=8M//PHP能收到的最大POST值'memory_limit=128M//内存上限max_execution_time=30//最大执行时间当然不能简单粗暴的把上面几个值调大，否则服务器内存资源吃光是迟早的问题。解决思路好在HT
weixin_30664051·2020-07-12 06:08

文件处理：大文件切片+文件读写锁FileShare

那么，怎么才可以把一个大文件分割为多个小文件呢?如果我按照大小来控制分割出来的小文件，会造成文件的丢失问题，如果按照行数来分割，一行一行进行读取务
weixin_30446613·2020-07-12 06:06

nginx每天自动分割并清除日志文件

Nginx产生的日志都是存在一个文件，网站运行时间越长，日志文件的大小也在不断增长，这对分析当天日志非常的不方便，所以需要每天把日志文件分割出来，并以时间命名，产生的日志无限增长，终有一天会导致磁盘爆满
toplanxue·2020-07-12 01:04

hdfs、tfs、fastdfs、Tachyon的辨析

HDFS默认会将文件分割成block，128M为1个block。然后将block按键值对存储在HDFS上，并将键值对的映射存到内存中(namenode)。
纵死侠骨香·2020-07-11 20:25

linux下分割文件

from：http://blog.sina.com.cn/s/blog_4dd4753901017jwj.htmllinux下文件分割可以通过split命令来实现，可以指定按行数分割和安大小分割两种模式
qdujunjie·2020-07-11 14:10

第5节 观察者模式

，所有依赖对象(观察者)都将得到通知;使用OOP(面向对象编程)技术，可以将这种依赖关系弱化，并形成一种稳定的依赖关系，从而实现软件体系接口的松耦合;二、程序示例2.1使用设计模式前这里，我们设计一个文件分割的例子
yangxianpku·2020-07-10 13:26

vim分割窗口

|08.1|分割窗口|08.2|用另一个文件分割窗口|08.3|窗口大小|08.4|垂直分割|08.5|移动窗口|08.6|对所有窗口执行命令|08.7|用vim
suwenqiang2011·2020-07-10 03:08

13-如何分-InputFormat&InputSplit&RecordReader解析

InputFormat将输入文件分割成InputSplit（
isscollege·2020-07-09 17:32

usr_08: 分割窗口

08.1：分割窗口:split#对当前窗口分割一个副本，默认为上下分割crrl-w#在不同窗口中进行跳转:close#关闭当前窗口:only#保留当前，关闭其他窗口08.2：打开其他文件分割窗口:splittwo.c
zklvyy·2020-07-09 02:43

针对Apache服务的优化与配置——静态资源压缩及缓存

针对Apache服务的优化与配置——静态资源压缩及缓存基于之前的日志文件分割与日志文件分析，此次将为大家带来Apache静态资源的压缩以及缓存时间的设置。
Biu_diudiu·2020-07-08 23:06

mapreduce设置map个数_mapreduce设置map内存

摘要在map阶段读取数据前，FileInputFormat会将输入文件分割成split。split的个数决定了map的个数。
weixin_40404189·2020-07-08 19:04

7、struts.xml配置详解

一下分别介绍一下几个struts.xml中常用到的标签1、利用include标签，可以将一个struts.xml配置文件分割成多个配置文件，然后在struts.xml中使用标签引入其他配置文件。
weixin_30741653·2020-07-08 14:49

【码农翻身笔记】MapReduce的来龙去脉

为什么计算也要分布式使用HDFS可以把文件分割为一个一个的片段，然后存储在各个节点上，同时为了保证高可靠性，存的是3副本。这一切的操作对客户端都是透明的，它仍然是觉得是在对同一个文件进行操作。
weixin_30260399·2020-07-08 13:07

整理总结 --- java NIO 多线程往同一个文件写入数据的线程安全的例子

功能描述将文件分割成几块，利用多线程同时写入。
天地不仁以万物为刍狗·2020-07-08 07:06

linux中 大文件分割成小文件

自己遇到的情况是，一个excel文件40M，在电脑上打开，太卡了，怎么能把大文件分割成几个小文件，那就轻松多了啊。
yangkfor·2020-07-08 02:35

Pandas与EXCEL之数据读取/保存/文件分割/文件合并

如果你是数据分析挖掘从业人员，想必经常会用到EXCEL，但是一遇到很多数据时往往一个简单的操作都足以让性能一般的电脑卡上半天。因此，用其他工具来替代EXCEL的繁琐操作显得很有必要。Pandas作为python在数据挖掘分析方面的一个重要第三方库，能够解决EXCEL的大部分操作问题。下面介绍工作中常用到的一些操作。（1）读取EXCEL文件如果只是想简单的读取，看下面：importpandasasp
会飞的小罐子·2020-07-07 23:55

mapreduce中maptask个数的决定因素

在map阶段读取数据前，FileInputFormat会将输入文件分割成split。split的个数决定了map的个数。影响map个数（split个数）的主要因素有：1)文件的大小。
我_是好人·2020-07-07 22:04

使用tar和split打包分割文件

tar是文件打包工具，split是文件分割工具，在邮件中发送附件的时候，可能因为附件大小限制，需要压缩并分割，分几封邮件发送。
blue_214·2020-07-07 04:18

HDFS的运行原理,NameNode,DataNode,client介绍

HDFS默认会将文件分割成bloc
ajksdhajk·2020-07-07 02:02

Python--小甲鱼学习笔记--第29课：文件读写、文件对比、文件分割、内容显示

学习视频中的任务：将文件（record.txt）中的数据进行分割并按照以下规律保存起来：1).小甲鱼的对话单独保存为boy_*.txt的文件（去掉“小甲鱼:”）2).小客服的对话单独保存为girl_*.txt的文件（去掉“小客服:”）3).文件中总共有三段对话，分别保存为boy_1.txt,girl_1.txt，boy_2.txt,girl_2.txt,boy_3.txt,gril_3.txt共6
猪猪会飞·2020-07-06 20:05

struts.xml中常用到的标签

1、利用include标签，可以将一个struts.xml配置文件分割成多个配置文件，然后在struts.xml中使用标签引入其他配置文件。
ly_rose·2020-07-06 17:20

【大数据】——HDFS运行原理及使用

HDFS默认会将文件分割成block
Teingi·2020-07-06 02:27

利用IDM实现百度云满速下载

简单的图形用户界面使IDM用户友好和易于使用.Internet下载管理器具有智能下载逻辑加速器，具有智能动态文件分割和安全的多部分下载技术，以加速您的下载。与其他下载管理
R芮R·2020-07-05 20:03

NoSQL-HDFS-基本概念

先将电脑硬盘扩容至少250G，再将文件分割成多块，放到多块硬盘上储存。通过hdf
GeekerLou·2020-07-05 16:39

搭建BitTorrent环境

BitTorrent把文件分割，分块校验，分块传输，并发性好，速度快，可靠性有保证。搭建BitTorrent环境很简单，需要一个tracker程序和一个客户端程序。
这个眼睛很好看·2020-07-05 10:50

vue-cli3项目vue.config.js配置优化

vue-cli3脚手架创建的项目，可以通过在项目根目录下创建vue.config.js配置文件来修改优化webpack配置，主要优化流程分为以下几步进行，用于优化项目打包，减小体积大小1.js最小化处理2.js文件分割
星空下的嗳·2020-07-05 05:15

Potree：大规模点云渲染

大规模点云渲染前言数据结构Octree（八叉树）ModifiableNestedOctreePotree'sOctreeStructurePoisson-DiskSubsamplingPotree构建算法Potree索引文件分割总结参考资料前言
草半·2020-07-05 05:28

大文件分割上传

问题描述问题描述：在上传大文件时，返回了504timeout阿里SLB负载有一个参数‘连接请求超时时间’，这个时间最大是180s，也就是说slb负载在等待服务端返回结果不能超过180s否则会向客户返回504错误。经过排查发现文件经过NG转发到TOMCAT容器时，TOMCAT容器会接收文件并写入磁盘（临时文件），发现写临时文件的速度太慢，测试观察到差不多是3-4m/s，所以以导致了超时，这个是一个客
流放程序员·2020-07-05 04:01

HDFS(Hadoop Distributed File System) Hadoop分布式文件系统

HDFS默认会将文件分割成block，64M为一个bl
兔子先生i·2020-07-04 10:36

Java文件切片 & 切片合并代码

文件分割器：packagecom.lonzh.fileutils;importjava.io.File
kingviewer·2020-07-02 06:16

hadoop的DFSOutputStream

2、如果文件超过一个block的大小（默认是64M），那么将一个文件分割成多个block是在哪
和大黄·2020-07-01 09:34

golang 大文件分割与合并

packagemainimport("fmt""io/ioutil""math""os""strconv")constchunkSize=1int(fileInfo.Size()-(i-1)*chunkSize){b=make([]byte,fileInfo.Size()-(i-1)*chunkSize)}fi.Read(b)f,err:=os.OpenFile("./"+strconv.Itoa
chuanghua8764·2020-07-01 02:32

HDFS文件系统如何查看文件对应的block

（1）文件分割后，会有一个文件-->block的映射，这个映射是持久化到硬盘中的，具体的映射关系表是在FSNamesystem.java中构建的（该部分的构建使用的是FSDirectory.java的功能
雪峰庙·2020-06-30 03:16

大文件分割工具，QT实现

最近在学习QT开发，为了验证自己学习成果，最好还是做一个有点用的UI界面工具。想到了在前一家公司工作时，主要是分析出系统发生的异常，找出根本原因。这个异常可能发生在linuxkernel，也可能是native层的应用，也可能发生在apk中。特别是烧机和压力测试过程中发生的异常，通常会抓很多的log来辅助分析，这些log抓出来后会是一个好几G的大文件，利用文本工具打开来查看log，几G的文件基本打不
xiongtiancheng·2020-06-30 02:37

分布式存储中的纠删码的一些简单定义

纠删码技术原理：将要存储的文件分割成kkk个数据单元，对其进行编码生成mmm个校验单元。并将这n(n=k+m)n(n=k+m)n(n=k+m)个文件碎片分布到不同的节点中。
IT_learner_1·2020-06-29 00:32

前端实现文件的断点续传

所以一般来说在老旧浏览器上支持度是不高的本文通过断点续传的简单例子（前端文件提交+后端PHP文件接收），理解其大致的实现过程还是先以图片为例，看看最后的样子一、一些知识准备断点续传，既然有断，那就应该有文件分割的过程
weixin_34378969·2020-06-28 18:34

解决flume运行中的一个异常问题！

今天在本地测试flume的exec监控文件分割的问题！！！遇到各种141异常问题！
weixin_34239169·2020-06-28 14:13

区块链概念：Merkle Tree

为了校验数据的完整性，更好的办法是把大的文件分割成小的数据块（例如，把分割成2K为单位的数据块）。这样的好处是，如果小块数据在传输过程中损坏了，那么只要重新下载这一快数据就行了，不用重新下
方向盘4519·2020-06-28 13:56

如何将一个文件分割成多个小文件

程序运行后界面如下：基本构成思想：文件分割的基本思想比我之前发表的另一篇文章《如何将多个文件合并为一个可执行程序》的构成思想简单多了，它主要也分为分
weixin_33889665·2020-06-28 07:27

android下大文件分割上传

由于android自身的原因，对大文件(如影视频文件)的操作很容易造成OOM，即：Dalvik堆内存溢出，利用文件分割将大文件分割为小文件可以解决问题。文件分割后分多次请求服务。
weixin_33881041·2020-06-28 07:00

txt文件分割

background要在很大的数据量中查询其中某些flag的值是否正常，debug看肯定不行，我就把flag都输出到log中，然后下班回家。回到家中发现log有2G多，编辑器打不开，然后就想写个分割器。code贴到下面codeimportjava.io.BufferedWriter;importjava.io.File;importjava.io.FileInputStream;importjav
花神是神·2020-06-26 23:00

pythpython-dataframe数据预处理（一）之txt数据集文件分割

'''fun:一个txt文件a有x行，y列。一行代表一个样本，第1-（y-1）代表特征，第y列代表样本的类别（即标签例如有c1/c2/c3三个类别），此代码依据样本的标签列，将a.txt分割成c1.txt、c2.txt、c3.txt。'''#-*-coding:utf-8-*-importpandasaspdimportnumpyasnpfeature_size=45col_index=[]for
贪狼切·2020-06-26 18:28

php+html5实现无刷新上传，大文件分片上传，断点续传

服务端会以约一个月为单位周期性的清除上传后未被合并为块的数据片实现过程：将文件分割，分片上传，然后合并前端核心code：varfileForm=document.getElementById("file
橙虚缘·2020-06-24 22:49

Windows环境下文件分割器（XP平台测试）

才学SDK时写的，粗糙难免，见者无怪！/////////////FileCut.c#include"FileCut.h"#include"resource.h"BOOLSelectFile(OPENFILENAME*ofn,intMode){if(Mode==FILE_COM)ofn->Flags=OFN_ALLOWMULTISELECT;elseif(Mode==FILE_CUT)ofn->Fl
jianchiwhb·2020-06-23 21:21

asp.net打包多CSS或JS文件以加快页面加载速度

虽然你应该将你的Javascript代码写在小文件中并且将大的CSS文件分割到小文件中，当一个浏览器请求那些JS以及CSS文件，它却将为每一个文件产生一个请求。
iteye_16284·2020-06-23 18:43

PDF文件在线合并如何操作

在这里我们需要使用到迅捷PDF转换器在线版进行操作，迅捷PDF转换器在线版，功能强大，具备PDF文件分割、合并、图片获取等功能，因此我们利用这款在线版软件可以轻松的将两个PDF文件合并成一个，以下就是这款软件的操作教程
地主家的黑胖子·2020-06-23 16:34

Hadoop+Spark大数据巨量分析与机器学习整合开发实战

文件存储架构：文件分割区块（block）副本机架（rack）感知NameNode：管理和维护HDFS目录系统并控制文件的读写操作DataNode：存储数据HadoopMapReduceMap：
daxia665544·2020-06-23 03:20

2.11 分割文件和数据

《LinuxShell脚本攻略（第2版）》读书笔记split#将文件分割成多个大小为10KB的文件$split-b10kdata.file$lsdata.filexaaxabxacxadxaexafxagxahxaixaj
拙言_Coder·2020-06-22 11:29

Mp4 分割 怎么将mp4视频文件分割成几段

当我们需要分割视频或音频的某一段时，就需要通过分割视频来实现。虽然分割视频是一件很容易的事，但对于初学者来说，面对网上五花八门的号称能分割视频的软件却又要花费一段时间去摸索，实在耗时耗力。今天小编也根据多日的收集和总结，就给大家优先推荐综合性的迅捷视频转换器快速实现分割视频，为大家节省宝贵的时间。另外，这款软件还提供各种音视频频格式转换功能，还有视频合并、视频分割……相信体验后大家定有更多的发现。
Tybyqi·2020-06-22 07:07
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他