Tachyon

以内存为核心的开源分布式存储系统

Tachyon为不同的大数据计算框架（如ApacheSpark，HadoopMapReduce,ApacheFlink等）提供可靠的内存级的数据共享服务。
这次靠你了·2024-02-20 05:26

VMD渲染高清图片

使用snapshot直接渲染的图片分辨率太低了，放大后糊成一团：改用tachyon渲染可以解决这个问题：渲染完成后会生成一个.dat的文本文件，之后使用vmd自带的tachyon_WIN32.exe将dat
薛定谔的青蛙·2024-01-20 08:44

Alluxio中国行（一）开源分布式存储系统Alluxio的历史、现状和未来

Alluxio，前称Tachyon，源自UCBerkeleyAMPLab，是一个
言则yanze·2024-01-05 22:43

Spark OFF_HEAP

Spark2.0以前，默认的off_heap是Tachyon，当然，你可以通过继承ExternalB
尼小摩·2024-01-05 13:18

超详Chip-seq分析流程

organism=Bdistachyonhttps://genome.jgi.doe.gov/portal/pages/dynamicOrganismDownloa
想要学好生信的小白·2023-12-06 20:07

好用的样式动画库集合（css、js）

文章目录前言一、Animate.css二、Anime.js三、CSShake四、Hover.css五、AniJS六、Animista七、Tachyons-animate八、Sequence.js九、Infinite
失眠时间·2023-11-29 12:35

解锁前端Vue3宝藏级资料 第四章 VUE常用 UI 库 1 ( element-plus,Ant ,naiveui,ArcoDesign)

AntDesignVueelement-plusnaiveuiArcoDesignBootstrapVueBuefyChakraUIFramevuerkOrugaTachyonsTailwindCSSNutUIVantVuetify.js
Zht_bs·2023-09-10 23:49

使用vmd渲染并保存指定分辨率的图片

准备TCL脚本文件#设置渲染分辨率为1920x1080,600dpirenderTachyonInternalout.tgawidth1920height1080dpi600#启用抗锯齿选项displayantialiason
药研猿·2023-07-31 07:55

Spark大数据处理技术

原理和架构，以及部署模式、调度框架、存储管理及应用监控等重要模块Spark生态圈深度检阅：SQL处理Shark和SparkSQL、流式处理SparkStreaming、图计算Graphx及内存文件系统Tachyon
weixin_33935777·2023-06-16 02:15

Alluxio原理和应用场景随笔

上周末有幸参加了Alluxio(之前也叫Tachyon)，七牛云和示说网举办的Alluxio上海Meetup，之前我并没有在真实应用场景中使用过Alluxio，对其适用的应用场景一直报怀疑态度。
青色的海牛·2023-03-30 14:09

Spark系列之Spark体系架构

title:Spark系列第四章Spark体系架构4.1Spark核心功能Alluxio原来叫tachyon分布式内存文件系统SparkCore提供Spark最基础的最核心的功能，主要包括：1、SparkContext
落叶飘雪2014·2022-11-29 21:44

【Iceberg＋Alluxio】助力加速数据通道（上篇）

Alluxio是2014年在伯克利AMPLab孵化的一个项目，那时候名叫Tachyon，是跟Spark同一期孵化的分布式存储项目。
·2022-02-16 19:12

推酷《编程狂人》第一一六期

业界新闻Tachyon已支持阿里云OSS，正式改名AlluxioJDK9最终将包含Jigsaw模块系统微软狠挖甲骨文墙脚：从Oracle迁移到SQLServer免费Eclipse基金会发布下一代IDE，
推酷·2021-05-02 12:51

分布式内存文件系统：Tachyon

Tachyonhttp://www.open-open.com/lib/view/open1409754088791.htmlTachyon是一个分布式内存文件系统，可以在集群里以访问内存的速度来访问存在
zdy0_2004·2020-09-15 18:15

Tachyon在Spark中的作用（Tachyon: Reliable, Memory Speed Storage for Cluster Computing Frameworks 论文阅读翻译）...

摘要：Tachyon是一种分布式文件系统，能够借助集群计算框架使得数据以内存的速度进行共享。
weixin_34194087·2020-09-15 18:06

Tachyon的安装、配置和使用

发布人：南京大学PASA大数据实验室董乾豪0.前言在上一篇博文《Tachyon简介》中，我们简要地介绍了Tachyon，一个以内存为中心的分布式文件系统，及其一些基本工作原理。
gurongwalker·2020-09-15 18:27

Tachyon

Tachyon是一个分布式文件系统，提供了一种可靠的方式，可以以访问内存的速度在不同的分布式计算框架之间共享数据。
孝林·2020-09-15 16:07

FileSplit简单使用

@hadoop:/home/hadoop/blb$hdfsdfs-text/user/hadoop/libin/input/inputpath1.txthadoopasparkahiveahbaseatachyonas
走丢的小木头·2020-09-15 13:38

Alluxio介绍与作用

一、介绍AlluxioTachyon正式改名为alluxio，并发布v1.0.0版本，alluxio是内存高速虚拟分布式存储系统。
twj0823·2020-09-13 19:43

Hadoop的FileStatus简单使用

输入文件信息：blb@hadoop1:/home/blb/blb$hdfsdfs-text/user/blb/libin/input/inputpath1.txthadoopasparkahiveahbaseatachyonastormaredisablb
鲍礼彬·2020-09-13 18:49

hadoop的Context简单使用

@hadoop:/home/hadoop/blb$hdfsdfs-text/user/hadoop/libin/input/inputpath1.txthadoopasparkahiveahbaseatachyonastormaredisahadoop
鲍礼彬·2020-09-13 17:46

Tachyon：Spark生态系统中的分布式内存文件系统

（转自：http://www.csdn.net/article/2015-06-25/2825056）Tachyon是Spark生态系统内快速崛起的一个新项目。
凉秋cds·2020-09-11 00:38

ExternalBlockStore

ExternalBlockStore作为存储Block文件的外部管理器，其实际是封装了TachyonBlockManager。这样做可以更好的解耦合，方便以后加入新的第三方的管理器。
大冰的小屋·2020-08-24 16:24

spark有没有什么缺点。。

(a)JVM的内存overhead太大，1G的数据通常需要消耗5G的内存->ProjectTungsten正试图解决这个问题；(b)不同的sparkapp之间缺乏有效的共享内存机制->ProjectTachyon
Bonyin·2020-08-21 21:46

Alluxio环境搭建

Alluxio环境搭建1.简介Alluxio（之前名为Tachyon）是世界上第一个以内存为中心的虚拟的分布式存储系统。它统一了数据访问的方式，为上层计算框架和底层存储系统构建了桥梁。
冒冒大虾·2020-08-14 19:45

Spark Storage之ExternalBlockStore

Tachyon(Alluxio)简介ExternalBlockStore底层使用Tachyon(现更名为Alluxio)，Tachyon是一个分布式文件系统，提供内存级别的访问速度，通常作用于分布式计算框架
Mr_JieLQ·2020-08-14 11:45

Tachyon 0.7.1伪分布式集群安装与测试

Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。
iteye_6622·2020-08-07 14:31

tachyon与hdfs,以及spark整合

Tachyon0.7.1伪分布式集群安装与测试:http://blog.csdn.net/stark_summer/article/details/48321605从官方文档得知，Spark1.4.x和
iteye_6622·2020-08-07 14:00

专访范斌，谈开源三年后的Alluxio

在Alluxio（前Tachyon）项目开源三年后的今天，全世界已经有超过300名贡献者参与到项目当中，其中包括Intel，百度，去哪儿等100多家公司。仅仅在去年，它的代码贡献人数就比以往翻了三倍。
csdn郭芮·2020-08-07 14:58

Spark生态之Alluxio学习25--spark从HDFS和Alluxio读取时间比较

更多代码请见：https://github.com/xubo245/SparkLearningSpark生态之Alluxio学习版本：alluxio-1.3.0（tachyon），spark-1.5.2
KeepLearningBigData·2020-08-07 12:40

Spark生态之Alluxio学习24--分别读取HDFS和Alluxio的数据进行line count比较分析

更多代码请见：https://github.com/xubo245/SparkLearningSpark生态之Alluxio学习版本：alluxio-1.3.0（tachyon），spark-1.5.2
KeepLearningBigData·2020-08-07 12:39

Spark生态之Alluxio学习2---Spark从tachyon中读取文件

1.启动spark-shell2.上传文件到tachyon：xubo@xubo:~/cloud/test/tachyon$../..
KeepLearningBigData·2020-08-07 12:39

New Technique: Tachyon (used memory instead of disk for HDFS)

/2814947-welcome-to-berkeley-where-hadoop-isnt-nearly-fast-enoughCopiedfromhttp://www.oschina.net/p/tachyonAlluxio
Firehotest·2020-08-07 11:19

Tachyon部署与使用指南

Tachyon部署与使用指南Tachyon美[‘tæki:ˌɒn]安装1、目前tachyon的最新版本为0.8.2，目标spark版本是1.6，可以到http://tachyon-project.org
轩辕森·2020-08-04 22:27

Tachyon：Spark生态系统中的分布式内存文件系统

2019独角兽企业重金招聘Python工程师标准>>>Tachyon是Spark生态系统内快速崛起的一个新项目。
weixin_34221332·2020-08-04 20:51

Tachyon简介

发布人：南京大学PASA大数据实验室顾荣1.Tachyon是什么Tachyon（/'tæki:ˌɒn/意为超光速粒子）是以内存为中心的分布式文件系统，拥有高性能和容错能力，能够为集群框架（如Spark、
gurongwalker·2020-08-04 19:16

Tachyon内存文件系统

Tachyon内存文件系统Tachyon是以内存为中心的分布式文件系统，拥有高性能和容错能力，能够为集群框架（如Spark、MapReduce）提供可靠的内存级速度的文件共享服务。
快乐的霖霖·2020-08-04 13:14

Tachyon学习及源码阅读：简介

前言这个系列是关于Tachyon的，主要基于《Reliable,MemorySpeedStorageforClusterComputingFrameworks》这篇论文以及源码，最近工作比较忙，精力实在有限
JoeYangY·2020-08-04 12:43

Tachyon 分布式内存文件系统

随着实时计算的需求日益增多，分布式内存计算也持续升温，怎样将海量数据近乎实时的处理，或者说怎么样把离线批处理的速度再提升到一个新的高度，是当前研究的重点。近年来，内存的吞吐量成指数倍的增长，而磁盘的吞吐量增长的缓慢，那么将原有计算框架中文件落地磁盘替换为文件落地内存，也是提高技术效率的优化点。目前已经使用基于内存计算的分布式计算框架有：Spark，Impala以及SAP的HANA以及DBMS2。但
OopsOutOfMemory·2020-08-04 11:49

Tachyon---基于内存的分布式存储系统

Tachyon是一个以内存为核心的开源分布式存储系统，也是目前发展最迅速的开源大数据项目之一。
行者小朱·2020-08-04 11:38

Tachyon--以内存为核心的开源分布式存储系统

Tachyon是一个以内存为核心的开源分布式存储系统，也是目前发展最迅速的开源大数据项目之一。
腾讯开发者·2020-08-04 11:53

探索植物泛基因组的研究趋势

泛基因组近年来的研究物种泛基因组建立方法来源期刊CultivatedandwildriceDenovoassemblyZhao,Fengetal.2018NaturegeneticsBrachypodimdistachyonDenovo
lakeseafly·2020-08-01 11:25

(四)Spark源码理解之BlockManager---part3

2.4BlockStatus存储了Block块的存储级别（是内存存储还是磁盘存储等），内存，磁盘以及tachyon的大小BlockManagerMasterActor有很多比较重要的方法，正是由于这些方法才使得主节点可以管理块
竹落·2020-07-31 16:32

Alluxio(Tachyon) 作为京东计算框架的容错可插拔优化组件

转自：https://blog.csdn.net/maobaolong/article/details/79337538京东大数据平台规模集群规模服务器规模30000台+，离线集群总规模18000+,用户6000+计算能力离线数据日处理40PB+，日运行Job数100万+存储能力总数据量400PB+，日增数据量500TB+业务能力业务主题40+，数据模型450+大数据平台架构Alluxio介绍Al
scottzcw·2020-07-29 13:41

下一代数据湖技术：Tachyon + Spark将极为重要

下一代数据湖技术的关键在于In-memory处理的普及+能够在单一环境下支持多重数据分析负载的架构。文中表示，PivotalBigDataSuite一直以来的理念是将数据湖作为企业内所有数据的中心化仓库，这样的好处是可以对所有的数据——无论是内存数据还是磁盘数据——进行SQL级别的处理，同时具有将多种计算范式持久化的能力。然而随着高性能内存的性价比越来越高，内存数据库的相关技术与企业越来越成熟，P
湘西刀疤客·2020-07-29 00:33

Alluxio Paper

原文:http://people.eecs.berkeley.edu/~haoyuan/papers/2014_EECS_tachyon.pdfReliable,MemorySpeedStorageforClusterComputingFrameworksAbstractTachyonisadistributedfilesystemenablingreliabledatasharingatmemo
「已注销」·2020-07-28 11:49

大数据Spark企业级实战版【学习笔记】----Tachyon& BlinkDB&Akka

8.TachyonTachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和MapReduce那样。
WEL测试·2020-07-15 23:00

关于大数据的五问五答

5五、你对Tachyon的看法如何？一、Spark能否取代Hadoop？答：Hadoop包含了Common,HDFS,YA
千淘万漉·2020-07-13 08:02

从架构设计、部署方式、使用方法、应用场景等方面，比较tfs、hdfs、fastdfs、Tachyon的异同

详细资料：TFShttps://blog.csdn.net/qq_41946557/article/details/102753394Hdfshttps://blog.csdn.net/qq_41946557/article/details/102753444fastdfshttps://blog.csdn.net/qq_41946557/article/details/102753972tach
乔治大哥·2020-07-11 20:31

hdfs、tfs、fastdfs、Tachyon的辨析

一、Hdfs概念：Hadoop分布式文件系统.①保存多个副本，且提供容错机制，副本丢失或宕机自动恢复。默认存3份。②运行在廉价的机器上。③适合大数据的处理。多大？多小？HDFS默认会将文件分割成block，128M为1个block。然后将block按键值对存储在HDFS上，并将键值对的映射存到内存中(namenode)。如果小文件太多，那内存的负担会很重架构：HDFS按照Master和Slave的
纵死侠骨香·2020-07-11 20:25
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他