mit6.824

MIT6.824 Lab1 MapReduce

lab1是在单机上实现mapreduce库，因为没有分布式环境，所以只能实现序列化操作和用并行操作代替分布式操作。首先看一下流程，主函数在src/main/wc.go里，自己提供的map和reduce函数，这次做的主要是wordcount，所以map和reduce函数为：funcmapF(filenamestring,contentsstring)[]mapreduce.KeyValue{//Yo
Miracle_ma·2020-08-13 12:23

学习分布式一致性协议：自己实现一个Raft算法

前言MIT6.824是麻省理工学院开设的一个很棒的分布式系统公开课程，课程的Schedule在这里，这门课程的学习方式主要是通过教授的lecture讲解、Paper阅读、FAQ答疑，以及实践lab来完成的
Static_lin·2020-08-07 17:20

分布式系统一致性问题与Raft算法（上）

最近在做MIT6.824的几个实验，真心觉得每一个做分布式相关开发的程序员都应该去刷一遍（裂墙推荐），肯定能够提高自己的技术认知水平，同时也非常感谢MIT能够把这么好的资源分享出来。
zzzzMing·2020-08-03 18:25

MIT6.824 Lab1

Lab1.完成Map和Reduce函数lab1我一开始以为很难，实际做下来发现难度尚可，只要一点点做就没有问题。这是本门课程的lab1，主要任务是：熟悉go语言阅读mapreduce论文下载地址完成任务首先贴两张别人总结的图MapReducelab1程序执行流程Task1首先完成doMap函数funcdoMap(jobNamestring,//输入文件的名字mapTaskNumberint,//m
生若夏花_1ad0·2020-07-28 13:21

《Amazon Aurora: Design Considerations for High Throughput Cloud-Native Relational Databases》论文总结

论文地址：AuroraPaper本文首先基于MIT6.824课程内容介绍AWS云数据库的演进过程，接着基于论文内容介绍Aurora。0.简介Aurora
BrianLeeLXT·2020-07-17 19:00

mit6.824学习笔记及学习路线（持续更新 ｜ 论文思想抽象总结）

网上mit6.824的教程已经很多了，大多数是把一个正确代码分段加注释，弄清楚一段代码的作用和原理。这样固然没错，但是任何一个算法或者协议，都有不同场景下的实现，更加重要的是把握算法背后的思想。
Junyu08·2020-07-15 20:07

etcd-raftexample-源码简析

虽然在MIT6.824课程中有简单实现Raft协议，并基于Raft构建了一个粗糙的kv存储系统。但还是想了解下工业生产级别的Raft协议的实现内幕，故选择etcd进行解读。
一抹光辉油彩·2020-07-15 19:41

为什么需要分布式系统

前言最近在学习MIT6.824的分布式系统课程，正在看Raft的论文，Raft是一种共识算法(Consensusalgorithms)，共识算法是用来保证分布式系统里数据的一致性的算法，所以也可以说是一个一致性算法
hhqcontinue·2020-07-10 13:58

Raft探索历程--Part1

（注：笔者没有掌握Paxos算法，所以这里不会去作比较，后续如果学习到的话会做一个比较）笔者主要是通过阅读Raft论文和观看MIT6.824的教程视频学习的。
hhqcontinue·2020-07-09 03:30

MIT6.824 Lab1 MapReduce 通关攻略

1.简介在这个Lab中，我们将建立一个MapReduce库，作为使用GO编程和构建一个分布式容错系统的初步。在第一个部分，我们将会写一个简单的MapReduce程序。在第二个部分，我们将会写一个Master，去向workers分发任务已经handleworkers的错误。2.Software2.1.Go环境官方下载go1.9源码golang.orgsodutar-C/usr/local-xzfgo
Small_Pond·2020-06-22 05:16

MIT6.824实验-Lab3A

实验内容server.go:添加Op结构,其描述了一个Get\Put\Append操作和值client.go:使用.Start(),完善Put(),Append(),Get()等rpchandler.Hint调用Start()后，应该等待raft达成aggrement.kvserver和raft的applyer容易形成死锁要格外注意,leader在提交log之前失去了leadership,这可能被
Tsukami·2020-06-01 19:45

实现MapReduce

最近在学MIT6.824分布式系统课程，第一个Lab就是MapReduce，MapReduce是Google公司2004年发表的一篇论文，介绍很多任务都可以分为两步操作——Map和Reduce(比如要统计词频
FANG_YANG·2020-05-04 15:00

MIT 6.824 2018 分布式系统导论及Hadoop学习 全套课程（包含进阶&部署&实战）

1.前段时间学了MIT6.824里的分布式系统导论，详情参见：最新版的6.8242018DistributedSystems.里边有4个实验，用Go语言（EffectiveGo电子书）实现的。
雨笋情缘·2020-03-22 05:43

MIT6.824 Lab1 MapReduce

lab1是在单机上实现mapreduce库，因为没有分布式环境，所以只能实现序列化操作和用并行操作代替分布式操作。首先看一下流程，主函数在src/main/wc.go里，自己提供的map和reduce函数，这次做的主要是wordcount，所以map和reduce函数为：funcmapF(filenamestring,contentsstring)[]mapreduce.KeyValue{//Yo
马天猫Masn·2020-03-05 03:41

分布式系统一致性问题与Raft算法（上）

最近在做MIT6.824的几个实验，真心觉得每一个做分布式相关开发的程序员都应该去刷一遍（裂墙推荐），肯定能够提高自己的技术认知水平，同时也非常感谢MIT能够把这么好的资源分享出来。
zzzzMing·2020-02-28 19:00

2020 MIT 6.824 分布式系统课程

MIT6.824，笔者在几年前刷完了一遍，过程还是相当折磨人的，但受益颇多。
DataFlow范式·2020-02-26 19:00

除了 MIT 6.824，还有哪些高质量的「分布式系统」学习资料？

如果要问“分布式系统有哪些经典学习资料”，MIT6.824（即MIT分布式系统课程）一定位居榜首，这门课程已经有20年历史，日前公布了2020年春季课表，与往年不同的是，除了传统的文字介绍，官方还放出了高清课程视频
PingCAP·2020-02-24 20:49

漫谈分布式系统：基本概念

0x00前言MIT6.824课程第一节的部分内容，加上自己参考了一些书一起整理而得。资源共享是构造分布式系统的主要动机！
木东居士·2020-01-07 21:37

MIT6.824分布式系统的正确食用方式（lab1.MapReduce）

hello，我就以做lab1的流程为目录，记录一下我做lab1的时候收获的和容易出错的地方。1.阅读MapReduce.2004论文，理解mapreduce2.了解go语言，使用gitclone源代码3.阅读源码，了解程序的执行流程4.按步骤开始做实验1.阅读MapReduce.2004论文，理解mapreduce关于mapreduce，我认为主要关注以下几点。a.是一种编程框架，将任务分解成多份
trecool·2019-12-01 11:04

MIT 6.824 lab1： mapreduce 学习总结

这是MIT6.824课程lab1的学习总结，记录我在学习过程中的收获和踩的坑。
孤鸿子_·2019-04-06 14:05

系统架构-分布式系统的简单经验

最近在跟着MIT6.824课程学习分布式系统的各种理论原理，这里就来简单总结下分布式系统中的一些基础内容吧~CAPTheoryCAPTheory阐述了分布式系统中的一个事实：一致性(Consistency
Odyssues_lee·2019-03-12 20:13

MIT6.824 Lab1 MapReduce

Introduction在本实验中，将用Go编程构建一个MapReduce库。在第一部分中，将编写一个简单的MapReduce程序。在第二部分中，将编写一个Master，将任务分发给MapReduce的worker，并处理worker的失败。库的接口和容错方法类似于MapReduce论文中的描述。Software代码仓库的URL是git://g.csail.mit.edu/6.824-golabs
小睿千万别秃头·2018-12-24 19:35

6.824 Lab 3: Fault-tolerant Key/Value Service Part-A

Introduction该实验是mit6.824课程的第3个实验，基于raft协议完成一个key-value系统实验分为A和B两个部分，在PartA中：我们不考虑日志的大小，在PartB中会完成快照功能完整的代码地址课程地址实验地址已经有的实验地址
小聪明李良才·2017-12-04 06:32

分布式系统学习2-Raft算法分析与实现

之前在容器服务化的时候用到Consul，顺带看了Raft算法的论文，然后为了练手Go语言做了mit6.824分布式系统课程的lab2。
__七把刀__·2017-10-19 00:37

资源向导之 Distributed System 计划 #持续更新中# MIT 6.824

资源向导之 DistributedSystem计划#持续更新中#MIT6.824正式准备开辟第二战场...哇咔咔~使用的课程版本是2015年春季最新的.恩,也就是目前在不断更新的课程,嘿嘿...赶上趟了
u011368821·2015-04-30 13:00
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他