Wednesday, January 13, 2016

Distributed System Resource



https://github.com/ty4z2008/Qix/blob/master/ds.md
介绍:这是一篇介绍在动态网络里面实现分布式系统重构的paper.论文的作者(导师)是MIT读博的时候是做分布式系统的研究的,现在在NUS带学生,不仅仅是分布式系统,还有无线网络.如果感兴趣可以去他的主页了解.
介绍:分布式编程实验室,他们发表的很多的paper,其中不仅仅是学术研究,还有一些工业界应用的论文.
介绍:麻省理工的分布式系统理论主页,作者南希·林奇在2002年证明了CAP理论,并且著《分布式算法》一书.
介绍:分布式系统搭建初期的一些建议
介绍:分布式计算原理课程
介绍:Google全球分布式数据介绍
介绍:Algolia的分布式搜索网络的体系架构介绍
介绍:构建高可用分布式Key-Value存储系统
介绍:Nanomsg和Bond的分布式搜索引擎
介绍:使用MongoDB和Mongothon进行分布式处理
介绍:分布式数据库中把ACID与BASE结合使用.
介绍:理解的Paxos的分布式系统
介绍:There is No Now Problems with simultaneity in distributed systems
介绍:伦敦大学学院分布式系统课程课件.
介绍:分布式系统电子书籍.
介绍:卡内基梅隆大学春季分布式课程主页
介绍: 电子书,分布式系统概念与设计(第五版)
介绍:这是一位台湾网友 ccshih 的文字,短短的篇幅介绍了分布式系统的若干要点。pdf
介绍:清华大学分布式系统课程主页,里面的schedule栏目有很多宝贵的资源
介绍:免费的在线分布式系统书籍
介绍:Quora上面的一篇关于学习分布式计算的资源.
介绍:这个是第一个全球意义上的分布式数据库,也是Google的作品。其中介绍了很多一致性方面的设计考虑,为了简单的逻辑设计,还采用了原子钟,同样在分布式系统方面具有很强的借鉴意义.
介绍:这篇论文详细介绍了Google的分布式锁实现机制Chubby。Chubby是一个基于文件实现的分布式锁,Google的Bigtable、Mapreduce和Spanner服务都是在这个基础上构建的,所以Chubby实际上是Google分布式事务的基础,具有非常高的参考价值。另外,著名的zookeeper就是基于Chubby的开源实现.
介绍:这篇论文是SOSP2007的Best Paper,阐述了一种构建分布式文件系统的范式方法,个人感觉非常有用。淘宝在构建TFS、OceanBase和Tair这些系统时都充分参考了这篇论文.
介绍:Ebook:Data-Intensive Text Processing with MapReduce.
介绍:Design and Implementation of a Query Processor for a Trusted Distributed Data Base Management System.
介绍:分布式查询入门.
介绍:分布式系统和api总结.
介绍:分布式系统阅读论文,此外还推荐github上面的一个论文列表The Distributed Reader
介绍:Replication, atomicity and order in distributed systems
介绍:MIT分布式系统课程主页,这次用Golang作为授课语言。
介绍:免费分布式系统电子书。
介绍:斯坦福开源的分布式文件系统。
介绍:Google论文:设计一个高可用的全球分布式存储系统。
介绍:对于分区数据库的分布式事务处理。
介绍:Distributed Systems Building Block: Flake Ids.
介绍:Google Code University课程,如何设计一个分布式系统。
介绍:KVM的分布式存储系统.
介绍:分布式系统课程列表,包括数据库、算法等.
介绍:来自百度的分布式表格系统.
介绍:分布式系统的在线电子书.
介绍:分布式系统资料,此外还推荐Various articles about distributed systems.
介绍:Designs, Lessons and Advice from Building Large Distributed Systems.
介绍:Testing a distributed system can be trying even under the best of circumstances.
介绍: 基于普通服务器构建超大规模文件系统的典型案例,主要面向大文件和批处理系统, 设计简单而实用。 GFS是google的重要基础设施, 大数据的基石, 也是Hadoop HDFS的参考对象。 主要技术特点包括: 假设硬件故障是常态(容错能力强), 64MB大块, 单Master设计,Lease/链式复制, 支持追加写不支持随机写.
介绍:支持PB数据量级的多维非关系型大表, 在google内部应用广泛,大数据的奠基作品之一 , Hbase就是参考BigTable设计。 Bigtable的主要技术特点包括: 基于GFS实现数据高可靠, 使用非原地更新技术(LSM树)实现数据修改, 通过range分区并实现自动伸缩等.
介绍:面向log-based存储的强一致的主从复制协议, 具有较强实用性。 这篇文章系统地讲述了主从复制系统应该考虑的问题, 能加深对主从强一致复制的理解程度。 技术特点: 支持强一致主从复制协议, 允许多种存储实现, 分布式的故障检测/Lease/集群成员管理方法.
介绍:分布式存储论文:支持强一直的链式复制方法, 支持从多个副本读取数据,实现code.
介绍:Facebook分布式Blob存储,主要用于存储图片. 主要技术特色:小文件合并成大文件,小文件元数据放在内存因此读写只需一次IO.
介绍: 微软的分布式存储平台, 除了支持类S3对象存储,还支持表格、队列等数据模型. 主要技术特点:采用Stream/Partition两层设计(类似BigTable);写错(写满)就封存Extent,使得副本字节一致, 简化了选主和恢复操作; 将S3对象存储、表格、队列、块设备等融入到统一的底层存储架构中.
介绍:从工程实现角度说明了Paxo在chubby系统的应用, 是理解Paxo协议及其应用场景的必备论文。 主要技术特点: paxo协议, replicated log, multi-paxo.
介绍:Amazon设计的高可用的kv系统,主要技术特点:综和运用一致性哈希,vector clock,最终一致性构建一个高可用的kv系统, 可应用于amazon购物车场景.新内容来自分布式存储必读论文
介绍:分布式存储系统中的副本存储问题.
介绍:分布式存储系统架构.
介绍:开源分布式文件系统Chirp,对于想深入研究的开发者可以阅读文章的相关Papers.
介绍:经典论文分布式时钟顺序的实现原理.
介绍:面向软件错误构建可靠的分布式系统,中文笔记.
介绍:MapReduce:超大集群的简单数据处理.
介绍:麻省理工的分布式计算课程主页,里面的ppt和阅读列表很多干货.
介绍:分布式系统Styx的架构剖析.
介绍:Quora上面的一个问答:有哪些关于分布式计算学习的好资源.
介绍:下一代分布式k-v存储数据库.
介绍:分布式系统归根结底还是需要操作系统的知识,这是耶鲁大学的操作系统概念书籍首页,里面有提供了第8版的在线电子版和最新的学习操作系统指南,学习分布式最好先学习操作系统.
介绍:分布式系统Log剖析,非常的详细与精彩. 中文翻译 | 中文版笔记.
介绍:分布式系统基础之操作系统学习指南.
介绍:分布式系统领域经典论文翻译集.
介绍:分布式系统性能维护.
介绍:计算机科学,自底向上,小到机器码,大到操作系统内部体系架构,学习操作系统的另一个在线好材料.
介绍:<操作系统:三部曲>在线电子书,虚拟、并发、持续.
介绍:数据库系统经典论文阅读列,此外推送github上面的db reading.
介绍:Unix System Administration ebook.
介绍:分布式系统经典论文.
介绍:计算机系统概念,以分布式为主.此外推荐Introduction to Operating Systems笔记
介绍:推荐康奈尔大学的教授EMİN GÜN SİRER的主页,他的研究项目有分布式,数据存储。例如HyperDex数据库就是他的其中一个项目之一.
介绍:来自卡内基梅隆如何构建可扩展的、安全、高可用性的分布式文件系统,其他papers.
介绍:分布式机器学习常用库.
介绍:Google的统面向松散耦合的分布式系统的锁服务,推荐The google stack.
介绍:介绍了如何构建仓储式数据中心,尤其是对于现在的云计算,分布式学习来说很有帮助.本书是Synthesis Lectures on Computer Architecture系列的书籍之一,这套丛书还有 《The Memory System》,《Automatic Parallelization》,《Computer Architecture Techniques for Power Efficiency》,《Performance Analysis and Tuning for General Purpose Graphics Processing Units》,《Introduction to Reconfigurable Supercomputing》 等
介绍:来自芬兰赫尔辛基的分布式系统课程课件:什么是分布式,复制,一致性,容错,同步,通信.
介绍:分布式数据库TiDB,Golang开发.
介绍:课程资料:大规模系统.
介绍:使用MapReduce进行大规模分布式集群环境下并行L-BFGS.
介绍:Twitter是如何构建高性能分布式日志的.
介绍:在分布式系统中某个组件彻底死了影响很小,但半死不活(网络/磁盘),对整个系统却是毁灭性的.
介绍:来自百度的分布式数据库.
介绍:SequoiaDB分布式文档数据库开源.
介绍:这个网址里收集了一堆各TOP大学分布式相关的课程.
介绍:这个网站是Raft算法的作者为教授Paxos和Raft算法做的,其中有两个视频链接,分别讲上述两个算法.
介绍:A Scalable Content-Addressable Network.
介绍:这个项目其实是一本书( The Architecture of Open Source Applications)的源代码附录,是一堆大牛合写的.
介绍:这只是一个课程主页,没有上课的视频,但是并不影响你跟着它上课:每一周读两篇课程指定的论文,读完之后看lecture-notes里对该论文内容的讨论,回答里面的问题来加深理解,最后在课程lab里把所看的论文实现。当你把这门课的作业刷完后,你会发现自己实现了一个分布式数据库.
介绍:使用go开发的分布式文件系统.
介绍:Quora上关于学习分布式的资源问答.
介绍:SeaweedFS是使用go开发的分布式文件系统项目,代码简单,逻辑清晰.
介绍:Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别
介绍:Coordination Avoidance In Distributed Databases.
介绍:本文以TiDB 源码为例.
介绍:分布式系统概念梳理,为分布式系统涉及的主要概念进行了梳理.
介绍:使用Redis实现分布式锁.
介绍: 斯坦福2014年秋季分布式课程.
介绍: 分布式的“读原子性”.
介绍: 大数据分布式机器学习的策略与原理.
介绍: 分布式CAP法则.
介绍: 新手如何步入分布式存储系统.
介绍: 分布式存储系统Cassandra剖析,推荐白皮书Introduction to Apache Cassandra.
介绍: 分布式系统学习资源.
介绍: 一些高性能TCP黑客技巧.
介绍:分布式系统性能提升.
介绍:Benjamin Reed 和 Flavio P.Junqueira 所著论文,对Zab算法进行了介绍,zab算法是Zookeeper保持数据一致性的核心,在国内有很多公司都使用zookeeper做为分布式的解决方案.推荐与此相关的一篇文章ZooKeeper’s atomic broadcast protocol: Theory and practice.
介绍:分布式Haskell在当前web中的应用.
介绍:POPL2016的论文,关于分布式系统一致性选择的论述,POPL所接受的论文,github上已经有人整理.



Labels

Review (572) System Design (334) System Design - Review (198) Java (189) Coding (75) Interview-System Design (65) Interview (63) Book Notes (59) Coding - Review (59) to-do (45) Linux (43) Knowledge (39) Interview-Java (35) Knowledge - Review (32) Database (31) Design Patterns (31) Big Data (29) Product Architecture (28) MultiThread (27) Soft Skills (27) Concurrency (26) Cracking Code Interview (26) Miscs (25) Distributed (24) OOD Design (24) Google (23) Career (22) Interview - Review (21) Java - Code (21) Operating System (21) Interview Q&A (20) System Design - Practice (20) Tips (19) Algorithm (17) Company - Facebook (17) Security (17) How to Ace Interview (16) Brain Teaser (14) Linux - Shell (14) Redis (14) Testing (14) Tools (14) Code Quality (13) Search (13) Spark (13) Spring (13) Company - LinkedIn (12) How to (12) Interview-Database (12) Interview-Operating System (12) Solr (12) Architecture Principles (11) Resource (10) Amazon (9) Cache (9) Git (9) Interview - MultiThread (9) Scalability (9) Trouble Shooting (9) Web Dev (9) Architecture Model (8) Better Programmer (8) Cassandra (8) Company - Uber (8) Java67 (8) Math (8) OO Design principles (8) SOLID (8) Design (7) Interview Corner (7) JVM (7) Java Basics (7) Kafka (7) Mac (7) Machine Learning (7) NoSQL (7) C++ (6) Chrome (6) File System (6) Highscalability (6) How to Better (6) Network (6) Restful (6) CareerCup (5) Code Review (5) Hash (5) How to Interview (5) JDK Source Code (5) JavaScript (5) Leetcode (5) Must Known (5) Python (5)

Popular Posts