分布式系统领域经典论文翻译集

2023-11-09

分布式领域论文译序

sql&nosql年代记

SMAQ:海量数据的存储计算和查询

一.google论文系列

1.      google系列论文译序

2.      The anatomy of a large-scale hypertextual Web search engine (译 zz)

3.      web search for a planet :the google cluster architecture(译)

4.      GFS:google文件系统 (译)

5.      MapReduce: Simplied Data Processing on Large Clusters (译)

6.      Bigtable: A Distributed Storage System for Structured Data (译)

7.      Chubby: The Chubby lock service for loosely-coupled distributed systems (译)

8.      Sawzall:Interpreting the Data--Parallel Analysis with Sawzall (译 zz)

9.      Pregel: A System for Large-Scale Graph Processing (译)

10.  Dremel: Interactive Analysis of WebScale Datasets(译zz)

11.  Percolator: Large-scale Incremental Processing Using Distributed Transactions and Notifications(译zz)

12.   MegaStore: Providing Scalable, Highly Available Storage for Interactive Services(译zz)

13.   Case Study GFS: Evolution on Fast-forward (译)

14.   Google File System II: Dawn of the Multiplying Master Nodes

15.   Tenzing - A SQL Implementation on the MapReduce Framework (译)

16.   F1-The Fault-Tolerant Distributed RDBMS Supporting Google's Ad Business

17.   Elmo: Building a Globally Distributed, Highly Available Database

18.   PowerDrill:Processing a Trillion Cells per Mouse Click

19.   Google-Wide Profiling:A Continuous Profiling Infrastructure for Data Centers

20.   Spanner: Google’s Globally-Distributed Database(译zz)

21.   Dapper, a Large-Scale Distributed Systems Tracing Infrastructure(笔记)

22.   Omega: flexible, scalable schedulers for large compute clusters

23.   CPI2: CPU performance isolation for shared compute clusters

24.   Photon: Fault-tolerant and Scalable Joining of Continuous Data Streams(译)

25.   F1: A Distributed SQL Database That Scales

26.   MillWheel: Fault-Tolerant Stream Processing at Internet Scale(译)

27.   B4: Experience with a Globally-Deployed Software Defined WAN

28.   The Datacenter as a Computer

29.   Google brain-Building High-level Features Using Large Scale Unsupervised Learning

google系列论文翻译集(合集)

二.分布式理论系列

00.    Appraising Two Decades of Distributed Computing Theory Research

       0.      分布式理论系列译序

1.      A brief history of Consensus_ 2PC and Transaction Commit (译)

2.      拜占庭将军问题 (译) --Leslie Lamport

3.      Impossibility of distributed consensus with one faulty process (译)

4.      Leases:租约机制 (译)

5.      Time Clocks  and the Ordering of Events in a Distributed System(译)  --Leslie Lamport

6.      关于Paxos的历史

7.      The Part Time Parliament (译 zz) --Leslie Lamport

        8.      How to Build a Highly Available System Using Consensus(译)

9.      Paxos Made Simple (译) --Leslie Lamport

10.      Paxos Made Live - An Engineering Perspective(译)

       11.    2 Phase Commit(译)

       12.    Consensus on Transaction Commit(译) --Jim Gray & Leslie Lamport

       13.    Why Do Computers Stop and What Can Be Done About It?(译) --Jim Gray

       14.    On Designing and Deploying Internet-Scale Services(译) --James Hamilton

       15.    Single-Message Communication(译)

16.    Implementing fault-tolerant services using the state machine approach

       17.    Problems, Unsolved Problems and Problems in Concurrency
       18.    Hints for Computer System Design

       19.    Self-stabilizing systems in spite of distributed control
       20.    Wait-Free Synchronization

       21.    White Paper Introduction to IEEE 1588 & Transparent Clocks
       22.    Unreliable Failure Detectors for Reliable Distributed Systems
       23.    Life beyond Distributed Transactions:an Apostate’s Opinion(译zz)

       24.    Distributed Snapshots: Determining Global States of a Distributed System --Leslie Lamport

       25.    Virtual Time and Global States of Distributed Systems

       26.    Timestamps in Message-Passing Systems That Preserve the Partial Ordering

       27.    Fundamentals of Distributed Computing:A Practical Tour of Vector Clock Systems

       28.    Knowledge and Common Knowledge in a Distributed Environment

       29.    Understanding Failures in Petascale Computers

       30.    Why Do Internet services fail, and What Can Be Done About It?

       31.    End-To-End Arguments in System Design

       32.    Rethinking the Design of the Internet: The End-to-End Arguments vs. the Brave New World

       33.    The Design Philosophy of the DARPA Internet Protocols(译zz)

       34.    Uniform consensus is harder than consensus

       35.    Paxos made code - Implementing a high throughput Atomic Broadcast

       36.    RAFT:In Search of an Understandable Consensus Algorithm

分布式理论系列论文翻译集(合集)

三.数据库理论系列

0.    A Relational Model of Data for Large Shared Data Banks --E.F.Codd 1970

1.    SEQUEL:A Structured English Query Language 1974

2.    Implentation of a Structured English Query Language 1975

3.    A System R: Relational Approach to Database Management 1976

4.    Granularity of Locks and Degrees of Consistency in a Shared DataBase --Jim Gray 1976

5.    Access Path Selection in a RDBMS 1979

        6.    The Transaction Concept:Virtues and Limitations --Jim Gray

7.    2pc-2阶段提交:Notes on Data Base Operating Systems --Jim Gray

8.    3pc-3阶段提交:NONBLOCKING COMMIT PROTOCOLS

9.     MVCC:Multiversion Concurrency Control-Theory and Algorithms --1983

       10.    ARIES: A Transaction Recovery Method Supporting Fine-Granularity Locking and Partial Rollbacks Using Write-Ahead Logging-1992

11.    A Comparison of the Byzantine Agreement Problem and the Transaction Commit Problem --Jim Gray

       12.    A Formal Model of Crash Recovery in a Distributed System - Skeen, D. Stonebraker

13.    What Goes Around Comes Around - Michael Stonebraker, Joseph M. Hellerstein

       14.    Anatomy of a Database System -Joseph M. Hellerstein, Michael Stonebraker       15.    Architecture of a Database System(译zz) -Joseph M. Hellerstein, Michael Stonebraker, James Hamilton

四.大规模存储与计算(NoSql理论系列)

0.      Towards Robust Distributed Systems:Brewer's 2000 PODC key notes

1.      CAP理论

2.      Harvest, Yield, and Scalable Tolerant Systems

3.      关于CAP 

4.      BASE模型:BASE an Acid Alternative

5.      最终一致性

6.      可扩展性设计模式

7.      可伸缩性原则

8.      NoSql生态系统

9.      scalability-availability-stability-patterns

10.    The 5 Minute Rule and the 5 Byte Rule (译)

        11.    The Five-Minute Rule Ten Years Later and Other Computer Storage Rules of Thumb

12.    The Five-Minute Rule 20 Years Later(and How Flash Memory Changes the Rules)

13.    关于MapReduce的争论

14.    MapReduce:一个巨大的倒退

15.    MapReduce:一个巨大的倒退(II)

16.    MapReduce和并行数据库,朋友还是敌人?(zz)

17.    MapReduce and Parallel DBMSs-Friends or Foes (译)

18.    MapReduce:A Flexible Data Processing Tool (译)

19.    A Comparision of Approaches to Large-Scale Data Analysis (译)

20.    MapReduce Hold不住?(zz)   

21.    Beyond MapReduce:图计算概览

22.    Map-Reduce-Merge: simplified relational data processing on large clusters

23.    MapReduce Online

24.    Graph Twiddling in a MapReduce World

25.    Spark: Cluster Computing with Working Sets

26.    Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing

27.    Big Data Lambda Architecture

28.    The 8 Requirements of Real-Time Stream Processing

29.    The Log: What every software engineer should know about real-time data's unifying abstraction

30.    Lessons from Giant-Scale Services

五.基本算法和数据结构

1.      大数据量,海量数据处理方法总结

2.      大数据量,海量数据处理方法总结(续)

3.     Consistent Hashing And Random Trees

4.    Merkle Trees

5.    Scalable Bloom Filters

6.    Introduction to Distributed Hash Tables

7.    B-Trees and Relational Database Systems

8.    The log-structured merge-tree (译)

9.    lock free data structure

10.    Data Structures for Spatial Database

11.    Gossip

12.    lock free algorithm

13.    The Graph Traversal Pattern

六.基本系统和实践经验

1.    MySQL索引背后的数据结构及算法原理

2.    Dynamo: Amazon’s Highly Available Key-value Store (译zz)

3.    Cassandra - A Decentralized Structured Storage System (译zz)

4.    PNUTS: Yahoo!’s Hosted Data Serving Platform (译zz)

5.    Yahoo!的分布式数据平台PNUTS简介及感悟(zz)

 

6.    LevelDB:一个快速轻量级的key-value存储库(译)

7.    LevelDB理论基础

8.    LevelDB:实现(译)

9.    LevelDB SSTable格式详解

10.     LevelDB Bloom Filter实现

11.     Sawzall原理与应用

12.     Storm原理与实现

13.     Designs, Lessons and Advice from Building Large Distributed Systems --Jeff Dean

14.     Challenges in Building Large-Scale Information Retrieval Systems --Jeff Dean

15.      Experiences with MapReduce, an Abstraction for Large-Scale Computation --Jeff Dean

16.      Taming Service Variability,Building Worldwide Systems,and Scaling Deep Learning --Jeff Dean

17.      Large-Scale Data and Computation:Challenges and Opportunitis  --Jeff Dean

18.      Achieving Rapid Response Times in Large Online Services --Jeff Dean

19.      The Tail at Scale(译)  --Jeff Dean & Luiz André Barroso 

20.      How To Design A Good API and Why it Matters

21.      Event-Based Systems:Architect's Dream or Developer's Nightmare?

22.     Autopilot: Automatic Data Center Management

七.其他辅助系统

1.    The ganglia distributed monitoring system:design, implementation, and experience

2.    Chukwa: A large-scale monitoring system

3.    Scribe : a way to aggregate data and why not, to directly fill the HDFS?

4.    Benchmarking Cloud Serving Systems with YCSB

5.    Dynamo Dremel ZooKeeper Hive 简述

八.   Hadoop相关

0.     Hadoop Reading List

1.     The Hadoop Distributed File System(译)

2.     HDFS scalability:the limits to growth(译)

3.     Name-node memory size estimates and optimization proposal.

4.     HBase Architecture(译)

5.     HFile:A Block-Indexed File Format to Store Sorted Key-Value Pairs

6.     HFile V2

7.     Hive - A Warehousing Solution Over a Map-Reduce Framework

8.    Hive – A Petabyte Scale Data Warehouse Using Hadoop

9.    HIVE RCFile高效存储结构

10.   ZooKeeper: Wait-free coordination for Internet-scale systems

11.    The life and times of a zookeeper

12.    Avro: 大数据的数据格式(zz)

13.     Apache Hadoop Goes Realtime at Facebook (译)

14.     Hadoop平台优化综述(zz)

15.    The Anatomy of Hadoop I/O Pipeline (译)

16.     Hadoop公平调度器指南(zz)

17.    下一代Apache Hadoop MapReduce

18.    Apache Hadoop 0.23

九.深入理解计算机系统

十.其他

On Computable Numbers with an Application to the Entscheidungsproblem-1936.5.28-A.M.Turing

The First Draft Report on the EDVAC-1945.6.30-John von Neumann

Reflections on Trusting Trust --Ken Thompson

Who Needs an Architect?

Go To statements considered harmfull --Edsger W.Dijkstra

No Silver Bullet Essence and Accidents of Software Engineering --Frederick P. Brooks

出处:http://duanple.blog.163.com/blog/static/709717672011330101333271/

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

分布式系统领域经典论文翻译集 的相关文章

  • redis 基础概述与使用

    目录 一 redis 概述 redis 主从同步执行流程 redis 淘汰策略 缓存常见问题 KEYS指令与SCAN指令 SpringBoot 整合 redis StringRedisTemplate 与 RedisTemplate red
  • 【笔记】下单但未支付的订单倒计时自动取消逻辑实现

    平常我们都用过淘宝 京东这些电商平台 同时肯定也在这些平台上面下过单 这种情况不保证大家都有遇到过 但做开发的 肯定也知道有这个环节的存在 确认货品配置无误之后 我们都会点击购买 随之而来的就是一个结算页 让你确认商品信息 收货地址 价格等
  • News Feed 系统设计

    新鲜事系统 News Feed 什么是新鲜事 News Feed 你登陆 Facebook Twitter 朋友圈 之后看到的信息流 你的所有朋友发的信息的集合 有哪些典型的新鲜事系统 Facebook Twitter 朋友圈 RSS Re
  • Kraken:一款基于爆破技术的多平台分布式密码安全测试工具

    关于Kraken Kraken是一个功能强大的多平台在线分布式密码安全测试工具 该平台基于暴力破解技术来实现对密码安全性的测试 并允许广大研究人员在多台设备上以并行处理的方式遍历字典 基于crunch字典生成器 除此之外 该工具不仅可以通过
  • Kafka——Mac搭建kafka环境

    1 下载Kafka安装包 下载地址 将压缩包移动到 usr local mv kafka 2 12 3 1 0 tgz usr local 解压 tar zxvf kafka 2 12 3 1 0 tgz 2 启动 启动zookeeper
  • Dubbo远程传输协议详解

    前言 上次小编为大家带来了Dubbo调用及容错机制详解 不知道大家有没有去看小编最后留下的问题 欢迎对文章进行评论也希望大家和小编多多交流 今天接着为大家带来Dubbo的内容 传输协议 上次调用机制中并没有涉及Dubbo传输的协议 这次容小
  • 项目实战之RabbitMQ死信队列应用

    作者名称 DaenCode gt https blog csdn net 2302 79094329 作者简介 啥技术都喜欢捣鼓捣鼓 喜欢分享技术 经验 生活 人生感悟 尝尽人生百味 方知世间冷暖 文章目录 架构图 application
  • 分布式数字身份DID简介(五)DID的应用

    在上一篇文章中 我们给出了一种零知识证明的方法 解决用户身份属性的隐私问题 下面我们再来谈谈基于DID技术 我们都能在什么场景去应用 01 无密码安全登录 这个使用场景大家应该都很熟悉了 就类似于微信扫码登录 当我们要注册或者登录一个网站时
  • 在异构系统中学习应用的流迭代分布式编码计算研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码实现
  • 在异构系统中学习应用的流迭代分布式编码计算研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码实现
  • Apollo(阿波罗)——携程推出的分布式配置管理中心 & 启动Apollo & SpringBoot集成 & @ConfigurationProperties的使用姿势

    前言 Apollo 阿波罗 是一款可靠的分布式配置管理中心 诞生于携程框架研发部 能够集中化管理应用不同环境 不同集群的配置 配置修改后能够实时推送到应用端 并且具备规范的权限 流程治理等特性 适用于微服务配置管理场景 本篇博客介绍如何启动
  • 什么是自动化测试,看完你就懂了!

    随着互联网技术的飞速发展 软件本身的规模和复杂度也是逐步增加 为了保证软件项目能够保质保量交付到客户手中 软件测试环节就显得非常重要了 它可以看作是软件项目交付给客户最后一道安全保证 今天给大家聊聊软件测试当中自动化测试相关的知识 希望对大
  • 一文弄懂事件Event与Kafka的区别

    事件 Event 和 Apache Kafka 是两个概念层面上有所不同的东西 它们在应用程序中的作用和使用场景也有很大的差异 1 概念和定义 事件 Event 事件是 系统内发生 的特定事情或状态变化的表示 在编程和软件设计中 事件通常被
  • 消息队列选型:Kafka 如何实现高性能?

    在分布式消息模块中 我将对消息队列中应用最广泛的 Kafka 和 RocketMQ 进行梳理 以便于你在应用中可以更好地进行消息队列选型 另外 这两款消息队列也是面试的高频考点 所以 本文我们就一起来看一下 Kafka 是如何实现高性能的
  • 终于找到了最新版的Zookeeper入门级教程,建议收藏!

    小熊学Java https javaxiaobear cn 1 分布式一致性 1 CAP 理论 CAP 理论指出对于一个分布式计算系统来说 不可能同时满足以下三点 一致性 在分布式环境中 一致性是指数据在多个副本之间是否能够保持一致的特性
  • Spark 中 BroadCast 导致的内存溢出(SparkFatalException)

    背景 本文基于 Spark 3 1 1 open jdk 1 8 0 352 目前在排查 Spark 任务的时候 遇到了一个很奇怪的问题 在此记录一下 现象描述 一个 Spark Application Driver端的内存为 5GB 一直
  • spark相关

    提示 文章写完后 目录可以自动生成 如何生成可参考右边的帮助文档 文章目录 前言 一 pandas是什么 二 使用步骤 1 引入库 2 读入数据 总结 前言 提示 这里可以添加本文要记录的大概内容 例如 随着人工智能的不断发展 机器学习这门
  • 【复现】遗传算法求解分布式电源选址定容问题并考虑环境因素研究【IEEE33节点】(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码实现
  • 考虑极端天气线路脆弱性的配电网分布式电源配置优化模型【IEEE33节点】(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码实现
  • RabbitMQ环境配置

    文章目录 安装Erlang 安装RabbitMQ 安装Erlang 下载地址 http erlang org download otp win64 25 3 2 7 exe 安装RabbitMQ 下载地址 https www rabbitm

随机推荐

  • 入行软件测试7年,才知道原来字节跳动这么容易进

    当前就业环境 裁员 失业消息满天飞 好像有一份工作就不错了 更别说高薪了 其实这只是一方面 而另一方面 各大企业依然求贤若渴 高技术人才依然紧缺 只要你技术过硬 拿个年薪50w不是问题 我的人生格言 比你优秀的人不可怕 可怕的是比你优秀的人
  • C# Winform基本知识、文件结构、控件简介

    1 程序入口 Program类 STAThread com线程模型 单线程单位 如果没有它 无法工作 Application 提供了一系列静态化方法和属性 来管理应用程序 Application EnableVisualStyles 启用应
  • Python 异常捕获与处理

    视频版教程 Python3零基础7天入门实战视频教程 异常捕获与处理 如果出现程序异常 我们不去捕获和处理 那么程序遇到异常 就直接终止 后续的代码无法继续执行 这将是可怕的事情 Python提供了完善的异常处理机制 可以实现捕获异常 处理
  • html头部代码

    学习html是件比较容易的事情 但单单学html语言肯定是不够用的 所以大多数人并没有拿html作为学习核心 而是将html作为javascript 动态语言或者css学习的必经之路 于是很多人并不关注一些其他的html标签 主流书籍大多对
  • 【JavaSE系列】第八话 —— 继承和它的边角料们

    导航小助手 思维导图 一 引出继承 二 继承的概念 三 继承的语法 四 父类成员访问 4 1 子类中访问父类的成员变量 4 2 子类访问父类的成员方法 五 super 关键字 5 1 super 成员变量 5 2 super 成员方法 5
  • QT学习 -- 12信号连接信号

    视频学习链接 https www bilibili com video BV1g4411H78N p 12 信号可以连接事件 普通函数 可以连接槽函数 也可以连接信号 一 信号触发 连接 信号 举例如下 当用鼠标点击按键 按键发出点击 cl
  • 【Leetcode】560. 和为K的子数组

    题目描述 给你一个整数数组 nums 和一个整数 k 请你统计并返回该数组中和为 k 的连续子数组的个数 题解 暴力解法 双循环 i指针从左往右走 j指针从i往左走 一个个遍历一个个加起来 直到加到等于k 就计数一次 执行用时 1445 m
  • okhttp异常: java.io.IOException: closed okio.RealBufferedSource$1.read

    java io IOException closed at okio RealBufferedSource 1 read RealBufferedSource java 405 at sun nio cs StreamDecoder rea
  • Redis——redis配置与优化

    文章目录 一 关系数据库与非关系型数据库 1 关系型数据库 2 非关系型数据库 二 Redis 简介 1 Redis的应用场景 2 Redis的优点 三 Redis 安装部署 1 安装Redis 2 配置参数 四 Redis
  • 任务管理器详解

    进程 看是否有除系统外多余进程 可能是病毒或没有完全关闭的进程 影响机器性能 进程下显示了所有当前正在运行的进程 包括应用程序 后台服务等 性能下可以看到CPU和内存 页面文件的使用情况 卡机 死机 中毒时 CPU使用率会达到100 CPU
  • mysql 用sqlyog连接1045错误解决办法(数据库在linux)

    1045 多半就是要么你端口号3306没开 要么就是你密码错误 安装网路分析 yum install net tools 防火墙开放3306端口 root localhost firewall cmd zone public add por
  • 学生信息管理系统(登录功能)

    工具eclipse 主要操作登陆 增删查改 编写实体类 public class Student private int id private String sId 学号 private String name private String
  • CTF BugKu平台———(Web篇②)

    源代码 unescape编码 https tool chinaz com Tools Escape aspx PS p1 35 34 61 61 32 p2 然后提交即可 67d709b2b54aa2aa648cf6e87a7114f1 文
  • 操作系统 线程同步实验

    操作系统 线程同步实验 一 实验目标 顺序表循环队列实现的实验目标 掌握使用顺序表和循环队列实现队列的基本操作 如队列的插入 删除 遍历等 同时了解循环队列的内部实现原理和利用循环队列解决实际问题的方法 Linux生产者 消费者问题的多线程
  • MFC自定义消息

    一 背景 消息机制是windows程序的典型运行机制 在MFC中有很多已经封装好了的消息 但是在有些特殊情况下我们需要自定义一些消息去完成一些我们所需要的功能 这时候MFC的向导不能帮助我们做到这一点 对此 我们可以通过添加相应的代码去完成
  • C++ 深浅拷贝、写时拷贝

    前言 本章以string类为例介绍浅拷贝与深拷贝 引用计数写时拷贝作为了解内容 string类的模拟实现参考C string类的模拟实现 文章目录 1 浅拷贝 2 深拷贝 3 引用计数 写时拷贝 1 浅拷贝 浅拷贝 对于有申请空间的对象的类
  • Java集合类的总结与比较

    Collection List LinkedList ArrayList Vector Stack Set Map Hashtable HashMap WeakHashMap Collection接口 Collection是最基本的集合接口
  • react自定义useState hook获取更新后值

    您好 如果喜欢我的文章 可以关注我的公众号 量子前端 将不定期关注推送前端好文 在业务中有比较多的场景需要在setState中获取更新后的值从而进行下一步的业务操作 在Class组件中可以通过 this setState name 123
  • 全网最详细中英文ChatGPT-GPT-4示例文档-官网推荐的48种最佳应用场景——从0到1快速入门自然语言指令创建支付API代码(附python/node.js/curl命令源代码,小白也能学)

    目录 Introduce 简介 setting 设置 Prompt 提示 Sample response 回复样本 API request 接口请求 python接口请求示例 node js接口请求示例 curl命令示例 json格式示例
  • 分布式系统领域经典论文翻译集

    分布式领域论文译序 sql nosql年代记 SMAQ 海量数据的存储计算和查询 一 google论文系列 1 google系列论文译序 2 The anatomy of a large scale hypertextual Web sea