LGT Blog

Posted by LGT on April 26, 2024

论文阅读|The Quantcast File System

About QFS

原论文：The Quantcast File System (VLDB’13) QFS简介及技术要点 QFS（Quantcast File System）是由Quantcast开发的一个高效、可扩展的分布式文件系统，旨在提供与Hadoop分布式文件系统（HDFS）兼容的替代方案。QFS是用...

Posted by LGT on April 16, 2024

论文阅读|Bigtable

About Bigtable

原论文：Bigtable: A Distributed Storage System for Structured Data (OSDI’06) Introduction Bigtable 是一种用于管理结构化数据的分布式存储系统，可扩展到非常大的规模：数千台服务器上的数据量可达 P...

Posted by LGT on April 15, 2024

论文阅读|Ceph

About Ceph

原论文：Ceph: A Scalable, High-Performance Distributed File System (OSDI’06) Ceph简介及关键技术要点 Ceph是一个高性能、可扩展的分布式文件系统，旨在提供出色的性能、可靠性和可扩展性。为了最大化数据和元数据管理的分离...

Posted by LGT on April 14, 2024

论文阅读|The Hadoop Distributed File System

About HDFS

原论文：The Hadoop Distributed File System (MSST’10) HDFS关键技术要点概览设计目标：HDFS旨在可靠地存储大型数据集，并以高带宽流式传输这些数据集到用户应用程序。它通过在大量服务器上分布存储和计算资源，使得资源可以随着需求的...

Posted by LGT on April 9, 2024

论文阅读|MapReduce

About MapReduce

原论文：MapReduce: Simplified Data Processing on Large Clusters (OSDI’04) Map and Reduce Map：处理键值对，生成一组中间键值对 Reduce：合并与同一中间键相关的所有中间值 process o...

Posted by LGT on April 3, 2024

论文阅读|The Google File System

About GFS

原论文：The Google File System Introduction component failures are the norm rather than the exception Thus we need constant monitoring,...

Posted by LGT on April 2, 2024

学习笔记|Shell Script

Usage of shell script

Usage of shell script References: Learn Shell, [Shell 教程菜鸟教程 (runoob.com)](https://www.runoob.com/linux/linux-she...

Posted by LGT on March 23, 2023

学习笔记|Makefile示例

About Makefile

Makefile 这里主要通过示例展示makefile的用法 make(GNU make) 是一个项目构建工具，即方便地编译、链接多个源代码文件，自动决定哪些源文件需要重新编译，从而高效地构建自己的项目。基本规则 1 2 3 4 5 目标文件:依赖文件命令...