open-courses
  • 公开课笔记
  • CMU 15-445/645 Database Systems
    • Relational Data Model
    • Advanced SQL
    • Database Storage
    • Buffer Pools
    • Hash Tables
    • Tree Indexes
    • Index Concurrency Control
    • Query Processing
    • Sorting&Aggregations
    • Join Algorithms
    • Query Optimization
    • Parallel Execution
    • Embedded Database Logic
    • Concurrency Control Theory
    • Two Phase Locking
    • Timestamp Ordering Concurrency Control
    • Multi-Version Concurrency Control
    • Logging Schemes
    • Database Recovery
    • Introduction to Distributed Databases
    • Distributed OLTP Databases
    • Distributed OLAP Databases
  • UCB - CS162
    • OS intro
    • Introduction to the Process
    • Processes, Fork, I/O, Files
    • I/O Continued, Sockets, Networking
    • Concurrency: Processes & Threads
    • Cooperating Threads, Synchronization
    • Semaphores, Condition Variables, Readers/Writers
    • Scheduling
    • Resource Contention & Deadlock
    • Address Translation, Caching
    • File System (18,19,20)
    • Distributed Systems, Networking, TCP/IP, RPC (21,22)
    • Distributed Storage, Key-Value Stores, Security (23)
    • Security & Cloud Computing (24)
    • Topic: Ensuring Data Reaches Disk
  • MIT - 6.006
    • Sequence and Set Interface
    • Data Structure for Dynamic Sequence Interface
    • Computation Complexity
    • Algorithms and Computation
    • Structure Of Computation
    • Graph & Search
    • Tree & Search
    • Weighted Shortest Paths
    • String Matching, Karp-Rabin
    • Priority Queue Interface & Implementation
    • Dictionary Problem & Implementation
    • Sorting
    • Dynamic Programming
    • Backtracking
    • Self-Balancing Tree
  • MIT - 6.824
    • 2PC & 3PC
    • Introduction and MapReduce
    • RPC and Threads
    • Primary/Backup Replication
    • Lab: Primary/Backup Key/Value Service
    • Google File System (GFS)
    • Raft
    • Lab: Raft - Leader Election
    • Lab: Raft - Log Replication
  • Stanford-CS107
    • 原始数据类型及相互转化
    • 指鹿为马
    • 泛型函数
    • 泛型栈
    • 运行时内存结构
    • 从 C 到汇编
    • 函数的活动记录
    • C 与 C++ 代码生成
    • 编译的预处理过程
    • 编译的链接过程
    • 函数的活动记录续、并发
    • 从顺序到并发和并行
    • 信号量与多线程 1
    • 信号量与多线程 2
    • 复杂多线程问题
    • 函数式编程 - Scheme 1
    • 函数式编程 - Scheme 2
    • 函数式编程 - Scheme 3
    • 函数式编程 - Scheme 4
    • 函数式编程 - Scheme 5
    • Python 基础
  • MIT - 6.001 - SICP
    • 什么是程序
    • 程序抽象
    • 替代模型
    • 时间/空间复杂度
    • 数据抽象
    • 高阶函数
    • Symbol
    • 数据驱动编程与防御式编程
    • 数据抽象中的效率与可读性
    • 数据修改
    • 环境模型
    • 面向对象-消息传递
    • 面向对象 - Scheme 实现
    • 构建 Scheme 解释器
    • Eval-Apply Loop
    • Normal Order (Lazy) Evaluation
    • 通用机
    • 寄存器机器
    • 子程序、栈与递归
    • 在寄存器机器中执行
    • 内存管理
  • MIT - 6.046
    • Randomized Algorithms
    • Skip Lists
  • System Design
    • Twitter
    • Cache Consistency & Coherence
  • DDIA 笔记
    • Replication
    • Transactions
    • The Trouble with Distributed Systems
    • Consistency & Consensus
  • Papers We Love
    • Consistent Hashing and Random Trees (1997)
    • Dynamic Hash Tables (1988)
    • LFU Implementation With O(1) Complexity (2010)
    • Time, Clocks, and the Ordering of Events in a Distributed System (1978)
    • Dapper, a Large-Scale Distributed Systems Tracing Infrastructure (2010)
    • Gorilla: A Fast, Scalable, In-Memory Time Series Database (2015)
  • Release It 笔记
    • Anti-patterns & Patterns in Microservice Architecture
  • Database Design
    • Log Structured Merge (LSM) Tree & Usages in KV Stores
    • Prometheus
Powered by GitBook
On this page
  1. Stanford-CS107

信号量与多线程 1

第十六课

Reader and Writer

Writer 将往 buffer 写入 40 个字节,Reader 将读取 Writer 写入 buffer 的 40 字节。

char buffer[8];

int main() {
    InitThreadPackage(false);
    ThreadNew("Writer", Writer, 0);
    ThreadNew("Reader", Reader, 0);
    RunAllThread();
}

void Writer() {
    for (int i = 0; i < 40; i++) {
        char c = PrepareRandomChar();
        buffer[i%8] = c;
    }
}

void Reader() {
    for (int i = 0; i < 40; i++) {
        char c = buffer[i%8];
        ProcessChar(c);
    }
}

以上代码有许多问题,总结如下:

  • 如果 Reader 的读速度高于 Writer 的写速度,Reader 就会读取尚未被 Writer 写入的 buff,导致 Reader 读到无用信息

  • 如果 Writer 的写速度高于 Reader 的读速度,Writer 就会写入尚未被 Reader 读取的 buff,导致 Writer 覆盖尚未读取的信息

因此我们需要保证:

  • Writer 不会写入尚未被读取的 buff

  • Reader 不会读取尚未被写入的 buff

char buffer[8];
Semaphore emptyBuffers(8);
Semaphore fullBuffers(0);

int main() {
    InitThreadPackage(false);
    ThreadNew("Writer", Writer, 0);
    ThreadNew("Reader", Reader, 0);
    RunAllThread();
}

void Writer() {
    for (int i = 0; i < 40; i++) {
        char c = PrepareRandomChar();
        SemaphoreWait(emptyBuffer);
        buffer[i%8] = c;
        SemaphoreSignmal(fullBuffers);
    }
}

void Reader() {
    for (int i = 0; i < 40; i++) {
        SemaphoreWait(fullBuffers);
        char c = buffer[i%8];
        SemaphoreSignal(emptyBuffers);
        ProcessChar(c);
    }
}

emptyBuffers 初始值为 8,因此 Writer 在没有 Reader 读取的情况下可以连续写入 8 个字符;fullBuffers 的初始值为 0,因此 Reader 在没有 Writer 写入的情况下无法从 buffer 读取任何字符。每当 Writer 发现还有尚未写入或者虽然写入但已经被读取的空间,它就可以继续写入,写完后 Writer 立刻提醒 Reader 多了一个新写入的字符;每当 Reader 发现还有尚未读取但已经被写入的空间,它就可以继续读取,读完后 Reader 立刻提醒 Writer 多了一个可写入的字符空间。

再看看一下几种设定:

Semaphore emptyBuffers(4);
Semaphore fullBuffers(0);

该设定并不会影响代码的正确性,只是 Writer 和 Reader 的读写窗口从 8 减少到了 4,没有完全利用大小为 8 的 buffer 空间。同理,我们也可以将窗口减少到 1,这样会发生 Writer 和 Reader 交替工作的情况。窗口为 8 使得读写吞吐量 (throughput) 达到最大。

但如果把窗口减少到 0,则Reader 和 Writer 都在等待对方而产生死锁。

Semaphore emptyBuffers(7);
Semaphore fullBuffers(1);

如果是以上这种设定,则可能出现 Reader 读取到 Writer 还没有写入的 buffer 区域。

Semaphore emptyBuffers(16);
Semaphore fullBuffers(0);

如果是以上这种设定,则可能出现 Writer 将自己之前写入的尚未被 Reader 读取的 buffer 区域。

Dining Philosophers Problem

如上图所示,有五个哲学家在一个餐桌上吃饭,他们必须同时拿到左右两个叉子才能开始吃饭,模拟代码如下:

Semaphore forks[] = {1, 1, 1, 1, 1};

void Philosopher(int id) {
    for (int i = 0; i < 3; i++) {
        Think();
        SemaphoreWait(forks[id]);
        SemaphoreWait(forks[id+1]);
        Eat();
        SemaphoreSignal(forks[id]);
        SemaphoreSignal(forks[id+1]);
    }
    Think();
}

但这种方式可能出现死锁,循环依赖 1 -> 2 -> 3 -> 4 -> 5 -> 1,如此一来,哲学家们将永远无法吃饭。解决这个问题有很多方式,其中最粗鲁的一种就是将哲学家取左右叉的代码都放到 critical region 中;另外一种比较轻巧的方法是只允许四个哲学家开始拿叉子:

Semaphore forks[] = {1, 1, 1, 1, 1};
Semaphore numAllowedToEat(4);

void Philosopher(int id) {
    for (int i = 0; i < 3; i++) {
        Think();
        SemaphoreWait(numAllowedToEat);
        SemaphoreWait(forks[id]);
        SemaphoreWait(forks[id+1]);
        Eat();
        SemaphoreSignal(forks[id]);
        SemaphoreSignal(forks[id+1]);
        SemaphoreSignal(numAllowedToEat);
    }
    Think();
}

参考

Previous从顺序到并发和并行Next信号量与多线程 2

Last updated 6 years ago

Stanford-CS107-lecture-16