A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | ||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | Week | Date | Topic | Paper 1 | Paper 2 | P1 advocate | P1 critic | P2 advocate | P2 critic | OPTIONAL | |||||||||||||||||
2 | 1 | 8/22 | class introduction and overview | ||||||||||||||||||||||||
3 | 1 | 8/24 | class topic overview: Tour de SysML 2021 | MLSys | |||||||||||||||||||||||
4 | 1 | 8/26 | registration deadline | ||||||||||||||||||||||||
5 | 2 | 8/29 | Big ideas from ML and Systems | Berkeley View of Systems Challenges for AI | CACM12 | ||||||||||||||||||||||
6 | 2 | 8/31 | ML Lifecycle | TFX, KDD17 | Hidden technical debt in ML | ||||||||||||||||||||||
7 | 3 | 9/5 | LABOR DAY (no class) | ||||||||||||||||||||||||
8 | 3 | 9/7 | ML Systems | Theano | AutoDiff in ML | ||||||||||||||||||||||
9 | 4 | 9/12 | Declarative ML Frameworks and AutoDiff | Tensorflow | |||||||||||||||||||||||
10 | 4 | 9/14 | Imperative ML Frameworks & Project Ideas | Pytorch | Tensorflow Eager | ||||||||||||||||||||||
11 | 5 | 9/19 | General ML Frameworks (Ray) | Alpa | Ray | ||||||||||||||||||||||
12 | 5 | 9/21 | Prediction Serving: Single Model | Clockwork | Clipper | ||||||||||||||||||||||
13 | 6 | 9/26 | Prediction Serving: Model composition | Inferline | |||||||||||||||||||||||
14 | 6 | 9/28 | Prediction Serving: Model Zoo | INFaaS | |||||||||||||||||||||||
15 | 7 | 10/3 | Hyperparameter Optimization | Optuna | Rubberband | HyperSched | |||||||||||||||||||||
16 | 7 | 10/5 | HyperOpt continued + NAS Overview | HW-NAS Survey | darts-iclr19 | NAS Survey | MNasNet-cvpr19 | mobilenetv3-iccv19 | proxylessnas-iclr19 | ||||||||||||||||||
17 | 8 | 10/10 | Neural Architecture Search: Latency-awareness | OFA-iclr20 | bignas-eccv20 | EfficientNet | |||||||||||||||||||||
18 | 8 | 10/12 | guest lecture: Mixed Precision DNN | PWLQ-eccv20 | MixedPrecDNN-mlsys21 | ||||||||||||||||||||||
19 | 9 | 10/17 | FALL BREAK (no class) | ||||||||||||||||||||||||
20 | 9 | 10/19 | Resource Management for ML | CoDDL | Gavel-OSDI2020 | TetriSched | |||||||||||||||||||||
21 | 10 | 10/24 | Resource Management for ML | ESCHER-socc22 | Synergy-OSDI22 | ||||||||||||||||||||||
22 | 10 | 10/26 | mid-point project presentations | ||||||||||||||||||||||||
23 | 11 | 10/31 | mid-point project presentations | ||||||||||||||||||||||||
24 | 11 | 11/2 | mid-point project presentations | ||||||||||||||||||||||||
25 | 12 | 11/7 | guest lecture | FlexFlow@MLSys19 | BlueConnect | ||||||||||||||||||||||
26 | 12 | 11/9 | guest lecture | EFLOPS@HPCA20 | ISCA20 | ||||||||||||||||||||||
27 | 13 | 11/14 | Serverless Frameworks for ML | Serverless Computing: One Step Forward, Two Steps Back | FaasML | ||||||||||||||||||||||
28 | 13 | 11/16 | Federated Learning | FL@Google | FL@Scale@Google | ||||||||||||||||||||||
29 | 14 | 11/21 | AI for healthcare: SysML opportunities | HOLMES-kdd20 | UnfoldML-neurips22 | DL4EHR Survey | DL4ECG | ||||||||||||||||||||
30 | 14 | 11/23 | STUDENT RECESS (no class) | ||||||||||||||||||||||||
31 | 15 | 11/28 | final project presentations | ||||||||||||||||||||||||
32 | 15 | 11/30 | final project presentations | ||||||||||||||||||||||||
33 | 16 | 12/5 | final project presentations | ||||||||||||||||||||||||
34 | |||||||||||||||||||||||||||
35 | |||||||||||||||||||||||||||
36 | 10/29 | withdrawal deadline | |||||||||||||||||||||||||
37 | 12/9 | final project video/demo due by 2359ET | |||||||||||||||||||||||||
38 | 12/10 | final project report due by 2359ET | |||||||||||||||||||||||||
39 | |||||||||||||||||||||||||||
40 | |||||||||||||||||||||||||||
41 | NOTES | final instructional days: Dec 5-6 | |||||||||||||||||||||||||
42 | final exam slot: (N/A) | ||||||||||||||||||||||||||
43 | |||||||||||||||||||||||||||
44 | |||||||||||||||||||||||||||
45 | Bonus Topics | ML Compilers | TVM | ||||||||||||||||||||||||
46 | ML Frameworks | Mxnet | |||||||||||||||||||||||||
47 | Model Compression | Squeezenet | Rethink net pruning | shufflenet | |||||||||||||||||||||||
48 | Reinforcement Learning (Brief Intro) + Concluding Remarks | Distrib RL ICLR18 | |||||||||||||||||||||||||
49 | |||||||||||||||||||||||||||
50 | |||||||||||||||||||||||||||
51 | |||||||||||||||||||||||||||
52 | |||||||||||||||||||||||||||
53 | |||||||||||||||||||||||||||
54 | |||||||||||||||||||||||||||
55 | |||||||||||||||||||||||||||
56 | |||||||||||||||||||||||||||
57 | |||||||||||||||||||||||||||
58 | |||||||||||||||||||||||||||
59 | |||||||||||||||||||||||||||
60 | |||||||||||||||||||||||||||
61 | |||||||||||||||||||||||||||
62 | |||||||||||||||||||||||||||
63 | |||||||||||||||||||||||||||
64 | |||||||||||||||||||||||||||
65 | |||||||||||||||||||||||||||
66 | |||||||||||||||||||||||||||
67 | |||||||||||||||||||||||||||
68 | |||||||||||||||||||||||||||
69 | |||||||||||||||||||||||||||
70 | |||||||||||||||||||||||||||
71 | |||||||||||||||||||||||||||
72 | |||||||||||||||||||||||||||
73 | |||||||||||||||||||||||||||
74 | |||||||||||||||||||||||||||
75 | |||||||||||||||||||||||||||
76 | |||||||||||||||||||||||||||
77 | |||||||||||||||||||||||||||
78 | |||||||||||||||||||||||||||
79 | |||||||||||||||||||||||||||
80 | |||||||||||||||||||||||||||
81 | |||||||||||||||||||||||||||
82 | |||||||||||||||||||||||||||
83 | |||||||||||||||||||||||||||
84 | |||||||||||||||||||||||||||
85 | |||||||||||||||||||||||||||
86 | |||||||||||||||||||||||||||
87 | |||||||||||||||||||||||||||
88 | |||||||||||||||||||||||||||
89 | |||||||||||||||||||||||||||
90 | |||||||||||||||||||||||||||
91 | |||||||||||||||||||||||||||
92 | |||||||||||||||||||||||||||
93 | |||||||||||||||||||||||||||
94 | |||||||||||||||||||||||||||
95 | |||||||||||||||||||||||||||
96 | |||||||||||||||||||||||||||
97 | |||||||||||||||||||||||||||
98 | |||||||||||||||||||||||||||
99 | |||||||||||||||||||||||||||
100 |