⏱️Archives

2024  1

March  1

ML System

2024-03-05    0 words    0 min    Jun    Blog

2023  6

December  1

Coder Training

2023-12-18    129 words    1 min    Jun    LLM  ML

October  3

Model Evaluation

2023-10-18    76 words    1 min    Jun    ML

MoE Models

2023-10-18    396 words    1 min    Jun    ML

Retrieval Augmented Generation

2023-10-18    1561 words    4 min    Jun    ML

June  2

Flash Attention

2023-06-18    579 words    2 min    Jun    LLM  ML

InstructGPT and ChatGPT

2023-06-18    574 words    2 min    Jun    LLM  ML

2022  13

December  2

Large Scale Pretraining

2022-12-18    2188 words    5 min    Jun    LLM  ML

Kubernetes

2022-12-08    516 words    2 min    Jun   

August  1

ANTLR Parser Generator

2022-08-08    428 words    1 min    Jun    Parsing

July  1

Parallelism in LLM Training

2022-07-08    1035 words    3 min    Jun   

June  1

Diffusion Probabilistic Models

2022-06-18    272 words    1 min    Jun    ML

May  6

Blog

2022-05-05    0 words    0 min    Jun    Blog

Distributed Training Infra

2022-05-05    532 words    2 min    Jun    Blog

Life

2022-05-05    0 words    0 min    Jun    Life

Quotes

2022-05-05    1309 words    3 min    Jun    Read

Read

2022-05-05    0 words    0 min    Jun    Read

Tech & Talents

2022-05-05    330 words    1 min    Jun    Tech

February  1

LLM Playground

2022-02-08    202 words    1 min    Jun   

January  1

SSH Connection

2022-01-11    165 words    1 min    Jun    Blog

2021  6

November  1

Redis scan命令学习

2021-11-30    770 words    2 min    Jun    Redis  Tech

June  4

Add Math Equation in Blog

2021-06-18    103 words    1 min    Jun    Web

Docker Commands

2021-06-18    313 words    1 min    Jun    Docker

EM Algorithm

2021-06-18    78 words    1 min    Jun    ML

Transformer

2021-06-18    347 words    1 min    Jun    LLM  ML

January  1

Pytorch Multiple-GPU Training

2021-01-11    541 words    2 min    Jun    Blog

2020  3

July  1

RL Basics

2020-07-18    236 words    1 min    Jun    ML

February  1

Remote Development with VSCode

2020-02-08    765 words    2 min    Jun   

January  1

Makefile

2020-01-11    103 words    1 min    Jun    Blog

2019  1

June  1

Loss in ML

2019-06-18    914 words    2 min    Jun    ML

2018  2

February  2

Git

2018-02-11    665 words    2 min    Jun    Blog

Shell Commands

2018-02-11    2684 words    6 min    Jun    Blog

2016  1

May  1

Basics of Web

2016-05-05    191 words    1 min    Jun    Web

2015  1

April  1

Python

2015-04-09    656 words    2 min    Jun