Transformer 的原理和应用 Tranformer 原理及应用 Transformer由论文《Attention is All You Need》提出,这之后这句话也是一直贯穿深度学习的研究当中。简单来说,Transformer的作用就是将一个序列转换为另一个序列,例如说中英文翻译。 2024-05-05 学习笔记 #NLP #深度学习 #大模型
马尔科夫链与随机过程 随机过程 定义:随机过程(stochastic process)通常是指随着时间或者空间变化的一组随机变量。 2024-08-16 学习笔记 #机器学习 #随机过程 #概率论与数理统计
线性代数复习 本文是临近夏令营,简单地复习了一下线性代数方面相关的内容,果然重学了一遍才知道当初什么都没学懂!之后还会更新一些进阶的内容,希望我还能想起这回事来。 2024-07-03 学习笔记 #基础知识 #线性代数
统计学习基础 统计学习基础 熵 熵的定义 什么是熵呢?熵是在1948年由克劳德·艾尔伍德·香农从热力学中引入到信息论中的概念。信息论中,熵可以理解为不确定性的度量。事件的概率分布和每个事件的信息量构成了一个随机变量,这个随机变量的均值(即期望)就是这个分布产生的信息量的平均值(即熵)。 2024-05-07 学习笔记 #NLP #基础知识
合作博弈论 合作博弈论 定义 合作博弈论(英语:cooperative game theory)是博弈论中的一种理论,又称正和博弈。是指一些参与者以形成联盟、互相合作的方式所进行的博弈。这样一来博弈活动就变成了不同集团之间的对抗。 2024-11-23 学习笔记 #博弈论
Grafana Loki 介绍和使用 Grafana Loki 介绍和使用 Grafana Grafana 是一个开源的可视化和监控工具,广泛用于分析和展示时间序列数据(如系统性能指标、应用程序日志和业务数据)。 2024-09-10 软件工具教程 #SQL #grafana #logQL
RAG概述 RAG概述——原理和实现 检索-增强生成(Retrieval-Augmented Generation,RAG)是大语言模型中的一种常用的手段,它通过纳入外部知识来增强llm的性能,可以有效避免其出现幻觉并提高答案的准确度。 2024-09-06 学习笔记 #深度学习 #大模型 #rag
Prometheus介绍 Prometheus介绍 介绍 PrometheusPrometheus 是一个系统监控和警报系统。简单来说,就是一个存储时间序列数据的数据库,Prometheus 将所有metric data存储为时间序列,即将系统的度量信息与记录的时间戳一起存储。 2024-08-26 软件工具教程 #Prometheus #数据库 #MetricStore