这的确是新的上等的OCR,但是部署有一定的难度,并且在WIN和Ubuntu不一样,所以请看情况尝试。 需求 GPU,最好是支持BF16的A系列,当然不支持也没事,到时候改一下代码就行。没有GPU就算了,GPU显存小于8G也算了。 良好的外网,折腾的时候网不好也不行。 GPT或者其他AI,万一有问题,…
前言 其实很多时候不是语言学家在AI领域不起作用,而是训练AI的过程是和机器对话的过程。我们需要服从机器才能让它好好的输出我们想要的文字。这个时候并不是人类手动规划的语法起作用,而是机器自身的那一整套逻辑在起作用。这篇文章的目的就是讲清楚整个逻辑体系。 本文基本上按照下面这张图进行叙述,也会穿插的讲…
前言 在上一篇文章,我们已经掌握制造cpu的技术,能够开展计算工作。但是很明显,只有能计算的东西才能放到机器里面去计算。所以我们要先把万物转换为数字,然后再丢到机器中去。所以,本篇是LLM部分的第一篇,也是第一步,语言数字化。同时,本文会提及编解码的内容,那个是下一篇的重点。 (对了,本文是和GPT…
前言 书接上回,我们继续介绍六种门电路。分别是1. 移位寄存器;2. 计数器;3. 解码器与编码器;4. 减法器;5. 多位加法器;6. 乘法器。这部分作为第一篇的扩展,感兴趣的读者可以往后看,如果觉得枯燥可以直接跳到第四篇看LLM。我也默认读者有前文的基础,可以进一步理解这些逻辑运算。后续我应该会…
前言 这部分内容主要是作为理解LLM1运行规律的铺垫,这种穿透了自然语言和机器语言的机器需要一系列的前置知识才能完全理解。 基础知识 这些作为基础的知识铺垫,希望大家能够掌握并且可以带着这些内容进一步阅读下去。如果不能掌握也请带着问题继续阅读。我不一定完全结合LLM进行解释,毕竟现在所有东西都才刚刚…
前言 从人类开始认识数字的那一刻起,计算就成为了一个核心的问题。最初,人们通过数数和用手指头计算来解决简单的数学问题。随着时间的推移,人类发明了算筹和算盘,不断改进他们的计算方法。这一切的目的都是为了解决一个问题:如何准确快速地计算出数学公式的结果。随着数学的不断发展,算式变得越来越复杂,从简单的加…
0.0 题记 这个世界从不缺语言和计算,把他们好好的合在一起,就可以变成LLM。 0.1 序 这是一系列的文章,或许很多类似的知识都会出现在各种自媒体和书籍中,但是我想从语言学的视角来谈谈这些问题。同时使用最简单的语言展开我的叙述。所以请不要说书面语体的事情。这些都是基础知识,我会从最初的计算机一步…
原因懂得都懂,被win弄得烦死了。直接一次性给出把,懒得写那么多了。 查看版本 cat /proc/version Linux version 5.15.118 (runner@fv-az360-832) (x86_64-openwrt-linux-musl-gcc (OpenWrt GCC 12.…
2023-05-30 09:13:26 星期二 注意:本文所探讨内容可能具有较强的时效性,不保证随时更新,请仔细辨别。同时本文可能综合许多学术大佬的观点,若正式发表则加上对应参考文献。 1.思维悖论 &n…