TopChinese

[TopChinese @itopchinese]

都有这个阶段 想了半天就yes吧

[LIN WEI @skywind3000]

我今天主要的工作除了在 claude code 里点 “yes”，就是端着茶靠在椅子上等待，想了想，这活别人好像也能做。

[TopChinese @itopchinese]

pixel 10支持 airdrop 可以直接分享文件给iphone 正好手头有一台pixel 10
1. 用的是awdl ，不是wifi aware 。抓到了空口包确认
2. 系统测需要有mosey server进程配套 google quick share extension

[TopChinese @itopchinese]

@skywind3000 sendmmsg能和tcp比么

[Kiki @WaFFsdzAiNop]

春天到了。教你识花。

[TopChinese @itopchinese]

发布会有三种，一种是看人的，比如说老罗，雷军，一种是看产品的，比如nVidia，还有就是都看的，比如乔布斯

[TopChinese @itopchinese]

https://t.co/aPGFhpiKNA

[40+斜杠青年 @xgqn525]

一边上中专学服装设计，一边自学两年偏微分方程，拿下数学竞赛全球第12名。这是���正的天才啊👍👍👍

[TopChinese @itopchinese]

为什么我觉得Taylor swift的歌不咋好听

[TopChinese @itopchinese]

每次发布会后都改变了世界，可是世界还是老样子

[kevinzhow @kevinzhow]

ChatGPT 的春季发布会太牛逼了，用 25 分钟改变世界

[Mengxin Liu @liumengxinfly]

StackOverflow上看到了一个关于UDP和TCP谁更快的讨论，根据我们的性能测试其实挺反教科书的，TCP这么多年来硬件和操作系统都做了大量优化，再加上TCP自己的拥塞控制能感知带宽不像UDP无脑发包，在很多看吞吐的场景TCP是要显著好于UDP的，几倍几倍的好
https://t.co/RMlrLwv1Qx

[TopChinese @itopchinese]

@Gracker_Gao 什么原理这是

[LIN WEI @skywind3000]

@imwsl90 刚好回答过，最简实现：https://t.co/2KTce8S9N8

[TopChinese @itopchinese]

Pascal 语言之父Niklaus Wirth 于2024.01.01辞世
https://t.co/23E0Q3G1T9

[TopChinese @itopchinese]

可以奉为经典的 10 期商业播客，得收藏起来。
https://t.co/xlkYH5mDOQ

[宝玉 @dotey]

OpenAI 的大神 Andrej Karpathy 前几天在他的 YouTube 频道讲了一堂课，系统的介绍了大语言模型，内容深入浅出，非常赞，抽空将它翻译成了双语，由于内容较长，我将分��上传，以下是第一部分精校后的双语视频，字幕文稿如下：

Intro: Large Language Model (LLM) talk

大家��。最近，我进行了一场关于大语言模型的 30 分钟入门讲座。遗憾的是，这次讲座没有被录制下来，但许多人在讲座后找到我，他们告诉我非常喜欢那次讲座。因此，我决定重新录制并上传到 YouTube，那么，让我们开始吧，为大家带来“忙碌人士的大语言模型入门”系列，主讲人 Scott。好的，那我们开始吧。

LLM Inference

首先，什么是大语言模型 (Large Language Model) 呢？其实，一个大语言模型就是由两个文件组成的。在这个假设的目录中会有两个文件。

以 Llama 2 70B 模型为例，这是一个由 Meta AI 发布的大语言模型。这是 Llama 系列语言模型的第二代，也是该系列中参数最多的模型，达到了 700 亿。LAMA2 系列包括了多个不同规模的模型，70 亿，130 亿，340 亿，700 亿是最大的一个。

现在很多人喜欢这个模型，因为它可能是目前公开权重最强大的模型。Meta 发布了这款模型的权重、架构和相关论文，所以任何人都可以很轻松地使用这个模型。这与其他一些你可能熟悉的语言模型不同，例如，如果你正在使用 ChatGPT 或类似的东西，其架构并未公开，是 OpenAI 的产权，你只能通过网页界面使用，但你实际上没有访问那个模型的权限。

在这种情况下，Llama 2 70B 模型实际上就是你电脑上的两个文件：一个是存储参数的文件，另一个是运行这些参数的代码。这些参数是神经网络（即语言模型）的权重或参数。我们稍后会详细解释。因为这是一个拥有 700 亿参数的模型，每个参数占用两个字节，因此参数文件的大小为 140 GB，之所以是两个字节，是因为这是 float 16 类型的数据。

除了这些参数，还有一大堆神经网络的参数。你还需要一些能运行神经网络的代码，这些代码被包含在我们所说的运行文件中。这个运行文件可以是 C 语言或 Python，或任何其他编程语言编写的。它可以用任何语言编写，但 C 语言是一种非常简单的语言，只是举个例子。只需大约 500 行 C 语言代码，无需任何其他依赖，就能构建起神经网络架构，并且主要依靠一些参数来运行模型。所以只需要这两个文件。

你只需带上这两个文件和你的 MacBook，就拥有了一个完整的工具包。你不需要连接互联网或其他任何设备。你可以拿着这两个文件，编译你的 C 语言代码。你将得到一个可针对参数运行并与语言模型交互的二进制文件。

比如，你可以让它写一首关于 Scale AI 公司的诗，语言模型就会开始生成文本。在这种情况下，它会按照指示为你创作一首关于 Scale AI 的诗。之所以选用 Scale AI 作为例子，你会在整个演讲中看到，是因为我最初在 Scale AI 举办的活动上介绍过这��话题，所以演讲中会多次提到它，以便内容更具体。这就是我们如何运行模型的方式。只需要两个文件和一台 MacBook。

我在这里稍微有点作弊，因为这并不是在运行一个有 700 亿参数的模型，而是在运行一个有 70 亿参数的模型。一个有 700 亿参数的模型运行速度大约会慢 10 倍。但我想给你们展示一下文本生成的过程，让你们了解它是什么样子。所以运行模型并不需要很多东西。这是一个非常小的程序包，但是当我们需要获取那些参数时，计算的复杂性就真正显现出来了。

那么，这些参数从何而来，我们如何获得它们？因为无论 run.c 文件中的内容是什么，神经网络的架构和前向传播都是算法上明确且公开的。

[TopChinese @itopchinese]

@caolei1 这是wlan的5g。。不是基带的5g

[TopChinese @itopchinese]

@Gracker_Gao 还得是sf的主线程

[Thomas Yao  @ghosTM55]

经过 @kevinzhow 确认，我们的挚友左耳朵耗子 @haoel 已于周六晚突发心梗辞世

陈皓是个有原则、正直、风趣、聪明的人，他对 IT 行业作出了不可磨灭的贡献

他一生有很多成就，而我愿意最后以一起打游戏的好友记住他

R.I.P.

[TopChinese @itopchinese]

竟然还有人信微信群截图的事是真的？其他的都还可信，那么多人同进退，这能信么

[TopChinese @itopchinese]

现在差距有点大

[goldengrape @goldengrape]

https://t.co/eDNwILyaUO
测试了一下，还不错。
简单对话可以回答，可以写简单的python代码，
有33%概���能够将“The pupils in his eyes are unequal in size.”中的pupil识别为瞳孔。
中英文混杂容易出错

[lvwzhen @lvwzhen]

这个太🐂了，用GPT-4控制浏览器
https://t.co/ELNVVeXrjR