Brandon Chen

Sociology PhD Student @hkbaptistu｜Family & Kinship, Gender, Culture, Contemporary China｜female abandonment, adoption, one-child policy in China

[Xudong Han @Xudong07452910]

现在很多人聊 Research Agent，默认期待是：

读论文、找 gap、想 idea、做实验、写 paper。

但耶鲁大学的这篇论文问了一个更深入的问题：

LLM 生成的研究想法，和人类研究者真正做出来的 paper idea，差距到底在哪里？

论文的核心概念叫 research taste，可以理解成「研究品味」：你通常会发现什么样的问题，用什么方式把它变成一个 contribution。

它的实验设计挺巧。

作者从真实论文里抽取 human idea，再反推 4 到 8 篇最可能启发这个 idea 的 prior works。然后把这些 prior works 的标题和摘要给 LLM，让模型在同样的文献上下文里生成一个新的 research idea。

这样比较的重点，就从「单个 idea ��起来新不新」推进到「一批 idea 的分布像不像人类研究者」。

论文一共用了 11,683 个 human ideas，覆盖 ML 会议论文和 Nature Communications 里的自然科学论文；模型包括 Claude、Gemini、GPT、Qwen、DeepSeek 等 9 个设置。

结果很有意思：人类 idea 的分布明显更宽。

在人类论文里，只有 12.1% 的 idea 属于 bridge opportunity，也就是把不同文献、方法或证据流连接起来。

但在 LLM 生成的 idea 里，这个比例变成了 47.1% 到 64.2%。

方法层面也类似。

人类论文里，synthesis / unification 只占 5.1%；LLM 这里是 22.5% 到 38.7%。

简单说，模型很喜欢把研究问题理解成：

这里有两个东西，可以把它们整合一下。

论文还发现，给模型更多上下文也没有明显解决这个问题。full-paper context 版本没有让分布更接近人类；开启 thinking mode 甚至可能让模型更强化这种 bridge-and-synthesis 倾向。

这篇最有意思的地方在于，它没有简单说 LLM idea 好或不好，而是指出了一个更隐蔽的问题：

LLM 可以生成很多看起来合理的研究想法，但这些想法的类型可能高度集中。

这对 AI for Science 和 Research Agent 很关键。

对于真正强的 Research Agent，难点在于能不能形成更宽的 problem-finding 能力：发现 failure、识别机制、提出测量工具、构造系统、修改局部假设，而不总是回到「整合两个已有东西」这条安全路径。

自动科研如果缺少这种多样性，最后可能会变成一种很流畅的同质化机器。

📎 arxiv: https://t.co/GrrulIuJrF

[James Millward 米華健 @JimMillward]

Click through for English and Chinese article version of Lin Shiyu’s important and gripping book account of Chinese migrants who “walked the line” to come to US in recent years. Why they left, what they are looking for, the rough lives they lead.

[Jean Christopher (Chris) Mittelstaedt @jcmittelstaedt]

"platformization in China’s transnational journalism entails a unique sociotechnical logic that cuts across personal agency, organizational regulation, and international power dynamics."

[Brandon Chen @BrandonChen134]

@OldYouthZ 啊哈哈哈，特别喜欢听他讲话读诗（

[李老师不是你老师 @whyyoutouzhele]

有博主表示，之所以远洋捕捞海棠作者，主要还是因为好抓易抓，罚款方便。
作者们都是“良民”，被抓都会迅速认罪认罚，家庭成员也大多非常老实，不会给公检法找麻烦。
所以从创收和KPI角度来说都是理想对象，相比之下，真正的海外黑产抓捕和破案难度大，因此一般不会管。

[李老师不是你老师 @whyyoutouzhele]

南风窗：2010年，时年17岁的蒋苏南因抢劫被判三年，出狱后他靠跑外卖为生，但2018年左右多数工作要求无犯罪证明，导致他失业，为了活下去，蒋苏南开始做日结工，最近他新找的谋生手段是“试药” 每三月试一次，一次收入四五千元，在此之前，他还卖过血，也因饿到受不了去偷东西被拘13天。他表示有案底的人也想有条活路....

[Lawrence Zhang 張樂翔 @HistorianZhang]

In a few weeks my school will host Prof. Matthew Sommer from Stanford for a talk on Qing government. All welcome, no registration required!

[Brandon Chen @BrandonChen134]

@earthcurated 林尽水源，便得一山，山有小口，��佛若有光。便舍船，从口入。初极狭，才通人。复行数十步，豁然��朗。

[Fei Yan @fredyan]

Project MUSE - The Making of a Sociology with Distinctive Chinese Characteristics https://t.co/JLrlVgLu0T

[Lawrence Zhang 張樂翔 @HistorianZhang]

Alarming. Somehow doesn't surprise me

[Jonathon P Sine @JonathonPSine]

Original excerpt is from this publication, for those interested. https://t.co/ZLgiWgz1c8

[Cambridge University @Cambridge_Uni]

Dr Louks, we support you.

Last week, Cambridge PhD student @DrAllyLouks published this photo on X to celebrate passing her viva with no corrections. Her tweet went viral, attracting over 100 million views 🧵

[Dr Ally Louks @DrAllyLouks]

To be clear, this is where I draw the line. This is abhorrent and illegal and no one should ever have to deal with this.

[日下部元美 Motomi KUSAKABE @MoKusakabe]

軍隊をいれないように国会前で立っていた市民

[Brandon Chen @BrandonChen134]

@boiledwater @yanning_chen

[CUHK Anthropology @AnthroCuhk]

Anthropology Friday Seminar on "'Waiting with uncertainty': progressivism, hope and precarity" by our PhD candidate Yingjun Chen--29 Nov 1pm at CUHK, all interested are welcome!

[Jean Christopher (Chris) Mittelstaedt @jcmittelstaedt]

Corruption map of China, with darker colours representing higher levels of corruption, as measured "by the ratio of officials under investigation by local procuratorates per ten thousand officials"

from "Political corruption and cost stickiness: Evidence from China"

[Brandon Chen @BrandonChen134]

@OldYouthZ 这选举让我想起了台湾的2004大选。。

[Brandon Chen @BrandonChen134]

@rmnzgnzlz @routledgebooks @yanning_chen