This paper from Harvard and MIT quietly answers the most important AI question nobody benchmarks properly:
Can LLMs actually discover science, or are they just good at talking about it?
The paper is called “Evaluating Large Language Models in Scientific Discovery”, and instead of asking models trivia questions, it tests something much harder:
Can models form hypotheses, design experiments, interpret results, and update beliefs like real scientists?
Here’s what the authors did differently 👇
• They evaluate LLMs across the full discovery loop hypothesis → experiment → observation → revision
• Tasks span biology, chemistry, and physics, not toy puzzles
• Models must work with incomplete data, noisy results, and false leads
• Success is measured by scientific progress, not fluency or confidence
What they found is sobering.
LLMs are decent at suggesting hypotheses, but brittle at everything that follows.
✓ They overfit to surface patterns
✓ They struggle to abandon bad hypotheses even when evidence contradicts them
✓ They confuse correlation for causation
✓ They hallucinate explanations when experiments fail
✓ They optimize for plausibility, not truth
Most striking result:
`High benchmark scores do not correlate with scientific discovery ability.`
Some top models that dominate standard reasoning tests completely fail when forced to run iterative experiments and update theories.
Why this matters:
Real science is not one-shot reasoning.
It’s feedback, failure, revision, and restraint.
LLMs today:
• Talk like scientists
• Write like scientists
• But don’t think like scientists yet
The paper’s core takeaway:
Scientific intelligence is not language intelligence.
It requires memory, hypothesis tracking, causal reasoning, and the ability to say “I was wrong.”
Until models can reliably do that, claims about “AI scientists” are mostly premature.
This paper doesn’t hype AI. It defines the gap we still need to close.
And that’s exactly why it’s important.
Engineering T cells (CAR-T) has had marked benefits for cancer and autoimmune disease. But doing that inside the patient's body (in vivo) would make that far more practical and less expensive.
https://t.co/ilZEgTRNza
🗨️ Just published in @NatureBiotech: Our CellWhisperer AI enables chat-based analysis of single-cell sequencing data. You can talk to your cells & figure out the biology without writing any computer code. Paper link and annotated walkthrough in the thread below (1/11)
العالم السعودي 🇸🇦عمر ياغي الفائز بجائزة نوبل للكيمياء في أول كلمة له :
أشكر #ولي_العهد الأمير محمد بن سلمان على دعمه الدائم لمسيرتي العلمية وهذا ما حقق المنجز للمملكة، وفوزي فخر لي ولعلماء العرب كافة
Wishing the American people a happy and meaningful Independence Day. May this day be filled with joy and pride. We cherish the enduring partnership between our nations, built on mutual respect and friendship. 🇸🇦🇺🇸
الصورة الأولى: الجادة الخامسة في نيويورك عام ١٩٠٠ في يوم أحد الفصح، الشارع كله عربات خيول.
الصورة الثانية: نفس الشارع ونفس اليوم في ١٩١٣، الشارع كله سيارات.
خلال ١٣ عام تغيرت بالكامل وسيلة النقل العام بسبب التطور التكنولوجي. مع الذكاء الاصطناعي سيكون التغيير الجذري أقصر زمناً.
أدعوكم لقراءة بحثي الجديد المنشور في المجلة العريقة Molecular Therapy
الفيروسات الانكلوتية مجال خصب وواعد في العلاجات البيولوجية ، تجمع بين الاستهداف الدقيق وتنشيط المناعة، مع إمكانية تعديلها وراثيًا لتعزيز فعاليتها.
#التقنية_الحيوية
https://t.co/h6wOYqM0pR
أدعوكم لقراءة بحثي الجديد المنشور في المجلة العريقة Molecular Therapy
الفيروسات الانكلوتية مجال خصب وواعد في العلاجات البيولوجية ، تجمع بين الاستهداف الدقيق وتنشيط المناعة، مع إمكانية تعديلها وراثيًا لتعزيز فعاليتها.
#التقنية_الحيوية
https://t.co/h6wOYqM0pR
A new #review from the lab of Dr. Carl June (@carlhjune) at @PennMedicine highlights the key milestones in CAR-T cell evolution, from its invention to its clinical applications. #CARTCellTherapy
📄 @MolTherapy
🔗 https://t.co/3nIhgfsCWH
🏞️ 🇸🇦 تحتضن محمية الأمير محمد بن سلمان الملكية إحدى أبرز العجائب الطبيعية في المملكة – وادي الديسة 🌿💧 موقع حيوي ذو أهمية عالمية، يتطلب الحماية في مواجهة الضغوط البشرية والتغير المناخي، ليبقى ملاذًا نابضًا بالحياة للتنوع البيولوجي الفريد 🐆🦅🌍
بحث جديد من مجموعتنا الكندية تم فيه تطوير فيروسات بطرق مختلفة من أجل تحسين فعاليتها للقضاء على الأورام. بحث رصين وفيه الكثير من التجارب الإبداعية. والقادم أجمل. #التقنية_الحيوية https://t.co/9vuN91HSxL