Burak Tunca

Academic

[Burak Tunca @burak_tunca]

Zaman icinde yazdigim tum arastirma yontemleri threadlerini toparladim:

[Burak Tunca @burak_tunca]

“equivalent learning (p=.044, n = 140).”

[Curtis G. Northcutt @cgnorthcutt]

Today we establish that AI is as good as expert human tutors for immediate GRE learning gains (p=.015, n=2,383 students, study conducted July-Sep 2026).

One hour with an expert GRE tutor: $75.
One equivalent hour with an AI tutor: 7 cents .
918x cheaper, equivalent learning (p=.044, n = 140).

In 5 of 7 academic topics, the top AI tutor beat the expert human tutors on average.

How we measured it: pre-test -> 1 hour with (AI or human or no) tutor -> post-test.
There are no LLM judges. Learning gains are post-pre. Everything is real students.

Why we did this:
> 1 trillion USD is being spent per year on machines making machines better. StudentBench shows us how to shift these resources so machines also make humans better.

Why I did this:
I grew up in rural Kentucky. My dad, grandad, and great grandad were all mailmen. Getting into a good college changed my life. Now we have done a rigorous study to help AI labs evaluate LLMs and help show how bright AI can be for students of all incomes.

I believe in good science that leads to the democratization of opportunity.

The research paper behind StudentBench: https://t.co/JfkDDllP4i
Data, code, details: in this thread

If you're wondering what I'm selling, sorry to disappoint: we released all study data for free on Hugging Face, and made https://t.co/5G9L8yAxrt free to use. Enjoy.

lots more in the video / thread!!

[Burak Tunca @burak_tunca]

@synvanda "Tanimiyorum ama mutlaka bigun kufrederek dertleşmem gerek" dediğim insanlar listesine direk en üst sıradan girdiniz inanılmaz

[Burak Tunca @burak_tunca]

@synvanda Gosterseler de bakmanin bi mantigi kalmadi ya su saatten sonra maasa bi %30 koymadıkları surece bana giren mortgage zamlarını market fiyatlarını çıkaramam bitti balık yan gider diyor ve 25 Eylül maas gününüzü tebrik ediyorum.

[Burak Tunca @burak_tunca]

@synvanda Kivra'dan degil direk postayla geldiyse gercekten memnun kaldiklarini gösteriyor diyorlar

[Burak Tunca @burak_tunca]

Jürisinde olacağım bir dr tezini okuyorum. Yazının karmaşıklığı tezi anlamayı neredeyse imkansızlaştırıyor. Yazarken hatırlayın: akademisyen olarak amacınız okuyucunun sizin zeki olduğunuzu hissetmesi değil, sizi okuduğunda kendinin zeki olduğunu hissetmesi olmalı.

[Burak Tunca @burak_tunca]

@realmehmetokan Hocam bir ara pazarlamada Open Science diye nasıl gençliğimizin en güzel yıllarını boşa harcadık konulu bir podcast yapalım 😅

[Burak Tunca @burak_tunca]

@zehrataskin Hocam şimdi bunların şöyle bir versiyonu çıktı eğer doktor öğrencisi yayınında sahte yapay zeka referansları varsa danışman yazar olsa bile sorumlu tutulmamalı diyorlar 😆

[Burak Tunca @burak_tunca]

@TrDolma Referanslar/literatur teori degildir (Sutton & Staw, 1995) 🙃

[Burak Tunca @burak_tunca]

Çok iyi soru. Ben olsam ilk olarak teorinin ne "olmadigini" anlayarak başlardım. (Makale ayni zamanda "kutular ve aralarındaki oklar teori degildir" diyerek YEM'e de selam çakıyor).
https://t.co/ybof0bg1zo

[yapcak bişi yok @bjornhelvac]

@burak_tunca Nerden cilalayalım Hocam? Ne okuyalım?

[Burak Tunca @burak_tunca]

Hocamin izniyle eklemek isterim: bu dersten önce teori bilginizi cilalayin. YEM metodu teori bazlıdır, modeller (en bastan) teoriyle kurulur. Allah ne verdiyse ekleyeyim ankete sonra iyi fit çıkana kadar denerim fit-hackingdir. Unutmayın en iyi YEMciler teoriye hakim olanlardır.

[Serkan Dolma-TR @TrDolma]

1⃣Her dönem başında benzerini yaptığımız davetimizi yine yapalım. Yayarsanız çok memnun olurum.
Bu dönem doktora programında Yapısal Eşitlik Modellemesine Giriş dersimiz var.
—Konuyla ilgilenen Pamukkale Üniversitesi mensupları ve öğrencileri misafir olarak derslere katılabilir.

[Burak Tunca @burak_tunca]

@zehrataskin Hocam ayni ironik telden devam ediyormussunuz ne guzel ozlemisim🙃

[Burak Tunca @burak_tunca]

Ardindan zorluyorum bunun kaynağı ne diye ve kendisi de bu yeni sayfa numaralarını ana kaynaktan degil ikincil bir kaynaktan çektiğini, ana kaynağa bakınca benim sayfalarımın doğru oldugunu kabul ediyor. Asla körukörune güvenmeyin (2/2)

[Burak Tunca @burak_tunca]

Arkadaşlar kaynakça hazırlarken neden yapay zeka kullanmamalisiniz bir örnek:

Elle hazirlanmis,doğruluğundan emin oldugum yeni makalenin kaynakcasini Fable 5'e koyuyorum (ki en iyi modellerden biri) ve bir yanlislik var mi diye soruyorum. Yeni sayfa numarası uyduruyor bana (1/2)

[Burak Tunca @burak_tunca]

Beni hatırlayan varsa tekrar başlıyorum.

[Burak Tunca @burak_tunca]

There are those suffering from imposter syndrome, and there are those who call themselves “educator” in a topic they’ve never read a book about

[Burak Tunca @burak_tunca]

A replication counts only when the original authors replicate. How can we rely on other incompetent independent replicators?

[Aaron Charlton @AaronCharlton]

What does this retraction notice mean? Is the article reliable or not? Also if we're talking about how the anomalist got the study to replicate why not mention that an independent third party failed to replicate it? https://t.co/FCNTHWMG0f

[Burak Tunca @burak_tunca]

@AlexAndBooks_ READ

[Paolo Crosetto @PaoloCrosetto]

Academic publishing is in deep trouble.

We all know it: paper mills, thousands of Special Issues, retractions, skyrocketing APCs...

What is going on?

@danbrockington , @HansonM90 , @pagomba & me we have a preprint just out, with tons of data.

A 🧵

https://t.co/4mitceMZAh