ZizouForever

Errare humanum est, perseverare diabolicum

[ZizouForever @OneTwoFire]

@gaulix_refrac @anatolium Ces modèles sont des systèmes black-box, personne ne peut exactement savoir comment ils fonctionnent, et ça sera encore + vrai dans le futur. Les benchmarks sont des tests sur des aspects précis, et ensuite c’est de l’interpolation. Il y a des angles morts

[ZizouForever @OneTwoFire]

@gaulix_refrac @anatolium Hmm tu ferais confiance à une boite US opaque du type https://t.co/MEdPCLd9gY pour comprendre et modifier certains aspects d���un modèle chinois ? Donc la y’a 2 boîtes étrangères qui ont tripoté ton modèle avant utilisation

[ZizouForever @OneTwoFire]

@anatolium ça les benchmarks généralistes ne le détecteront pas

[ZizouForever @OneTwoFire]

@anatolium Qui dit que les modèles Qwen n’ont pas, parmi leurs milliards de paramètres, des backdoors qui pourraient être activées au moment voulu, ou même des légers biais qui changent ta perception du monde en leur faveur petit à petit

[ZizouForever @OneTwoFire]

@gchampeau Je suis d’accord. Meme dans ses interviews, il a une éloquence que peu d’hommes politiques possèdent. Impressionnant

[ZizouForever @OneTwoFire]

@powl_d T’utilises quoi comme apps? Y’en a que j’ai jamais vu

[ZizouForever @OneTwoFire]

@arcprize @AnthropicAI Ça pourrait être intéressant d’avoir une échelle logarithmique sur l’axe des ordonnées aussi non ?

[ZizouForever @OneTwoFire]

@arcprize @AnthropicAI You could create a benchmark with the few hard challenges from ARC-AGI-2 ? Seems like even the best models are stuck at 90% currently

[ZizouForever @OneTwoFire]

@gchampeau Tous les secrets et paramètres dans AWS Secret Manager

[ZizouForever @OneTwoFire]

@EtienneKlein @lemondefr Faut pas croire que Le Monde media généraliste utilise avec précision des termes statistiques.

[ZizouForever @OneTwoFire]

@EtienneKlein @lemondefr Les gens qui sont pas très techniques utilisent le mot communément accepté “moyenne” pour parler d’une médiane statistique.

[ZizouForever @OneTwoFire]

@GuillaumeRozier Sympa… mais je suis un peu tiraillé par le fait que chaque médaille est tellement unique… les additionner et garder le décompte global c’est un peu effacer les peines, les efforts et les joies derrière chacune d’elles

[ZizouForever @OneTwoFire]

@DokPepper On est d’accord

[ZizouForever @OneTwoFire]

@Cobra_FX_ Les bureaux de DeepMind sont à Londres

[ZizouForever @OneTwoFire]

@sha_double Il y’a 3 ans à Brest: chauffard, homicide involontaire à 7h du matin, drogué, délit de fuite —> 4 ans de prison ferme

[ZizouForever @OneTwoFire]

@elonmusk Life is entropy generation

[ZizouForever @OneTwoFire]

@fchollet All the rules are just imperfect models

[ZizouForever @OneTwoFire]

@fchollet That’s also what I think. Unfortunately ARC-2 problems are more and more complex, not sure whether that incentivises solutions to converge towards an elegant AGI solution.