🚨 @ESGI : Quand perdre un proche devient une sanction académique.
J’ai perdu ma grand-mère, et son enterrement avait lieu un jour de cours. Absence justifiée, évidemment. Résultat : 2 zéros à des contrôles ce jour-là.
‼️GIVEAWAY TIME‼️
We've partnered with the amazing teams at Makeship and The Aether Project to give you the chance to win 1 of 5 Moa plushies!
To enter:
-Follow @CurseForge , @Makeship and @DevAether
-Retweet this post
And that's it! Giveaway ends on April 6th🧡
🐴 CONCOURS 🐴
Woodie Boursemol and Asus ROG sont très heureux de vous give away un amazing laptop ROG Strix Scar 18 2025 !
Pour tenter de win :
- Repost ce post
- Follow @ASUS_ROG_FR & moi-même
- Dis-nous le jeu que tu vas try hard avec le hashtag #MerciAsusROG
TAS : 4/04
Bonjour @Micromania_Fr
Vous avez mis en ligne un produit sous embargo dont vous seule avez les conditions et la responsabilité vis-a-vis de cet embargo.
Le produit a été publié aux yeux de tous, puis relayé par des partenaires qui n’ont même pas idée de l’embargo dont VOUS êtes responsable.
Les punir en leur supprimant le partenariat qui vous apporte en plus des ventes, c’est vraiment idiot 🤷♂️
Vous avez fait une erreur, prenez vos responsabilités, ça sert à rien de s’en prendre à des boites qui dépendent de vous.
Stable Cascade is now available in research preview for non-commercial use. This innovative text to image model introduces a three-stage approach, featuring enhancements for fine-tuning and training efficiency with a focus on further eliminating hardware barriers.
Learn more here: https://t.co/aBLGzhkdNR
If this is true it is over: Unlimited context length is here.
Activation Beacon,
New method for extending LLMs context.
TL;DR: Add "global state" tokens before the prompt and predict auto-regressively (sliding window). Train to always condense to and read from the new tokens.
This way you get:
1. Fixed memory consumption.
2. Inference time grow linearly.
3. Train to use this with short windows: but then it works on long window generations.
3. The perplexity remain constant
[This is the amazing part!]
Results:
The authors trained LLaMA 2 for 10K-steps / 4K ctx_len
Then it generalized to 400K (!!!) ctx_len.
You should be able train any model you want to do this, the code provided is very very simple and clean.
If this will be reproducible for all models than ctx_len just got close to be considered "solved".
---
- Paper: https://t.co/tHLo7EzjSt
- Code: https://t.co/ZQOxZ3u0Sz
---
Le programme spécial de la 4.2 va commencer !
Twitch : 03/11/2023 à 13h10, heure de Paris >>
https://t.co/FoSzu0dURX
YouTube : 03/11/2023 à 14h10, heure de Paris >>
https://t.co/8ubRtVrmxJ
Cliquez sur l'image pour les détails de la loterie.
#GenshinImpact#GenshinSpecialProgram