Radjaïdjah Blog

Le Radjaïdjah Blog vous souhaite une excellente année \( \sum_{i=1}^{9} { i}^{3} \) aka \( \big(\sum_{i=1}^{9} {i} \big)^{2} \).

Mazal Tov pour la Bar Mitzvah.

Un modèle de langage (LM) est un modèle mathématique permettant à une machine d'analyser statistiquement les composants d'un texte. Un modèle de langage vise fondamentalement à prédire le le symbole (lettre, syllabe, mot...) suivant une séquence, ce qui s'étend à la génération de texte humain. Il existe plusieurs types de modèles de langage qui fonctionnent sur différents principes, tels que les modèles n-grams, les réseaux de neurones récurrents (RNN) et plus récemment, les grands modèles de langage (LLM)^[1].

Une bonne introduction pratique est Brilliant: how LLMs work (nécessite un compte).

Alors qu'il est populaire d'interagir avec des LLM come ChatGPT via une interface web qui se connecte sur les serveurs d'OpenAI, ou par des API distantes, des alternatives existent.

Entre autres, l'approche de faire tourner un modèle en local (sur son ordinateur ou sur un VPS par exemple) présente certains avantages.

1. Fonctionnement hors-ligne, aucune connexion à Internet n'est nécessaire.
2. Accès à divers modèles (Llama 2, Vicuna, Mistral, OpenOrca, etc) potentiellement via une interface unifiée.
3. Respect de la vie privée : aucune information ou métadonnée n'est transmise à un serveur distant.
4. Expérimentation: le contrôle de paramètres locaux offre une exploration en profondeur les modèles open-source.
5. Coût : les modèles open-source sont gratuits et certains d'entre eux peuvent être utilisés commercialement sans restrictions.

Quelques solutions de traitements locaux de modèles de langage :

• Ollama - Application open source permettant d'interagir localement avec des LLM
• Jan - Alternative open-source et auto-hébergée à ChatGPT
• LM Studio - Application propriétaire de Element Labs permettant d'intergir localement avec des LLM
• oobabooga - Une interface web locale pour les LLM

À noter que ces clients utilisent llama.cpp, une librairie créée par Georgi Gerganov.

Quelques modèles à expérimenter :

• ChatGPT - LLM d'OpenAI
• Claude - LLM d'Anthropic
• Dolphin Mixtral 8x7b - Variante sans censure du modèle Mixtral de Mistral AI
• Goody-2 - L'IA la plus responsable au monde

Ressources

Hugging Face - La plus grande communauté AI et de nombreuses ressources logicielles

LocalLLaMA - Subreddit sur les LLM locaux

There's an AI for that - Répertoire d'outils AI

Le Radjaïdjah Blog vous souhaite une excellente année \( \sum_{i=0}^{22} { \sum_{j=0}^{i} j } \) .

The Lion - A voiceover artist is asked to speak like he's seen a lion.

Stalled - A man goes to a public restroom -- and gets trapped in a time paradox.

All the Marbles - A young boy challenges a bully to a game of marbles as precious as gold.

A Guide to Dining Out In Nairobi - A Kenyan man gets a $10 USD tip, then hatches a plan to spend it.

Drawcard - A man draws a penis on a farewell card, then discovers it's the boss's sympathy card.

Bonus : Castello Cavalcanti (Wes Anderson)

The Radjaidjah Blog presents the jewart.ai project, paintings around judaism created through the prism of Artificial Intelligence.

La Sinquefield Cup 2022 a été remportée par l'ex-Iranien et neo-Français Alireza Firouzja, dans une atmosphère délétère de triche autour d'un joueur.

En parallèle la France remporte également les championnats du monde U8 et U10.

Time for a humble present, here are five philosophical short stories.

Isaac Asimov's The Last Question describes the world as a computer, or does it.

Daniel Dennett's Where am I takes Putnam's brain in a vat thought experiment to the next level.

Ursulas Le Guin's The Ones Who Walk Away from Omelas is a tale of a city and its inhabitants.

Jorge Luis Borges' Tlön, Uqbar, Orbis Tertius is a literary labyrinth with broken paths.

Howard P. Lovecraft's Ex Oblivione is a mellow experience.

Bon anniversaire :)

The White Door is the latest game by Rusty Lake. A rabbit hole actually.