Comment exécuter Llama 3 par Meta AI localement


Ce qu'il faut savoir

  • Le grand modèle linguistique de Meta, Llama 3, est disponible pour que vous puissiez le télécharger et l'exécuter localement sur votre système.
  • Téléchargez Meta Llama 3 depuis Lama.meta.com et utiliser un cadre LLM tel que Studio LM pour charger le modèle.
  • Vous pouvez également rechercher et télécharger Meta Llama 3 depuis le studio LM lui-même. Reportez-vous au guide ci-dessous pour obtenir des instructions détaillées à ce sujet.

Le dernier modèle linguistique de Meta, Llama 3, est ici et disponible gratuitement. Bien que vous puissiez utiliser Méta-IAqui exécute le même LLM, il existe également la possibilité de télécharger le modèle et de l'exécuter localement sur votre système. Voici tout ce que vous devez savoir pour exécuter Llama 3 de Meta AI localement.

Comment exécuter Llama 3 par Meta AI localement

Bien que Meta AI ne soit disponible que dans certains pays, vous pouvez télécharger et exécuter Llama 3 localement sur votre PC, quelle que soit votre région. Suivez les étapes ci-dessous pour exécuter Llama 3 par Meta AI localement.

lire plus  Comment obtenir Paramount Plus sur Roku

Étape 1 : Installer LM Studio

Tout d’abord, installons un framework sur lequel exécuter Llama 3. Si vous disposez déjà d’une autre application de ce type sur votre système, vous pouvez passer à l’étape suivante. Pour tous les autres, voici comment obtenir le studio LM :

  1. Utilisez le lien ci-dessus et cliquez sur LM Studio pour Windows pour le télécharger.
  2. Une fois téléchargé, exécutez le programme d'installation et laissez LM Studio s'installer.

Étape 2 : Téléchargez Meta's Llama 3 localement

Une fois que vous avez votre framework LLM, il est temps de télécharger Meta's Llama 3 sur votre PC. Il existe plusieurs façons de procéder.

  1. Ouvrir Lama.Meta.com et cliquez sur Télécharger des modèles.
  2. Entrez vos coordonnées et demandez à télécharger le LLM.
lire plus  Comment installer et regarder Hulu sur Android TV

Si cela ne fonctionne pas, ne vous inquiétez pas. Vous pouvez également utiliser votre framework LLM pour télécharger le LLM.

  1. Recherchez simplement Meta Llama dans le champ de recherche de LM Studio.
  2. Ici, vous trouverez différents LLM quantifiés. Sélectionnez-en un.
  3. Sur la droite, sélectionnez votre version préférée. Cliquer sur Télécharger à côté de cela.
  4. Attendez la fin du téléchargement.
  5. Une fois terminé, cliquez sur Mes modèles sur la gauche.
  6. Et vérifiez si le téléchargement est terminé.

Étape 3 : Charger le modèle téléchargé

  1. Une fois le téléchargement terminé, cliquez sur AI chat sur la gauche.
  2. Cliquer sur Sélectionnez un modèle à charger.
  3. Et choisissez le Meta Llama 3 téléchargé.
  4. Attendez que le modèle se charge.
  5. Une fois chargé, vous pouvez décharger l'intégralité du modèle sur le GPU. Pour ce faire, cliquez sur Configuration avancée sous « Paramètres ».
  6. Cliquer sur Max. pour décharger l'intégralité du modèle sur le GPU.
  7. Cliquer sur Recharger le modèle pour appliquer la configuration.
lire plus  Comment écouter de la musique pendant un appel sur les téléphones Samsung

Étape 4 : Exécutez Llama 3 (et testez-le avec des invites)

Une fois le modèle chargé, vous pouvez commencer à discuter avec Llama 3 localement. Et non, puisque le LLM est stocké localement sur votre ordinateur, vous n'avez pas besoin d'une connexion Internet pour le faire. Alors mettons Llama 3 à l'épreuve et voyons de quoi il est capable.

Tester la résistance à la censure

Tester la compréhension de sujets complexes

Test d'hallucinations

Tests de créativité et de compréhension

Selon la plupart des témoignages, Llama 3 est un grand modèle de langage assez solide. Outre les invites de test mentionnées ci-dessus, il a réussi avec brio, même sur des sujets et des invites plus complexes.

Nous espérons que vous avez autant d’exécutants locaux que Meta’s Llama 3 sur votre PC Windows 11. Jusqu'à la prochaine fois!

Laisser un commentaire

Aller au contenu principal