מה הם Token's ואיך הם משפיע על מודלי שפה? 🪙
כדי להבין איך מודלי שפה LLM's עובדים חשוב להבין את המנגנונים שמפעילים אותם. בסרטון הזה נסביר מה זה ׳טוקנים׳ (Tokens)?, כיצד הם משפיעים על השיחה שלנו עם מודל שפה כמו GPT?, מה זה חלון הקשר? ואיך עובדים עם טוקנים בצורכה חכמה 👇📺. אם אתם מחפשים כלל אצבע, ׳טוקן׳ אחד שווה בדרך כלל ל-4
chatgpt context window gen ai gpt