Große Sprachmodelle (LLMs) haben in der Tiefe des Lernens an Bedeutung gewonnen und zeigen außergewöhnliche Fähigkeiten in verschiedenen Bereichen wie Assistenz, Codegenerierung, Gesundheitswesen und Theorembeweisen. Der Schulungsprozess für LLMs umfasst in der Regel zwei Phasen: das Vortraining mit massiven Korpora ...