Microsoft hat die Open Source von Deep Speed Chat angekündigt, um Benutzern beim Trainieren großer Sprachmodelle wie ChatGPT zu helfen, sodass jeder über sein eigenes ChatGPT verfügen kann.
Es wird berichtet, dass Deep Speed Chat auf der Grundlage der Deep Speed Deep Learning-Optimierungsbibliothek von Microsoft entwickelt wurde. Es verfügt über Funktionen wie Training und verbessertes Denken und nutzt außerdem die RLHF-Technologie (Reinforcement Learning mit künstlichem Feedback-Mechanismus), um das Training zu verbessern Geschwindigkeit bis zu 15-mal schneller als die des bestehenden Systems. Mehr als einmal werden die Kosten erheblich reduziert. Beispielsweise kann ein ChatGPT-ähnliches Modell mit 13 Milliarden Parametern in nur 1,25 Stunden trainiert werden. (Täglich Planeten)
