Так-то технологии уже лет 80. Теоретическая база из 60-х. Просто вычислительные мощности добрались до уровня, когда появился смысл, ну и удачненько (для Хуанга пока он не сунул не туда) архитектура видеокарт под эту технологию подошла...
И плюс развитие интернета дало "на халяву" огромную базу для машинного обучения (по некоторым направлениям, в первую очередь - тексты и картинки).