Революция того, что произошло последние год-два
я это слышу каждый год десятилетиями
аключается в том, как принципиально изменился результат при сильном увеличении кол-ва параметров.
а автор концепции llm разбирая последнюю модель 4о( или как её там) пришел к выводу что ничего не поменялось
а ведь опенаи её клепали как раз год-два.
на лицо тупик развития
впрочем он уже давно предсказан, т.к. текущий рост сетей исключительно за счет того что железо на много порядков было мощнее чем раньше.
но сейчас достигли своего предела и наращивать мощность железа не то что на порядки, а в разы - слишком сложно.
а ведь для дальнейшего прогресса в этом парадигме нужен дальнейший рост железа на много порядков, т.к. рост сложности расчетов геометрический.
Этого никто особо не ожидал.
за последние 20 лет никто не ожидал только того, что генерируемый llm текст будет настолько правдоподобно выглядеть.
на этом всё.
всё остальное - ожидаемый продуманный труд разработчиков на протяжении многих лет.
LLM-моделям в современном их виде всего 1-2 года
только GPT вышел в 2018году, т.е. 6 лет назад!
а ведь он не из воздуха появился - ему предшествовали годы разработки и исследования.
а вот последние 1-2 года - это как раз застой, где не вижу каких-то существенных изменений и улучшений.
просто допиливают, цензурят, оборачивают промпты в промпты выдавая это за новый чатгпт, и т.п.
если их пока не научились достойно (на твой взгляд) применять, то еще научатся.
главное их применение, когда допилят(если вообще смогут допилить) - поисковые системы.
побочно - картинки по приколу рисовать, баловаться.
Нвидия со своей картой для обработки полигонов тоже была бесполезной игрушкой по началу, все крутили у виска и продолжали сидеть на каком-нибудь матроксе в 2д. Ведь и выглядело по началу 3д хуже.
твое сравнение не в тему.
представь как если бы нвидиа выпустила свою карту когда уже 5 лет как все игры на полигонах делали - вот тут также.