(no subject)

[twilightshade]

На моём процессоре Ryzen 7 5700X рендерилось почти час.

Watch on YouTube

Продолжаю читать книгу Язык и компьютер. Нет, всё таки очень близки были в совке к созданию ИИ современного типа, до ембеддинга они уже дошли ещё чуть-чуть и дошли бы до токенизации, железо только ограничивало и некоторые моменты. Но совок рухнул и они уехали. Всё к лучшему.
Книгу можно качнуть здесь (djvu) если кому интереcно https://sheba.spb.ru/za/informatika-lingvokomp-1989.htm

Comments

[twilightshade]

ну не думаю что они на что-то опирались они искали путь и шли как ни странно в правильном направлении. Уж не знаю насколько параллельно с западными исследованиями но скорее всего параллельно, всё таки не в вакууме жили. Как мне резюмировал чатGPT до тензоров они не додумались, но уже вместо вектора стали использовать скаляры. И не смогли абстрагироваться от "человеческих" паттернов, всякие информанты и проч.

[juan_gandhi]

Да; многомерность не они всандалили. А непонятно почему; ведь PCA уже хз когда был (у меня даже на эту тему статья есть в ЖВНД).

[twilightshade]

Ну у них было с десяток измерений хорошее-плохое и т.д. но конечно очень мало в сравнении с сейчас. С другой стороны и с тем тогдашние компы еле спрапвлялись. Книжку можете глянуть, она в djvu есть вот тут например https://sheba.spb.ru/za/informatika-lingvokomp-1989.htm Не знаю есть ли ещё другие более серьёзные книги тех лет по языковым моделям ИИ, мож и есть, но я не видел.