Пределы автоматизации и внедрения роботов

[MenFrame]

Исследование Apple показало, что ИИ-модели не думают, а лишь имитируют мышление

[Olweg]

Обсуждение этой статьи на Хабре (комменты есть очень интересные):
https://habr.com/ru/articles/850252/

[MenFrame]

комменты есть очень интересные

По сути подтверждают мысль в статье, Т9 продолжают допиливать напильником обучающей выборкой.

[BlackMokona]

Исследование Apple показало, что ИИ-модели не думают, а лишь имитируют мышление

На реддите народ засунул эти примеры в ИИ и те порешали их верно. Поэтому отстают ребята

[BlackMokona]

Да и вижу на Хабре сделали в комментах тоже самое и всё там ИИ правельно поняли и посчитали.

[BlackMokona]

Ну и на хабре разобрали где была беда у Эппл, те допустили лингвистическую двусмысленность, от чего и полетели.

Типа как Мафин и Мини-мафин. Она признак "smaller" определило как указатель на "тип продукта", вместо "размер продукта". Фразу "5 of them were a bit smaller than average", она восприняла как "5 из них оказались вовсе не киви, а мини-киви". Поэтому на вопрос сколько "kiwi" она ответила математически верно, исключив "мини-киви".
Например, "Коля купил вчера 2 Кекса(конкретный продукт), а сегодня купил вдвое больше кексов(тип кондитерского изделия), но 2 из них были Мини-кексы(конкретный продукт). На вопрос "Сколько Кексов(конкретный продукт) купил Коля?", правильный ответ "два".

[Olweg]

На реддите народ засунул эти примеры в ИИ и те порешали их верно. Поэтому отстают ребята

Ну и пишут, что o1-preview (та самая, которая со встроенной рассуждалкой) справилась вполне неплохо, снижение качества всего на 17.5%. Ну а в блиц-опросах без времени на размышления и человек может посыпаться (глянул саму статью - некоторые «интуитивные» модели просели тоже не сильно, на 20-30%).

[BlackMokona]

Ну и пишут, что o1-preview (та самая, которая со встроенной рассуждалкой) справилась вполне неплохо, снижение качества всего на 17.5%. Ну а в блиц-опросах без времени на размышления и человек может посыпаться (глянул саму статью - некоторые «интуитивные» модели просели тоже не сильно, на 20-30%).

Там уже окончательно все разобрались с проблемой. Беда что существуют Мини-Киви как товар, о чём ИИ знал, а учёные Эппл нет. В общем ИИ был прав с самой научной статье Эппл. Он корректно ответил на их запрос, но они не поняли ответа.

[Vitaliy]

Ну и на хабре разобрали где была беда у Эппл, те допустили лингвистическую двусмысленность, от чего и полетели.

Типа как Мафин и Мини-мафин. Она признак "smaller" определило как указатель на "тип продукта", вместо "размер продукта". Фразу "5 of them were a bit smaller than average", она восприняла как "5 из них оказались вовсе не киви, а мини-киви". Поэтому на вопрос сколько "kiwi" она ответила математически верно, исключив "мини-киви".
Например, "Коля купил вчера 2 Кекса(конкретный продукт), а сегодня купил вдвое больше кексов(тип кондитерского изделия), но 2 из них были Мини-кексы(конкретный продукт). На вопрос "Сколько Кексов(конкретный продукт) купил Коля?", правильный ответ "два".

З.Ы. Алиса правильно ответила 2 кекса. Про киви, если сказать, что 5 киви меньшего размера, ответила 190 киви, а если  сказать меньше среднего размера, то 185.

[BlackMokona]

З.Ы. Алиса правильно ответила 2 кекса. Про киви, если сказать, что 5 киви меньшего размера, ответила 190 киви, а если  сказать меньше среднего размера, то 185.

И пробывать по разному и анализиторовать, нужно научится учённым что плодят статьи про ИИ со скоростью принтера.

[BlackMokona]

Новое видео, Тесла Оптимуса
https://www.youtube.com/watch?v=5cNB96pqe8U&ab_channel=MoterWorld

[Vitaliy]

Новое видео, Тесла Оптимуса
https://www.youtube.com/watch?v=5cNB96pqe8U&ab_channel=MoterWorld

Медлительный очень.

[BlackMokona]

Медлительный очень.

Поэтому всё ещё прототипы, а не коммерческий продукт.

[Vitaliy]

Зачетно. Система мониторинга состояния водителя на последних моделях Volkswagen
https://pikabu.ru/story/sistema_monitoringa_sostoyaniya_voditelya_na_poslednikh_modelyakh_volkswagen_11935334?utm_source=andpostshare&utm_medium=sharing

[Сергей Н]

Chat GPT-4o не напишет книгу если его просто попросить, но говорят что рассказы может неплохо писать. Я решил зайти с другой стороны и скормил ему книгу примерно 500 000 знаков в txt файле. Попросил у него синопсис и он неплохо справился, но когда я решил углубиться, понять, а насколько он понял что прочитал, то тут вышел затык, поскольку Chat не видит текст целиком, а я этого не знал. Видит только 1-2 главы из которых он может что угодно процитировать, а дальше не хочет. При этом выдает односложные ответы типа "автоматический поиск не дал результатов, можно попробовать сделать это вручную". Если я отвечал давай вручную, он повторял примерно тоже самое. Тупит и даже почти извиняется, вместо того что бы сразу сказать, что задача невыполнима.

[Сергей Н]

Исследование Apple показало, что ИИ-модели не думают, а лишь имитируют мышление

И это не шутка, в Apple действительно капитаны работают? )

[Olweg]

Какое у него контекстное окно? У меня написал, что всего 8192 токенов, или «примерно 3,000–6,000 слов в текущем разговоре».

[BlackMokona]

Какое у него контекстное окно? У меня написал, что всего 8192 токенов, или «примерно 3,000–6,000 слов в текущем разговоре».

128 тысяч символов окно у ГПТО-4о. Но раз скормили ему 500 к, то в любом случае всё не влезло и пошли всякие оптимизации хардовые.

[Olweg]

На самом деле, 500К знаков может влезть в 128К токенов. В токене обычно 3-4 символа.

[Сергей Н]

Какое у него контекстное окно? У меня написал, что всего 8192 токенов, или «примерно 3,000–6,000 слов в текущем разговоре».

Да примерно столько ему можно скормить через форму ввода текста. Файл вложение не имеет таких ограничений. Но я ошибся когда говорил что он может что угодно процитировать из первой и второй главы. Сейчас проверил, выходит он и на 25% первой главы кусок текста не может найти. Может быть он проиндексировал этот файл так что первые главы более подробно вошли в индекс. А размер индекса которым он оперирует скорее всего не больше тех же 3,000–6,000 слов.