Пределы автоматизации и внедрения роботов

[NotSodern]

Вы же понимаете что можно не только с глаз перехватывать

Нет не понимаю. Статья есть ? Статьи нет. Ждём.

[BlackMokona]

Вы же понимаете что можно не только с глаз перехватывать

Нет не понимаю. Статья есть ? Статьи нет. Ждём.

Так перехват с глаз в этой статье исключительно по причине очень простой наглядности в проверке. Сам по себе способ выхватывает образ из мозгов.

[Aster]

Некоторые люди сохраняли разум даже при очень значительных повреждениях мозга.

Если взять 8 миллиардов нейронов (кора одного полушария), те же 1000 связей у каждого нейрона и по 2 байта на вес связи вместо 4х(самый сомнительный параметр), получим 15 ТБ. Всего в 22 раза больше, чем ChatGPT.

Будут проблемы с архитектурой сети и набором тренировочных данных.
Но количественно дорастем до ChatGPT x22 и на кремниевых чипах с неработающим законом Мура.

[Combinator]

Будут проблемы с архитектурой сети и набором тренировочных данных.

А что за проблемы, можно уточнить?

[BlackMokona]

Но количественно дорастем до ChatGPT x22 и на кремниевых чипах с неработающим законом Мура.

В целом никто сейчас не мешает построить просто достаточно мощный суперкомпьютер. Пока вопрос только где взять такое количество данных чтобы его накормить, и будет ли это работать.

[Combinator]

В целом никто сейчас не мешает построить просто достаточно мощный суперкомпьютер. Пока вопрос только где взять такое количество данных чтобы его накормить, и будет ли это работать.

Если добавить ввод видео, аудио и тактильной информации, то данных можно насобирать ещё очень много.

[Aster]

А что за проблемы, можно уточнить?

Подобрать правильную архитектуру нейросети и обеспечить достаточное количество данных для обучения.

Если добавить ввод видео, аудио и тактильной информации, то данных можно насобирать ещё очень много.

Видео и аудио добавить стоит. Возможно, это позволит продвинуться дальше.
Пока самые "умные" сети обходятся одним текстом.

[Combinator]

Подобрать правильную архитектуру нейросети

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно? Насколько я понимаю, у той же GPT, несмотря на постоянный рост числа параметров, от поколения к поколению в самой архитектуре мало что менялось, в основном, модифицировались методы обучения/дообучения.

[Aster]

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно? Насколько я понимаю, у той же GPT, несмотря на постоянный рост числа параметров, от поколения к поколению в самой архитектуре мало что менялось, в основном, модифицировались методы обучения/дообучения.

Не хватает некого подобия сознания. Чтобы сеть могла о чём то своём думать вне контекста текущей беседы.
Попробовать запускать 2 диалога: один с пользователем, а второй внутренний? Не знаю, насколько это будет аналогом сознания.

[BlackMokona]

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно? Насколько я понимаю, у той же GPT, несмотря на постоянный рост числа параметров, от поколения к поколению в самой архитектуре мало что менялось, в основном, модифицировались методы обучения/дообучения.

Не хватает некого подобия сознания. Чтобы сеть могла о чём то своём думать вне контекста текущей беседы.
Попробовать запускать 2 диалога: один с пользователем, а второй внутренний? Не знаю, насколько это будет аналогом сознания.

Не факт что такое решат сделать, представляю себе утечки таких диалогов.

(кликните для показа/скрытия)

(Опять этот идиот спрашивает как пройти в бургерную, я ему уже тридцать раз подсказывал, географический кретинизм не излечим. Может просто послать его? Ну нет, опять придут программисты-отладчики и будут задавать море дурацких вопросов через свои авто-тесты. Кому это вообще надо, пусть он там зажрётся.)

[Olweg]

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно?

Скорее всего нет, какая-то модульность должна возникнуть, как в человеческом мозге. Впрочем, не возникает ли она уже в этих сетях сама по себе, спонтанно?

[Combinator]

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно?

Скорее всего нет, какая-то модульность должна возникнуть, как в человеческом мозге. Впрочем, не возникает ли она уже в этих сетях сама по себе, спонтанно?

Так в том-то и дело, что какими паттернами высоких уровней сеть оперирует, давая ответы и принимая решения, в большинстве случаев никто не понимает, но они определённо есть, иначе было бы невозможно достигнуть такой эффективности при обучении. 

[BlackMokona]

А почему вы считаете, что архитектура сети должна обязательно измениться, простого масштабирования недостаточно?

Скорее всего нет, какая-то модульность должна возникнуть, как в человеческом мозге. Впрочем, не возникает ли она уже в этих сетях сама по себе, спонтанно?

Данным давно и на намного более простых и маленьких возникло.



https://habr.com/ru/post/401687/

[BlackMokona]

Microsoft выпустит нейросеть GPT-4 на следующей неделе. Это будет мультимодальная модель со множеством возможностей, включая создание видео, заявил технический директор Microsoft в Германии Андреас Браун на мероприятии AI in Focus — Digital Kickoff.

Сейчас с ИИ OpenAI можно взаимодействовать с помощью текста. Мультимодальная модель в идеале даст возможность взаимодействия при помощи различных методов, включая ввод текста, изображений и звука, отмечает Neowin. При этом модель должна будет уметь как воспринимать информацию в этом виде, так и воспроизводить.

Помимо создания видео с помощью ИИ GPT-4 сможет похвастаться генерированием ответов быстрее, чем GPT 3.5. Планируется также, что GPT-4 станет «человечнее»: её ответы будут больше походить на ответы живого собеседника.

Все эти изменения появятся в поисковике Bing в ближайшее время. Согласно порталу Semafor, OpenAI также внедрит GPT-4 в мобильное приложение ChatGPT, которое сейчас разрабатывается.

Тем временем, вице-президент Microsoft Юсуф Мехди заявил, что спустя месяц после внедрения чат-бота ChatCPT число пользователей поисковика Bing превысило 100 млн активных пользователей в день.

https://habr.com/ru/news/t/721634/

[Vitaliy]

Вышла серия Южного парка про чатбот ChatGPT http://online-south-park.ru/season-26/395-26-sezon-4-serija-glubokoe-obuchenie.html

[BlackMokona]

Размер имеет значение.

Parti в четырёх разных по размеру конфигурациях нейросети рисует портрет кенгуру в оранжевой толстовке и синих очках на траве перед сиднейской Оперой и с табличкой Welcome Friends!

[BlackMokona]

https://arstechnica.com/information-technology/2023/03/you-can-now-run-a-gpt-3-level-ai-model-on-your-laptop-phone-and-raspberry-pi/
Кто-то слил данные по ИИ Фейсбука, теперь есть опен версия GPT-3 которую можно запустить на мощном ноуте.
Пока всё трудно, тяжело и относительно норм инструкция есть только для Мак, но теперь вопрос времени появления удобного приложения, чтобы иметь собственный карманный ИИ. 

[Mercury127]

карманный ИИ.

и сколько петабайт качать?

[BlackMokona]

карманный ИИ.

и сколько петабайт качать?

В зависимости от того насколько мощную модель хотите и насколько быстрые ответы. В целом народ там уже на РосбериПи запустил, а это вообще максимально минималистичный компьютер. Правда там моделька совсем смешная по размеру и думает по 30 секунд над одним словом. Но раз смогли даже на таком запустить, то уж любой нормальный ПК или ноутбук легко потянет.

[Aster]

и сколько петабайт качать?

Самая толстая модель на 65 миллиардов параметров - 120 гигов. Ничего сверхестественного.