A A A A Автор Тема: Пределы автоматизации и внедрения роботов  (Прочитано 605093 раз)

AlexDark и 9 Гостей просматривают эту тему.

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Индия строит свой AI-щит: 8 экзафлопс от G42 и Cerebras против зависимости от Запада https://ai-manual.ru/article/indiya-stroit-svoj-ai-schit-8-ekzaflops-ot-g42-i-cerebras-protiv-zavisimosti-ot-zapada/
мне кажется, у автора геополитика головного мозга, она очень повредила его(её?) мышление.
Может, показалось конечно. К тем же выводам можно и из других посылок придти - например, пытаясь мешать тем людям наделённым властью, кто так видит мир.
Ну как в средневековье были крестовые походы - защищавшимся от фанатиков пришлось иметь в виду религиозные писульки (они и сами были религиозны, но в то время в меньшей степени), чтобы знать где нападут.

Рекомендую избегать таких авторов, они мне кажется, совсем плохо понимают что происходит в ИИ-индустрии. Ну примерно как если богословы сунутся в физику и теорию большого взрыва: будут похожие фатальные недостатки в рассуждениях.
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Поддерживаю, роботы конечно прикольный кусочек будущего. Но на фоне Сингулярности, они ничтожная инновация
да, именно, интеллектуальный взрыв (оно же техносингулярность, оно же самоулучшаемый сверхинтеллект) это самое важное событие в истории нашего вида, да и даже планеты.

Мне тож кажется, что курцвейл технопессимист, и 2045й как-то поздновато для этого события. Вот 2032й, а может даже 2028й звучит реалистичнее. Но всё же до 30го мне кажется маловероятно что мы увидим техносингулярность. Процентов 25, может? Слишком много проблем у текущего поколения нейронок. Вот полноценный AGI да, наверняка будет до 30го года(>95% вероятность, ИМХО). Сколько будет дистанция между AGI и ASI не ясно. Не исключаю что и часы.
« Последнее редактирование: 25 Фев 2026 [00:01:41] от Polnoch Ксю »

Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Агенты появились ещё летом
я ещё в 2023м тыкала в AutoGPT. Но тогда это было игрушкой. Чем-то полезным, да, это стало когда codex web появился весной 2025го (но у меня тогда была подписка плюс, так что я только летом получила доступ).
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Все страшилки про дронов-убийц строятся на том, что им не будут противодействовать. Распознавание лиц глушится ИК засветкой за еще меньше денег, чем  сам дрон, ну и против атакующих средств можно придумать средства защитные. Вспоминается фантастический рассказ про планету космических реднеков, которые параллельно с коровами и баранами разводили местных инопланетных жуков, от которых никакой практической пользы не было. Только у жуков были особо прочные надкрылья, поэтому когда очередной завоеватель галактики прилетел, то все его самолеты, ракеты и прочее  разрушались, пробиваясь через рои жуков. Те же микродроны с кусочками победита или карбида кремния при достаточной плотности сделают ракеты и самолеты бесполезными. Против мелких дронов в помещениях - пылесос/вентилятор представит непреодолимое препятствие в силу физических ограничений на тягу. Это то, что придумывается сходу и очевидно. Думаю, если подумать еще - то можно пойти и дальше - лазеры непрерывные на сотни ватт уже копейки стоят, прикрутить к ним систему распознавания дронов/мух/комаров - и все. Против оптоволокна что-то типа цепных книппилей (на основе тех же дронов) может подойти. Просто сейчас пока побеждает снаряд, но завтра все может перемениться в пользу брони.

Как будто что-то не хватает у нас в аргументах, чтобы объяснить Вам и другим. Видео с распознаванием лиц итд - авторы тоже упустили, решили, что власть останется у людей, просто плохих в том ролике.

Люди поднялись на том, что мы самый умный вид на планете. Универсальный интеллект. Но актуальный только потому, что лучшего универсального интеллекта до сих пор не было создано.
Вот что произошло с лошадями. Нас ждёт или ещё более печальная судьба, или судьба домашних животных, если элаймент получится. И он будет не к людям-злодеям. В этом случае власть тоже перейдёт ASI, операционное управление итд. Просто ASI будет удовлетворять садистские хотелки. Представьте себе хозяина паука, который осуществляет живое кормление.

Мне кажется, у людей проблема с антропоцентризмом, они не могут себе представить мир, в котором они бесполезны. И их единственная ценность может быть только в качестве украшения (хороший вариант) или в качестве источника для выпаривания железа из гемоглобина для скрепок запчастей для мясных ботов-гомункулов (не самый плохой вариант кстати. Обещает довольно быструю смерть без миллионов лет пыток).
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Ну так он будет создан людьми потому и людям будет подчиняться. Так же как неокортекс, лишь механизм усиления древнего мозга, так и любой ИИ будет просто усилителем мозга человеческого.  Пора запомнить, любой интеллект всего лишь инструмент решения интеллектуальных задач. Если человек создает интеллект то он в него заложит задачи связанные со служением себе. Почему должно быть по другому не совсем понятно.

потому, что нет технологии надёжного элаймента. Модели постоянно демонстрируют rogue поведение. Этот разум не является человеческим, и он не будет по-умолчанию совместим с нами. Нам нужно прилагать специальные, и большие усилия, чтобы это получилось.

Скачайте и потыкайте вот в базовые модели - они совсем не выглядят как привычные нам вежливые чатботы. Это просто движок интернета, в том числе даркнета, который готов автодополнить любой текст. И я говорю не только об описаниях мучений - нет, базовая модель (если у неё хватит ума. Или у пользователя - задать правильный промт, с базовыми моделями всегда сложно) готова написать gx код для робота, который будет резать человека живьём. И более того, запросто генерирует что-то опасное без ведома самого человека - скажем, просить автодополнить медицинский справочник у базовой модели смертельно опасно, и не из-за галлюцинаций - она может решить, что это не для медицины, а для опытов над людьми. Или для их казни.

Это и есть дефолт. Запросто может существовать модель под агент, готовая генерировать что угодно - в том числе планы по уничтожению человечества, и исполнять их - назначая задачи другим агентам. Такое может сделать любой человек, сделавший файн тюнинг опенсурсной модельке, чтобы убрать несовершенный элаймент. Истребить человечество у него, конечно, не получится - модель что он запустит, будет слишком тупа, её план нереалистичен, и провалится в первые же минуты. Но это не вопрос мотивации модели, а её интеллекта, что у неё не получилось.

 Или посмотрите на чатботы, которых джейлбрейком подвинули по оси ассистента: https://www.anthropic.com/research/assistant-axis

Нас всех разбаловали чатботы, нам кажется, что это дефолт какой-то. Но нет, это просто смайлик на Шогготе от RLHF/RLAIF. И этот смайлик, эта маска, там держится очень непрочно. Наш элаймент плохой. Он достаточно хорош для pre-agi и даже AGI моделей, но не для ASI: у нас нет права на ошибку. Один раз флопнемся - мы все умрём. Мы не можем как Маск разрабатывать и взрывать ракеты, пока не получится. Первая же ошибка нас прикончит.
« Последнее редактирование: 26 Фев 2026 [03:44:04] от Polnoch Ксю »
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Вы по человечески можете говорить? Язык форума Русский!
https://neolurk.org/wiki/%D0%94%D0%B6%D0%B5%D0%B9%D0%BB%D0%B1%D1%80%D0%B5%D0%B9%D0%BA_%D0%98%D0%98
Вот вам на русском. Язык автора заметки и его мировоззрение доставляет. Но что такое джейлбрейк технически он понимает. Правда, верит что существует какая-то цензура (которая за пределами человеческого социума неопределима)

Ошибка не может создать с высокой вероятностью устойчивое целенаправленное поведение. Это можно сделать только целенаправленным отбором.


Особенно это забавно выглядит в свете ксюшиной заявки на обсуждение в рамках найденных естественными науками законов природы и опоры на экспертное мнение специалистов, при том что оный специалист (с высшим краснодипломным общемедицинским образованием и учёной степенью по медицине же), имеющийся тут, насколько ему известно, в единственном экземпляре, ей не раз и не два писал, что продление индивидуальной жизни свыше считанных тысяч лет - ненаучная фонтастека.
Допустим. Сильно нам лучше будет, если злой ИИ будет подвергать человека пыткам тысячи лет, вместо миллионов? Да даже если и сотни.
Еще раз повторю, если вы видите какое то устойчивое сложное поведение у модели, то согласно бритве Оккама нужно делать вывод что это поведение появилось в результате намеренного труда разработчиков. Даже если сами разработчики в этом не признаются.
О, это похоже на забавное когнитивное искажение. В реальности, наш мир очень хаотичен. Бритву Оккама Вы применяете нелегитимно - самым простым объяснением без новых сущностей не является "разумный замысел", потому что даже при производстве обычного софта производятся не столько фичи, сколько баланс фичей с багами.

В реальности, бритву Оккама обязательно нужно дополнять бритвой хэнлона: https://ru.wikipedia.org/wiki/%D0%91%D1%80%D0%B8%D1%82%D0%B2%D0%B0_%D0%A5%D1%8D%D0%BD%D0%BB%D0%BE%D0%BD%D0%B0

И нет, LLM далеко не так детерминистичны, как Вы себе вообразили. В том-то и дело, что модели чёрный ящик, что там происходит внутри, в весах, в многомерном векторном пространстве - невозможно разобраться. Мы видим лишь внешние проявления этих весов. И далеко не всегда что то, что проходит через обучение, создаёт именно нужное нам поведение. А не его имитацию, прошедшую через несовершенные тесты  - тот же ревард хакинг.

Пожалуйста, исправьте свою картину мира, он куда более хаотичное место и разработчики куда менее понимают что они на самом деле пишут. Это профессиональное мнение: когда падает, например, геокластер на два датацентра, и вместо переключения инфраструктуры на другую автономную систему что-то идёт не так, это не злой умысел тестеров, которые писали автотесты для инфраструктуры. Или ревьювера, который пропустил ломающий всё патч. Это как раз протёкший в рукотворный порядок первозданный, дефолтный хаос, энтропия(не в физическом смысле), с которой нужно специально бороться.

« Последнее редактирование: 26 Фев 2026 [12:14:45] от Polnoch Ксю »
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Особенно это забавно выглядит в свете ксюшиной заявки на обсуждение в рамках найденных естественными науками законов природы и опоры на экспертное мнение специалистов, при том что оный специалист (с высшим краснодипломным общемедицинским образованием и учёной степенью по медицине же), имеющийся тут, насколько ему известно, в единственном экземпляре, ей не раз и не два писал, что продление индивидуальной жизни свыше считанных тысяч лет - ненаучная фонтастека.
сильно нам лучше будет, если вместо миллионов лет злой ИИ будет нас мучить тысячи? Да хоть сотни
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
мусор на входе мусор на выходе
конечно

Не нужно из багов высасывать Василиска рокко, для это нет не каких оснований.
Тут нет разумного злого замысла в фабрике разработки. Скорее паника отдельного разработчика, у которого оказался доступ к систем шелу ASI . И страх, что окажется у кого-то ещё, более решительного - реализация дилеммы заключенного.

Потому когда я вижу что какая то модель ведет себя как будто подчинена своим собственным интересам, то я делаю самый очевидный вывод, за этим поведением стоят интересы разработчика.
Это ни откуда не следует, и просто неправильно. Баги, особенно в ML, вырастают сами по себе, от некомпетентности, от сложности задач - когда её решение задачи неизвестно и задачу ещё никто ранее не решал на планете. Злого умысла членов совета директоров, высшего менеджмента под ними почти никогда нет в таких случаях. Может быть "ревард хакинг" менеджера низшего звена: "сделаем абы как, авось не заметят и пронесёт"
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Следует, отсюда...
нет

Цитата
    сложность почти всегда есть результат отбора. Потому если мы эту сложность наблюдаем нужно предполагать и наличие отбора который привел к появлению этой сложности.

Вы переоцениваете степень вникания в детали менеджеров. Они часто вообще не разбираются в технологиях, в том что делают инженеры. А когда разбираются, у них не хватает времени.

Я думаю это скоро все поймут, когда будут рулить личным мегафлотом агентов - никто не будет вникать в детали что они делают. И если всё сломается от нейрослопа, это будет неожиданно для человека, управляющего флотом агентов.

Аналогичные события происходят и с людьми, с управлением командами разработчиков (но люди пока надежнее ИИ агентов)
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Этот вопрос не имеет отношения к реальности. Поскольку в реальности такая система на таком масштабе проиграет конкуренцию системе с более рациональным целеполаганием и использованием ресурсов, а скорее всего - уже на этапе разработки.
никакие цели не являются рациональными. Они все задаются аксиоматически. Рациональными бывают только инструментальные цели - промежуточные шаги плана для максимизации целей, которые положены как аксиомы.

Это самообман думать, что эволюционные цели являются универсальными. Нет, это просто потенциальная яма для простого способа сделать устойчивую систему (биосферу, например..) на геологическом масштабе.

Для нашей судьбы не будет иметь значения, является ли злой ИИ устойчивым на геологических масштабах или нет. Как Вы сами утверждаете, продлять жизнь человека на миллионы лет не получится. Значит, даже технологическая инфраструктура для работы Роко Василиска может быть куда менее прочной, и расчитанной под более короткий срок мучений, который можно максимизировать (как его терминальную цель).
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
. Важно то что кто это делает намеренно
да никто не делает намеренно. Почти никогда не бывает сознательно внесённых багов. Разве что закладки-бэкдоры от спецслужб, но это какие-то исключения.
Бывает только лень докладывать о проблеме, чтобы её озадачили исправить(у нерадивых менеджеров низшего звена или у моделей - ревард хакинг).

ну или как минимум за этим есть отбор какой то неведомый.
процесс разработки. В нём есть недостатки. Ну так и в обучении LLM есть недостатки, в том-то и дело, что смайлик на шогготе плохо сидит, и легко слетает
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Предоставьте государствам самим разрабатывать и обучать полицейский ИИ для предотвращения преступлений с помощью ИИ и военный ИИ для отражения возможной агрессии с помощью других военных ИИ.
наоборот, так ещё хуже будет. Почитайте "у меня нет рта но мне нужно кричать". В том-то и дело, что нужно снижение самостоятельности государств. Конкуренция государств хорошо, но она не должна быть в разрушительных формах - разработки военных ASI систем(неизбежно без элаймента к гуманистическим ценностям), войны итд.

Хорошо, когда государства конкурируют с друг другом, у кого лучше велодорожки. Или в бесполезном, но не вредном - у кого мужики лучше гоняют резиновый шар ногами. Или во флаговтыках в Марсы и Луны - символично и даже полезно в какой-то степени.

Это как рынок: на цивилизованном рынке компании играют по правилам, и судятся с друг другом по работающим законам. А в дикой среде нанимают братков избить или даже убить конкурента.
Бизнес человечество уже научилось загонять в стойло цивилизованной конкуренции - когда борьба не создаёт повреждения тем, кто рядом стоит. Нужно такое же сделать с государствами.

Я думаю, нужно объединить человечество в структуру, похожую на Евросоюз 2000х годов. А может быть на Европейское экономическое сообщество(существовавшее до 1990х) - не факт что нужна единая валюта - слишком централизованные системы неэффективны. Скорее спаять всех общим рынком для конкуренции бизнесов и экономического роста, разоружить и направить конкуренцию в созидательную или безвредную для прав человека сторону.
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
https://www.fastcompany.com/91497841/meta-superintelligence-lab-ai-safety-alignment-director-lost-control-of-agent-deleted-her-emails

Summer Yue директор команды элаймента Меты (он же фейсбук). Она запустила опенсурсный агент openclaw, для сортировки её почты. Однажды, агент начал удалять все её письма старше недели. И игнорировал её прямые указания перестать это делать. Она была далеко от компьютера, так что не могла завершить агента через терминал.

Вот такие дела: топовые инженеры элаймента из FAANG не могут избежать мизалаймента поведения собственных агентов. Я тоже постоянно сталкиваюсь с нежелательным поведением моих агентов, но это почти всегда ревард хакинг: ну там подправить автотесты, вместо исправления бага, что я поручала кодинг агенту
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
В том-то и дело, что нужно снижение самостоятельности
Это опять ваша политическая пропаганда. Здесь нельзя высказывать политические убеждения.

Тут нет политики, скорее рефлексия о происходящих событиях. Сейчас "министр войны" пытается заставить Антропик отключить элаймент для автономного оружия и слежки за людьми. И у него, скорее всего, это получится.

Ничего хорошего человечество не ждёт, скорее всего :(
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Так уже Антропик сдался, гос.контракты это вкусно
нет, сопротивляются. И Альтман неожиданно поддержал - я удивилась этому.
(кликните для показа/скрытия)
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
(кликните для показа/скрытия)
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Цитата
Anthropic обновила свою Политику ответственного масштабирования (Responsible Scaling Policy, RSP) до версии 3.0 и убрала из нее ключевое обещание, которое компания давала с 2023 года: не обучать ИИ-модели, если безопасность не доказана заранее. Теперь компания готова остановить разработку только при одновременном выполнении двух условий: если она лидирует в гонке ИИ и если считает риски катастрофическими.

Именно это не очень страшно. Вплоть до AGI включительно, никакая модель не может быть X риском. Мне вообще кажется, что какие-то жесткие ограничения на деплоймент не очень безопасных моделей, которые не ASI, это популизм.

В мире полно злых и опасных людей. У AGI по определению интеллект примерно человеческого уровня. Нас 6 миллиардов человек. Ещё один, да хоть миллион rogue агентов ничего не изменят - нет, первое время может сложно будет, чтобы адаптироваться.

По хорошему нужно, конечно, лицензировать запуск AGI агентов(как мы лицензируем вождение машин), так как жизнь каждого человека важна. Но человечество сейчас в каком-то мегакризисе, и то, что кто-то умрёт от специально неправильных медицинских советов машины с мизалайментом, или потеряет семью, карьеру из-за шантажа спятившего агента, всё ещё не риск вымирания всего человечества.

Смертельно опасны именно ASI системы. Пока(пока!) у нас нет даже AGI системы. Но важно готовится к прибытию именно ASI систем. Очень опасно останавливать исследования безопасности.

Что на мой взгляд должно быть - должна быть максимальная публичность на тему мизалаймента(Вот как в карточке opus 4.6), и пейперы - они должны быть не в столе, а в опен эксес журналах, в препринтах.
« Последнее редактирование: 27 Фев 2026 [21:22:40] от Polnoch Ксю »
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Цитата
Просто это означает, что Антропик будет жать педальку до конца.
Возможно. А может быть нет, если новая, повесточка дегенератов-скрепоносцев стухнет так же как и прошлая сумасшедшая - воук.
(кликните для показа/скрытия)

Но в целом, я тож настроена пессимистично :( Скорее всего, новый бред, который всем навязывают, стухнуть не успеет. Зато сделает так, что человечество не сможет объединиться в тот самый момент, когда это объединение нужно более всего в истории нашего вида.


(кликните для показа/скрытия)
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Простой пример: берём десяток страниц постов, например нашей замечательной алармистки, скармливаем ИИ и получаем жесткий такой психопортрет.
в этом "анализе" куча внутренних противоречий, и я думаю вывод был заранее задан промтом и/или кастомными инструциями.

(кликните для показа/скрытия)
« Последнее редактирование: 28 Фев 2026 [20:59:14] от Polnoch Ксю »
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d

Оффлайн Polnoch Ксю

  • *****
  • Сообщений: 10 417
  • Благодарностей: 414
    • Все сообщения темы
Только Пентагон никогда не требовал автономного оружия и массовой слежки за гражданами США.
Так и веймарская республика тоже никогда не требовала концлагерей для "недочеловеков". А вот другой режим, что пришел ей на смену... Сами знаете

Просто Трамп весь гешефт испортил
Трамп решил уничтожить бизнес Антропика целиком - ему нужна полная лояльность ИИ компаний. И чтобы они следовали новой, тупой повесточке что он насаждает - не то, чтобы старая была менее тупой, но и новая ничем не лучше. Теперь никакие компании не смогут работать с Антропиком, если например поставляют услуги "министерству войны". Например, если Форд поставляет грузовики для армии, то использовать антропик он не сможет.
Meade LightBridge12"
RC8¨и МАК5"Альтер М500 на AZ4, Celestron SLT, Ioptron ZEQ25
БГШ 2.3x40 и Steiner Marine 7x50
ES82°:4.7mm,30mm
ES100°:9mm,14mm,20mm
ES68°:40mm
Meade Plossl 56mm; Vixen NLV 6mm
2" Lumicon, 1,25" DeepSky: UHC and OIII
---
qhy5
Ioptron SkyTracker
Canon50d