ahajtin: (Default)
[personal profile] ahajtin
Много общаюсь с коллегами, в значительной степени иностранными.

Все разговоры вокруг совершенно травоядного бизнеса: HR, маркетинг, продажи, технологии. Общее ощущение практически не зависит от страны и индустрии: прямо на наших глазах и с нашим участием открывается то ли ящик Пандоры, то ли источник всеобщего благоденствия.

Цитата из разговора, с середины:
- Страшновато, конечно.
- Поздно уже бояться
- Ну да, уже поздно

Ну и дальше пошли обсуждать ближайшие шаги по дальнейшему открытию ящика.

В общем развилку, на которой можно было свернуть в безопасную сторону мы опять проскочили. Вспоминаются Стругацкие с описанием той самой безопасной стратегии: "транспорт у них только общественный, авиации никакой, зато прекрасно развита проводная связь".

Date: 2015-10-30 07:52 pm (UTC)
From: [identity profile] neusolga.livejournal.com
...это конец этого света,видимо))

Date: 2015-10-31 12:06 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Не первый раз уже :). Что, впрочем, ничего не гарантирует.

Date: 2015-10-30 09:17 pm (UTC)
From: [identity profile] 109.livejournal.com
singularity is closer than it appears.

Date: 2015-10-31 12:05 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Вот да, есть такое ощущение.

Я потихоньку начинаю подозревать из каких технологий оно сложится. Естественно это пока что совсем необоснованные ощущения, но уже есть.

В порядке бреда: пусковой механизм может получиться очень странный. Т.к. до сих пор никаких признаков самостоятельного целеполагания в AI я не видел, а вот средства достижения целей развиваются очень быстро и разнообразно, сингулярность может стартовать с гибрида - люди ставят цели, весьма общие, AI сложным образом их достигает. Симбиоз Джинна с Алладином. Джинн без Алладина пассивен, Алладин без Джинна ничего не может. Собравшись вместе могут строить дворцы и разрушать города.

Date: 2015-10-31 12:41 am (UTC)
From: [identity profile] 109.livejournal.com
я уже комментировал это, и ещё раз повторю, пожалуй. мне не очень понятно, откуда взялась настойчивая идея про самостоятельное целеполагание.

ну хорошо, я понимаю, что читать Бострома времени нет, или не хочется. ну тогда можно примкнуть к первоисточнику, полтора экрана всего: http://wiki.lesswrong.com/wiki/Paperclip_maximizer

всё остальное, включая обретение мирового господства - это operational goals.

Date: 2015-10-31 12:50 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
У нас уже прошла бесплодная дискуссия на эту тему. Не думаю, что стоит начинать по кругу.

Бострома я прочитал. И считаю, что он литератор-прожектер, пардон. То же примерно относится к Paperclip maximizer. Тем более этот сценарий вроде у Бострома описывался.

Вот есть у нас оптимизационная модель конвертерного производства стали. Она оптимизирует _в установленных при создании рамках_. Параметры подбирает. Хорошо подбирает, лучше человека. Но никаких шансов перейти к созданию электроплавильной печи у нее нет. Ровно то же и к скрепкам относится. Одна модель будет их продавать, вторая сырье покупать, третья производство оптимизировать. И каждая из них будет ограничена своей областью. Выскребут все резервы внутри области определения и все.

Ровно так же, как появление все мощных процессоров не привело к самозарождению кода в них, появление узких AI решений не ведет к зарождению сильного AI (не помню какая там нынче правильная аббревиатура для этого).

Date: 2015-10-31 01:16 am (UTC)
From: [identity profile] 109.livejournal.com
я не думаю, что надо опасаться продолжения дискуссии. для дискуссии нужно, чтобы оба оппонента были хоть немного в теме.

ничего сложного тут нет.

1. для наличия superintelligence не нужно самостоятельное целеполагание. в смысле конечной цели. из того, как ты выражаешься, не очень понятно, споришь ты с этим тезисом, или нет, поэтому я вынужден повторяться.

промежуточные цели, типа завоевания мирового господства - это operational goals, примерно как в шахматах для того, чтобы в конце выиграть, надо вначале развить свои фигуры.

2. "ограничение", как ты выражаешься, называется "control problem". это неожиданно сложная проблема, и Бостром объясняет гораздо лучше, чем я смогу. если ты прочитал, у тебя должны быть конкретные возражения. если их нет, то ты, скорее всего, не читал, или не понял ничего.

один, очень маленький аспект сложности control problem - это то, что чем более AI confined, тем меньше от него пользы. а делают его как раз с целью получения пользы.

"литератор-прожектер" - это реально смешно. это как если бы я t'Hoofta называл "литератором-прожектером", понимая, в лучшем случае, 5% им написанного.

мне кажется, стоит воздержаться от эпитетов подобного рода, пока не окрепнет уверенность в хотя бы зачатках понимания.

Date: 2015-10-31 02:01 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Начну с конца :).

а) Я совершенно не настаиваю на том, что со мной стоит разговаривать. Но если со мной разговаривать, немного странно требовать от меня отказаться от собственных мнений и оценок.

б) Я полагаю, что в силу специфики работы и круга общения понимаю в технологиях ML и их практическом применении значительно больше, чем подавляющее большинство населения и IT специалистов. Очень может быть, что я ошибаюсь, самооценка завышена и т.п. Так что особого пиетета к "авторитетам" у меня нет. Хотя сам на "авторитетность" не претендую

в) Если ты уверен, что я "не понимаю" и хочешь меня просветить, боюсь, разговора не получится. Если же все таки хочется что-то обсудить, несмотря на мою дремучесть, не стоит заранее предполагать, что я не читал и не понял. Возможно стоит все же допустить, что я просто не согласен и имею другое мнение

Теперь по сути:

1. Легкость постановки operational goals представляется мне искусственной. До сих пор я не видел примеров решений, которые способны поставить сами себе такие цели вне заранее предопределенного человеком набора возможных целей. Развитие фигур в шахматах происходит внутри правил, заданных извне. Робот шахматист будет играть в шахматы и не сможет учитывать психологическое состояние оппонента, пока ему извне не расширят рамки.

2. Рассуждая про то, что "неограниченный" AI полезнее "ограниченного", стоит сначала понять, можем ли мы на имеющихся технологиях построить неограниченный интеллект, способный к постановке operational goals, не заданных заранее человеком. Пока что я считаю, что нынешние технологии дают только отдаленные намеки на то, как решить эту задачу.

Возьмем сценарий со скрепками. Сейчас, как я и писал, реально построить целый набор оптимизаторов:
- закупка
- продажа
- производство

Ни один из них ни к какой постановке operational goals не способен. Как из массы таких оптимизаторов возникнет AI, способный к постановке таких целей остается загадкой. Если где-то описан механизм такого перехода - с интересом прочитаю. Иначе получается анекдот про изобретателя большой красной кнопки для решения всех проблем.

Date: 2015-11-05 06:40 pm (UTC)
From: [identity profile] maxwolf.livejournal.com
На мой взгляд, проблема сейчас лежит в несколько иной плоскости. Что является "объектом управления" (в терминах ТАУ) и какие управляющие воздействия доверены САУ? В сценарии со скрепками вы исходите постулата, что объектами управления являются отдельные процессы. В таком случае изменения в законах управления этими процессами могут привести к "захвату мира" лишь случайно ("студенты-медики, изучая латынь, случайно вызвали дьявола" :). Однако, видя практические положительные результаты работы подобных "оптимизаторов", люди склонны поручать им управление всё более сложными объектами. В пределе - самостоятельно выбирать объекты и законы ими управления.

Date: 2015-11-05 07:41 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Тут проблема в том, что оптимизатор как таковой строится на том, что:
а) заранее известны метрики
б) заранее известны перменные, на которые можно влиять

Вы, вслед за Бостромом (хорошая компания, кстати), считаете переход от систем, работающих в заранее установленных границах, к системам, самостоятельно определяющими такие границы, количественным.

Я в этом крайне сомневаюсь.

Date: 2015-11-06 12:48 pm (UTC)
From: [identity profile] maxwolf.livejournal.com
Я тоже пока не вижу потенциальных механизмов самозарождения целеполагания. С моей точки зрения, сейчас более вероятен сценарий, когда люди захотят поручить достаточно сложной системе управления порулить "всем миром", поставив перед ней цель типа "чтобы все люди были счастливы", а та, в качестве способа решения, выберет "расстрелять всех несчастных".

Date: 2015-10-31 11:34 am (UTC)
From: [identity profile] enox.livejournal.com
Ну вот только что-то для джинна цели ставятся самые что ни на есть радикально расширяющие пределы нашей цивилизации - увеличить конверсию на ..., соптимизировать медиаплан для того, чтобы повысить узнаваемость бренда на.. ну и так далее. Ну или допустим соптимизировать сапплай чекйны для нового айфона.

Это я к тому, что сингулярность в областях "маркетинга и продаж" видится довольно ироничной. Ну ок, ИР строит модели, предсказывает поведение больших масс людей. Ну станет достаточно первички и алгоритмов для моделирования потребностей человека с большим, чем сейчас, качеством. RTB биржи перейдут с кластеризации на более сложные алгоритмы.

А знаешь какой будет результат всех этих технологий? Система наконец-то научится не показывать мне рекламу ботинок, после того, как я их купил. А рекламу ласт - после того, как я вернулся из отпуска. (тут смайлик)

Date: 2015-10-31 02:50 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Если ты берешь отрасль с маржой 1% и оборотом в миллиарды, после чего растишь маржу на 0,1%, то для этой отрасли получается революция.

Посмотри, что интеграторы делают с рынком такси (это как пример).

Глядя на проекты в области медицины (у нас есть), металлургии (у нас есть), HR (у нас есть) видно, что меняется не одна отрасль, а все. То, что произойдет реальная автоматизация работы квалифицированных специалистов, изменит рынок труда. Ну и так далее.

Date: 2015-10-31 03:04 pm (UTC)
From: [identity profile] enox.livejournal.com
увеличение производительности труда, изменение инструментов, увеличение в добавленной стоимости доли IP - кто ж тут спорит.

но говорить о сингулярности - это как в эпоху паровозов и конок говорит что бензиновые двигатели добавят "сингулярность". электропоезда добавят сингулярность. беспроводная связь породят сингулярность.

да, рынки поменяются, правила игры поменяются, структура производтства - потребления поменяется, экономика поменяется. раньше таксисты брали на себя маржу, теперь их интеграторы. продолжится укрупнение бизнеса, в структуре продукта появятся составляющие которых раньше не было - все эти умные прогностические модели, RTB всех мастей и пр.

но из чего следует, что изменения выйдут из под контроля, что случится приписываемая технологической сингулярности "невозможность предсказать" изменения?

С точки зрения 30-летней давности выходит мы в сингулярности живем? глобальная связь, глобализация рынков и пр.? Тоже мне сингулярность :-)

вот если наноботов изобретут, тогда да.

Date: 2015-10-31 03:06 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Не, я не настаиваю.

Только вот беспилотные грузовики, например, прямо таки изменят США. На эту тему есть внятный прогноз.

А так да, по сравнению с 1985 мы живем в сингулярности. Достаточно посмотреть на то, что происходит с доступностью данных, механизмами принятия решений, скоростью изменений.

Невозможность предсказания впрямую следует из скорости изменений. И скорость эта все растет и растет.

Date: 2015-10-31 12:58 am (UTC)
From: [identity profile] redreptiloid.livejournal.com

Такое же чуство насчет сингулярности.
тут еще более существенный момент - скорость адаптации тезнрдогий социумом. например для электричества был век, для мобильников - на порядок меньше. а следующий виток уже даже от юзеров не зависит, купленная газонокосилка взамен старой умеет бегать за пивом и ставить меддиагнозы.
хз как так получается но действует это даже на животных. в прошлом веке кот не смог адаптироватся к пылесосу. в этом - адаптировался к роботпылесосу сразу. :)

Date: 2015-10-31 01:00 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Все в целом напоминает анекдот про мартышку и авиабомбу ("ничего, у меня еще одна есть"). Но страшно интересно.

Date: 2015-10-31 01:52 am (UTC)
From: [identity profile] redreptiloid.livejournal.com

Никакой бомбы не будет. Но будет такая борьба за мир что камня на камне не останется
просто очередной виток эволюции, борьба брони и снаряда. и довольно предсказуемый процесс. но все равно жутко интересно.


повторюсь про роботпылесос, смотрю как он незаметно прописался и насколько индиффирентно к нем подрастающее поколееие. представляю его в 80х дома, какой фурор бы был. и какие бы эмоции он тогда бы у всех вызывал. а щас бегает  жужжит и всем пофиг. примерно тод самое с новым витком и будет.
а румба же технически посложнее лунохода в 70х..

Edited Date: 2015-10-31 02:00 am (UTC)

Date: 2015-10-31 07:00 am (UTC)
From: [identity profile] ish-west.livejournal.com
Вот в этом контексте оч любопытно, а не окажется ли скоро «госплан» эффективнее рынка? Понятно, что он будет не обязательно гос-, вероятно в узком смысле не -план, и будет, как можно предположить, не то чтобы вместо, а поверх рынка — короче типичный случай «мне Мойше напел» :-) Но есть таки подозрение, что набор причин, по которым рыночная экономика эффективнее плановой, скажем так, может претерпеть изменения.

Date: 2015-10-31 08:00 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Хороший вопрос. Насколько я понимаю идею Госплана, это идея целенаправленного развития. А все, что я сейчас вижу в практике, это адаптивные механизмы, имеющие весьма общие цели и опирающиеся на естественные свойства среды.

Если уж думать в эту сторону, то Госплан 2.0 должен начаться с социальных технологий - формирования потребностей. А все остальное потянется за этим самотеком.

Date: 2015-10-31 08:41 am (UTC)
From: [identity profile] ish-west.livejournal.com
Оч пост-модернистский госплан 2 у тебя выходит, даже не побоюсь этого слова: гибридный :-)

Если серьезно (типа) то я скорее об оч большом «узком» AI, который имеет на входе примерно все данные собираемые (качественным) государством и крупными бизнесами: налоги, загрузка дорог, соц.дем, CCTV, преступность, платежи, фото со спутников, истории болезней, звонки в call-центры – вот буквально все. А на выходе – «рекомендации» по ведению бизнеса всем зарегистрированным организациям, и частным компаниям, и гос-органам. Может быть правильнее такую штуку называть «мета-узкий» AI, чтоб подчеркнуть отличие от сильного.

Это конечно не госплан, в полном смысле, но вполне себе единый центр принятия экономических решений, предположительно согласованных между собой решений. Другое дело, что понять, как именно они согласуются – никаких шансов. Впрочем, это imho делает «кибергосплан» только более похожим на советский госплан :-)))

Короче, вот такая машинка технически не выглядит imho уж совсем прям фантастикой. Более того, я могу себе представить не совсем безумные сценарии ее воплощения (оч разного) в Китае, в Сев.Америке и, с большим скрипом, в ЕС. В смысле представить могу со скрипом :-)

Date: 2015-10-31 09:40 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Пока компании получают деньги от потребителей, это не взлетит. Потому что рекомендации такого "Госплана" не будут давать конкурентных преимуществ. Соответственно для получения таких преимуществ все участники будут расшатывать схему :).

Как только ты начинаешь платить за соблюдение собственных рекомендаций (или штрафовать за их несоблюдение), ты приходишь к "Госплану 1.0", который неэффективен, поскольку слишком централизован.

В это все поиграли в разной степени и теперь, насколько я вижу, "Госплан 2.0" реализуется на уровне институтов, налогов и стимулирования потребностей. Хороший пример такого стимулирования это все "зеленое".

Date: 2015-10-31 09:46 am (UTC)
From: [identity profile] ish-west.livejournal.com
Ну т.е. не веришь, что AI «умнее» среднего ларечника / papaer-pusher'а :-)

Date: 2015-10-31 09:49 am (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Нет, почему же? Просто средний ларечник будет использовать другой AI, сфокусированный на локальном интересе владельца/заказчика, а не на глобальном счастье Госплана :)

Date: 2015-10-31 03:06 pm (UTC)
From: [identity profile] ish-west.livejournal.com
Вариант снизу вверх, условно «американский»:
1. у оперирующего глобальными данными AI выше качество прогноза, отсюда тенденция к «глобализации» (рыночный процесс)
2. когда возникнут глобальные (два, например, как пепси- и кока-кола), оч вероятно появление регулирования (демократический процесс)
3. profit :-)

Вариант сверху-вниз, условно «китайский»:
1. Очередную пятилетку пргнозирует AI по данным, которые весь крупняк обязан транслировать на серверы министерств и ведомств
2. Бизнесы получают dashboard с релевантными для них прогнозами и рекомендациями, причем чем выше social score бизнеса, тем выше частота процессоров качество тебе отгружают
3. и снова профит! :-)

Это я к тому, что начав пользоваться AI для принятия бизнес-решений можно оказаться затянутым в воронку госплана 2.0, даже если не иметь этого ввиду. Точнее такая вот гипотеза у меня возникла :-)

Date: 2015-10-31 03:13 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
1. Да, в случае, если цели "Госплана" и локального бизнеса совпадают
2. Снова вопрос про то, кто и для чего оптимизирует модель
3. Все от целей :)

1. Это и не в Китае так
2. Цели? По какому показателю оптимизируется модель?
3. И снова все от целей

На эту тему можно пофантазировать, но пока что я не вижу именно что воронки. Скорее уж государство затянет в серию корпоративных воронок. Но это все вилами по воде.

Date: 2015-10-31 03:40 pm (UTC)
From: [identity profile] ish-west.livejournal.com
1.1 Изначально он не госплан, а поставщик услуг / сервис для улучшения бизнес-решений
1.2 На этом этапе у него появляются «социальные» ограничения, т.е. цели, но и с ограничениями с ним все равно выгоднее чем без
1.3 Все (кроме survivalists) им пользуются потому что а как же иначе и он по факту становится госпланом 2.0
2.1 Китай условный, да, но именно КНР imho удачный пример
2.2 Гармония между целями общества и семьи бизнеса, но по любому, с ним бизнесу выгоднее чем без
2.3 Все (кроме отщепенцев) им пользуются потому что а как же иначе и госплан постепенно становится становится госпланом 2.0

Про вилы и воду – ну а как без них! :-) Но мне эта гипотеза кажется достойной того, чтобы ее думать.

Date: 2015-10-31 04:38 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Не может быть сервис для улучшения бизнеса всех конкурирующих компаний одновременно :)

Ну и далее все зависает :)

Date: 2015-10-31 05:56 pm (UTC)
From: [identity profile] ish-west.livejournal.com
Зато может:
1. человек бояться отказаться от услуги, пользоваться которой стало социальной нормой
2. общество и / или государство может отгородиться запретительными ценами / пошлинами от несистемных акторов
3. «госплан» может давать свои прогнозы / рекомендации ожидая, что данный клиент (или уже «пассажир»?) сделает все по-своему … и нет, способа понять, имел ли он это ввиду

И вооще :-) я говорю «AI может таки сделать рынок не самой эффективной системой организации хозяйства», на что ты возражаешь «нет, это таки противоречит законам рынка» :-)))

Date: 2015-10-31 08:38 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Ты мне путь реализации покажи :). Потому что если ты хочешь впрямую управлять экономикой директивно, так это уже было. И получилось так себе. На новом технологическом уровне вполне может получиться лучше, но не факт.

А пути постепенного перехода совсем не видно, по крайней мере мне.

Date: 2015-10-31 11:53 pm (UTC)
From: [identity profile] ish-west.livejournal.com
Я? Управлять? Экономикой? Вот те крест, начальник, мамой клянусь, не я это!!!1111
:-)))

Возможно госплан просто неудачное слово, потому что сразу ассоциируется с людьми, заставлявшими других людей делать противоестественные вещи, чтобы подогнать реальность под свою картину мира.

А госплан 2 как раз про отказ от попыток поуправлять – машина лучше знает, что кому делать, не стоит даже пытаться.

Если под путем реализации ты понимаешь сценарий возникновения Г2 из рыночной экономики, то мне казалось я его вчерне описал. Могу попробовать подробнее, если правда интересно, но не тут и не сейчас, ok?

Собственно более общая моя мысль, что развитие AI может может привести к устареванию в т.ч. и тех вещей, которые сегодня кажутся незыблимыми, например, может устареть даже представление о рынке, как о самом эффективном способе организации хозяйства.

Date: 2015-11-01 09:21 pm (UTC)
From: [identity profile] enox.livejournal.com
Кстати, на госплан европа с америкой в 70х о-очень серъезно смотрела, по словам американских финансистов.

Было что-то типа моды - "раз русские такие большие и страшные, а у них госпланирование, может в этом что-то есть"

Перестали, когда Союз рухнул, начал по кредитам ездить и раскрыл подробности реализации плановой экономики. И вроде как изрядно поуменьшили госрегулирование, которое навводили после войны.

Date: 2015-11-05 06:22 pm (UTC)
From: [identity profile] maxwolf.livejournal.com
В незамкнутой системе игры с положительной суммой возможны даже термодинамически :). В современной рыночной экономике конкуренция, в основном, происходит между материальными продуктами. Т.е. если из продуктов А и Б потребитель, в итоге, выбрал А, то продукт Б (затраченные на него труд и сырьё) приходится выбрасывать. Если "Госплан 2.0" будет давать правильные прогнозы на потребности в продуктах до того момента, как на их производство затрачены ресурсы, это позволит перевести конкуренцию из "мира вещей" в "мир идей", и сильно снизить себестоимость. Преимущество работы в такой системе немедленно затянет в неё всех.

Date: 2015-11-05 07:48 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Вы не про то.

Вот "Госплан 2.0" планирует производство и продажу утюгов, оптимизируясь по объему ВВП, например.

Фирма А 10 штук
Фирма Б 10 штук
Фирма В 10 штук
цена у всех одна - 100 рублей

Фирмы А и Б принимают прогноза, а фирма В строит собственную, которая оптимизирована на объем продаж

При этом спрос в сумме и равновесную цену Госплан предсказал правильно.

Фирма В продает 12 утюгов по цене 99 рублей и выигрывает, оставляя фирмы А и Б с непроданными утюгами.

Будут ли далее фирмы А и Б следовать модели "Госплана"?

Date: 2015-11-06 01:02 pm (UTC)
From: [identity profile] maxwolf.livejournal.com
Это именно про то :) У меня, увы, не хватает знаний и времени облечь свои догадки в более строгую форму, без чего без чего дискуссия может вылиться в длительный обмен единичными примерами, не доказывающими общего. Если в примере с утюгами себестоимость производства 99+ рублей, то фирма В с таким подходом ничего не выйграет, а накажет и себя, и коллег. Т.е. у неё будет стимул (экономический) всё-таки следовать указаниям "госплана". А коллеги по цеху могут договориться, да и запретить такие кульбиты "во имя всеобщего блага" (опять же, не тоталитаризма ради, а исходя из чисто прагматических/экономических причин и критериев).

Date: 2015-11-06 01:06 pm (UTC)
From: [identity profile] http://users.livejournal.com/alh__/
Вы не понимаете. В данном случае больше всех проиграют те, кто остался с непроданными утюгами. У них уже понесены затраты на сырье, на складе лежат непроданные утюги.

Фирма В выиграет - у нее сильно вырастет объем, немного упадет маржа и все.

Если у вас в ходе внедрения надо "все запретить", это будет "Госплан 1.0", который уже был и все слил.

Profile

ahajtin: (Default)
ahajtin

July 2020

S M T W T F S
   1234
567891011
12131415161718
19202122232425
2627282930 31 

Most Popular Tags

Style Credit

Expand Cut Tags

No cut tags
Page generated Mar. 13th, 2026 09:42 pm
Powered by Dreamwidth Studios