Обучи ИИ в WC3

Здравствуй, мы сохраняем его в файл, чтобы потом иметь возможность пользоваться сразу готовым или продолжить обучение

Спасибо! Если не очень понятно что это и зачем, можете посмотреть видео. Архитектура и принцип работы почти такой же

Это back propagation или генетический алгоритм? Больше бы конкретики

ГА, back propagation обучает классификаторы, а тут экземпляр ии это цепочка команд

Так ты сколько будешь обучать на такой скорости их? Там надо десятки тыщ итераций хотябы

Нужен speed multiplier

Да не сцы, в прошлый раз нейронка максимум за пару часов обучалась. Лучше скажи, почему ресурс твой лайк дропнул(

Vlod:

В тему: интересный канал www.youtube.com/c/PrimerLearning/videos
Они тренируют именно генетические алгоритмы с крутой визуализацией

KodG3_kill_and_life.w3x ( xgm.guru/files/100/252416/comments/457600/Cod.txt )

Не особо понял что к чему, но после часа работы вместо бессмысленного мордобоя все начали заниматься бессмысленным бегом по кругу( при чем одни по часовой стрелке, а другие против часовой).

dondonchakka, межпопуляционный отбор имеет более широкий охват решений

IIIНекромантIII, все верно. Для сохранения жизни и в условиях бесконечного спавна зомби избегание боя является эффективной стратегией. Учитывая, что зомби достаточно мало и их скорость низка

ScorpioT1000, да, визуализация крутая конечно

Так я запустил, пока что ничего не понимаю, сижу читаю и сразу вопрос... помните, в нативном редакторе ИИ (который для Мили) можно было увеличивать скорость, если ли какие -то варианты изпользовать эту скорость для таких вот ИИ? и для тестов вообще?
Замахи выглядят ужасно, когда стоят друг на против друга и походу приказ атаки очень часто отдаётся

Что значит сохранить понравившийся ИИ?
на карте бегают безымянные крестьяне, только крестьяни игрока, при клике показано рандомное число, но врядли оно как то привязано к ИИ
Как я могу узнать что мне кто-то понравился, если они живут по 30 сек?

это от ошибка или номер ИИ?

На карте kill and life в начале они просто ходили кругом и использовали невидимость по кд, пытаясь выжить, потом вдруг это им надоело они начали использовать стан способность только по зомбакам, но потом начали её использовать и по рабочим вроде тоже по кд, а может когда у них меньше здоровья. Итог по золоту 250.

На карте kill они используют стан только по зомби, как я понял, а между собой только на кулаках. Невидимость почему-то перестали использовать, но это наверно ненадолго. Итог по золоту 500.

Всё же на карте kill and life они более развились под конец исследования. Обе карты запускал в одно время.

KodG3_kill_and_life - полтора часа

Но поведении ИИ не менялось примерно уже с 10 минуты, они бегали по широкому кругу, дергались при атаке, давали импалу по кд

Vlod:

Ну, если это всё на что этот ии способен, то у меня плохие новости для тебя... Vlod, они бессмысленны и бесполезны, хотя может ты просто хочешь сделать что-то более грандиозное, но на данном этапе наблюдать за ботами все равно что смотреть на инфузорий в микроскоп - большинству будет скучно.

Вот если б это была арена где ИИ-шки дрались за жизнь или какая-нибудь командная соревновательная игра, чтоб ИИ учился драться в команде не прибегая ни к какой коммуникации, тогда да, было бы в разы интересней. А так я смотрю за тем как болванчики учатся бегать по кругу. И каждый раз они будут приходить к этому решению, что просто лишает смысла весь этот ИИ, ведь результат будет одинаков, но вот если бы они каждый раз по новому адаптировались или стратегии странные придумывали, но нет они просто будут бегать по кругу...
А хотелось бы чего-то большего.

IIIНекромантIII, для того чтобы тестировать ботов на арене ее нужно сначала написать)
По поводу оригинальности решения, ну кто ж знал, что беспрерывно бегать - наилучший вариант увернуться от всех атак стандартного ии, а бегать по кругу это всего 1 команда, куда проще. В таком случае предлагаю придумать усложнение задачи ботам

Bergi_Bear,
Да, бот выдает решение каждые 0.33 и вар сбивает приказ, даже если цель одна и та же. Увеличу скорость атаки, чтобы удар проходил
Сохранить понравившегося можно, если за эти 30 секунд написать s save)
Число при клике это JobEnd[] - оценка юнита за предыдущий раунд. Если его пересоздали, то она 0

Vlod, если честно, то вот к данному примеру никакого усложнения не придумывается, но есть другая мысль - поменять задачу.

Сейчас все боты пытаются выжить, но а если им поменять задачу? Хотя бы для начала, пускай их задача будет научиться мочить врагов или удерживать флаг....

Точно удержание флага, пускай пытаются удержать предмет как можно дольше у себя или пытаются отнять у другого. Пускай будут добавлены минутные раунды по завершению которого флаг будет генерироваться в одном из 3( или 4) случайных мест .

Усё.На этом наше творческое,того этого, окончено.

bifurcated, спасибо за развернутое описание. Они могут использовать или не использовать что то, и это зависит от начального рандома. Как повлиял тот или иной фактор иногда вычленить очень сложно. Как я заметил, если при определении родителя учитывать остаточное количество жизни (kill and life), то особи в популяции получаются в среднем менее агрессивными к своим сородичам

Динамичное кольцо

Динамическое кольцо: Жёлтый работник придерживается тактики самоубийства (выходит за круг), остальные движутся в центр используя способности (этот интеллект не может понять, что атака из-под невидимости наносит больше урона и что можно использовать шипы примерно там, где работник исчез? Да и обычно под невидимостью они стоят на месте, иногда идут чуть ближе к дереву). Зомби не выживают. Итог по золоту 1100.

Кстати по поводу атаки из невидимости, если мне не изменяет память ии не способен совершить атаку из инвиза

Образовалась одна интересная особь, чьё поведение заметно отличается и выглядит умнее остальных) Все сначала сразу бегут в центр, сбиваются в одну кучу с зомбаками, и начинают применять шипы, пока не перебьют всех зомби, задевая друг друга, после чего продолжают болтаться возле дерева, уходя в инвиз, но друг к другу агрессии не проявляют. А этот предпочитает остаться в стороне, а когда в центре перебьют всех зомби, подбегает и осторожно пытается добить выживших, ударил, отбежал, ударил, отбежал.

IIIНекромантIII, спасибо! Про усложнение, удерживать флаг от кого, от зомби?) Просто бегать и стоять возле рандомных флагов легкая задача. Отмечу, что хоть мы и видим много юнитов, на самом деле мы обучаем одного. Если требуется два типа, то нужно создать две группы, одной сказать защищать, а другой нападать, тогда получатся кери и хиллеры, к примеру. С другой стороны мы обучаем группу, поэтому можно не разделять, кто то случайно станет хиллером, а кто то кери, а мы будем брать детей от двух случайных выживших, но в таком случае желательны более жесткие условия выживания и больший размер популяции.

Хм... у меня частые забеги за кольцо, при том бывает достаточно забавная ситуация когда один бежит за другим а тот бежит за кольцо.

bifurcated, придерживается тактики самоубийства - звучит забавно) 1) Урон от инвиза я убрал см. РО 2) Все команды no target - указание в виде области или точки. По этому он физически не может никого ударить из инвиза, ему не дает вакрафт. Да таргет система в управлении стара как мы, по этому хотелось уйти от нее. Но спасибо за наводку, кажется я понял откуда дерганья у стандартной атаки. Сейчас ии как может узнать что он в инвизе? Нажать на инвиз и получить в ответ false. Не слишком удобный способ) Логично добавить ему флаг проверки на бафф, пока систему команд не трогал для совместимости Cod.txt между картами. Сам список команд добавил в описание. Спасибо!

Bergi_Bear, из инвиза да, только impale пустить.
Возможно, дерганья были из за отдачи кучи команд атаки в точку в один тик. Попробую сменить это на цель-объект и проверить.

function action_who_attack takes integer ind, unit tu returns boolean
  return IssuePointOrderById(Men[ind], 851983, GetUnitX(tu), GetUnitY(tu))
endfunction

Yagosha, спасибо! Согласен, поведение уже интереснее и подойдет для фарма стандартных мобов. А в плане логики мне как то встречалось, что ии сравнивает расстояние от центра зоны с жизнью случайного зомби. Мммм!

Esea, бывает и паровозик из трех) Помните, что каждый кон один из слабых заменяется на абсолютно рандомного. А те, что имеют ауру меткости - либо дети двух случайных лучших, либо тоже два рандома

Первый мой сейв (статическое кольцо убийства и жизни). Даже не знаю что сказать. Заметил 2 интересных персонажей: коричневый который то бегал на небольшое расстояние туда сюда рядом с деревом то вообще убегал за кольцо, и красный который один раз наматывал круги рядом с кольцом, но умер забежав за него (видимо его беговой круг расширялся). Ну и еще не могу смотреть на бесполезные инвизы и неравноценные размены ударами.