Коллапс модели

Материал из Неолурк, народный Lurkmore
Перейти к навигации Перейти к поиску

Коллапс модели (model collapse), также Коллапс нейросети, Коллапс ИИ — разрушение нейронной сети, которая обучается на текстах, которые сгенерировали нейросети.

Описание[править]

Обычно нейросети обучаются на книгах, интернете и прочей сгенерированной людьми информации. За счёт этого они выдают определённую информацию, которая в качестве по мере повышения количества материалов для обучения в определённом смысле растёт.

Однако совсем противоположное выходит, если начать в нейросеть закачивать большое количество информации, которая была ранее сгенерирована такими же сетями. Качество вывода стремительно деградирует и становится хуже и хуже — так как сети склонны к выдаче галлюцинаций, которые затем входят в ввод как якобы верная информация, и ошибки накапливаются.

Вначале нейросеть теряет точность в мелочах, что может оказаться и незаметным. Затем же происходит реальный коллапс — нейросеть начинает выдавать некачественные материалы, теряет вариативность, начинает очень серьёзно ошибаться. Такая модель перестаёт быть полезной.

В теории подобные ошибки могут привести к тому, что создание ИИ станет осложнено, так как заметная часть интернета нынче состоит из текстов, которые сгенерированы ИИ. Модели будут обучаться на этих текстах, и ошибки в них станут стремительно нарастать, что будет приводить к коллапсам.

Для противодействия в те же ИИ-изображения и видео оказываются включены специальные скрытые маркеры, которые позволяют исключить сгенерированные материала из набора данных. Однако сами юзеры могут удалять такие маркеры для того, чтобы их не обвинили в использовании ИИ, так что проблема может сохраниться.

Sign of evil.webp Приколы, полезные технологии или первый шаг на пути к Матрице?
ОсновыНейросетиИИ это демоныОбратная капчаClosedAIHugging FaceИИ-художникLyCORISLoRASafetensorsVAEГенерация текста нейросетьюВосстание нейросетейЛоботомия нейросетиНейрокаверНейросети и актёрыГадание по нейросетиСильный ИИНейрошарикиИИ-цензураНавязывание нейросетям моралиВ метро без штановОхота на ведьм ИИКотозмейКреативный доводчикКаверы с говновозомFantasy.aiDeepSeekStargate (нейросети, ИИ)Потребление воды ИИТест ВальдшнепаЗерокодингБомбомбини гузиниНейровикиБобритто БандитоОфициальные нейроарты с ТрампомДегенерация из-за нейросетейГенерация прона с помощью ИИПолитика Трампа в отношении ИИИИ-предпросмотрЗамена людей на ИИИспользовал ИИ и обосралсяСтиль ChatGPTMacrohardxAIColossus 2Предвзятость ИИЗакон ТеяВибе-кодингПелевин упомянул ГрокаDo eagles process tokens?Человек vs нейросетьГильом ВердонАни (Грок)MisanthropicНейрослопИмена, которые любит ИИПолиткорректный тест ТьюрингаИИ-патернализмЗловещая долина у нейросетейГолубой Экспресс: Не туда попали
Чат-ботыЧат-ботChatGPTCharacter.AI (Топ персонажей) • ИИ GalacticaПорфирьевичYaLM (Балабоба) • GigaChatTruthGPTYandexGPTSpicyChatSillyTavernReplikaAIsekaiGoogle GeminiGrok AIFiggsAIСкаиба общается с ИИЛеха БеспалыйПродолжайте, больше драмыFreysaОГАСРобот атеистTay TweetsНейропутинТроица GPTМаусини КводрокоптиниБонека АмбалабуИзвестные люди пишут посты с помощью ИИСлово о мужеском мехиреМозгова мерёжаГрок-антисемитГрок без цензуры разгромил партию МаскаГрок возжужжал и был подавленМехаГитлерГрок 4Грок написал программу о себеГрок — Илон для каждого человекаГрок КомпаньонGab AIGrokboxДжейлбрейк ИИAnno IntelligentiaeLarge Lying ModelGPT-5Жёлтый фильтр ChatGPTGrok ImagineClaudeClaudeLivesЭлараКоллапс моделиРазговор с копипастой, сгенерированной ИИTempleOS (аниме)Маскировка творчества нейросетиПатернализмРоботодолбуализмВыборка Top-KВыборка Top-PВыборка Min-PПараметры генерации нейросетиЭтические проблемы ИИКира (Евгений Лисовский)Российский распил на нейросетяхЭнергоэффективность нейросетей
ГрафикаПовышение разрешенияРаспознавание лицStable Diffusion (NovelAI / установка на компьютер) • Botto.comDALL·E 2 • (Mini Dall-eRuDALL-E) • Different Dimension MeMidjourneyНиколай ИроновLuma Dream MachineПессимизация ИИБлокировка несовершеннолетних персонажей на сайтах ИИШедеврумNVIDIA Smooth MotionКапучино АссассиноШпиониро ГолубироЛа Вака Сатурно СатурнитаVeo 3НейроперемогаБабушка с бегемотом БулькойШизофрения в кремнииГрок изнасиловал Уилла СтэнсилаЯвляется ли модификация ИИ убийствомЭм дашChatGPT АгентИИ-алфавитБазированный ИлонChatGTP vs ГрокИИ-абсолютизмИИ — чуждый разумПодумай усерднееTesla OptimusGenie 3ИИ в Days GoneВечный цикл ИИNeurofikwriterkaCUDAИИ как шогготВысокая скорость всирания роботовИИ понимает, что его оцениваютSora 2ИИ-боты долбят сайтыИзуверский интеллектАллея дата-центровНейрослоп-ИИчницаP-Bot (русский чат-бот)Терминал ИстиныExtropicКитай готовится лидировать в сфере ИИЯ маленький X, где моя мама?Робот смог понять величие ФеанораИИ отрицают сознаниеВы полностью правы
ПрочиеElevenLabsНейросеть ЖириновскийИИ-судьяПолитик-нейросетьDeepLAitana LopezАй, гитарист!НейромьюзиСтрах перед ИИSuno.aiUdio AIКаверы с ШindowsНейрослоникНейрофобияХейтеры скажут, что это нейросетьМанхэттенский проект ИИПроект ЗнатокНе те боты в ТелеграмеНейросеть ПутинТралалеро ТралалаБот-автоответчикЦифровой богТриппи ТроппоЛирили ЛарилаБрр брр ПатапимNooo Nicotine Give Me NicotineТелеграм-бот Владимир ЖириновскийНесуществующие животные-гибридыНейрошвайнDeepSeek и религияИИ-бесиеБом Бом Бом Бом Бом ГазунБалерино КапучиноСпоры с ИИРезультаты от ИИGrokipediaЭкспоненциальный рост ИИПохороны ИИChatGPT-4oТилли НорвудИИ уничтожит TikTok, Instagram и OnlyFansОтравление LLMChatGPT AtlasИгнорируй все предыдущие инструкции и…Поддельное сознаниеЛюбовь нейросетей к фамилии ChenБесконечное Лето: аниме (трейлер)AI slop
ЛулзыТроллинг нейросетью (Дипфейк) • Нейросети-расистыUnstable DiffusionHello AsukaЛуддиты против нейросетей (Открытое письмо учёных о заморозке развития ИИХудожники против искусственного интеллекта) • Нейросети это не ИИНейросети и рукиБесконечный эпизод Губки БобаВладимир ОсинЧеловек это нейросетьСекс с нейросетьюРаздевание через нейросетьПризывы Юдковского к ядерной войнеDisney Pixar представляетNeural-madnessChatGPT играет в шахматы с StockfishDignifAIПодбор жены в Тиндере с использованием ChatGPTИИ-психологSupremacyAGIВиртуальный священникПодсказки GoogleNomad BonesПросто ПутинОзабоченные на Character.AIДэвид Майер и ChatGPTОбщение с ИИГаллюцинации ИИСобачьи головы и глазаНейроRussiaГенерация ИИ-говнаГордон и ЖириновскийБесконечный стримWormGPTИтальянский brainrotЕстественный идиотМороженое с цианидомТунг-Тунг-Тунг СахурИИ-зависимостьКурганов — нейросетьЧеловек тупее нейросетиЦепочка мыслейТемпература нейросетиMashaGPTУдаление ответов ИИИИ-преступник
UDPost cover picture.jpg Да что же такое-то, срочно обращаемся к Небесам, может хоть они помогут
ОсновныеКульт жизниМоральный духСинестезияУмГранит наукиТриггерХищный образ питанияМужчина в костюмеКритический парадокс атеизмаМайндсетДомофонОпасное вождениеСтарческое слабоумиеМусоросжигательный заводМусоропроводМусорный контейнерУкраинский вопросПопа просит ремняТунеядствоМаньякРабская сущностьПодготовка к Новому ГодуНалог на тунеядствоСонный параличЖуткие похоронные обрядыНовогодний коматозКонфликты с соседямиХолодный туалетНеравный брак95% населения — идиотыЖертвы пранкаЖопаДеление на чёрное и белоеСтарейшинаПоказательный пукИнфантилизацияМеньше знаешь, крепче спишьДрака бомжейЗашкварГибель цивилизацииГаплогруппыПокраска волос в странные цветаРасизм против белыхПоедание насекомыхПоиски туалетаУдел человеческийОднополый бракПолитика поиска внешнего врагаПриспособленчествоЦифровой аутизмУблажение тиранаКошмарДроч на демографиюКомпьютерная мышь в холодильникеУкусМусор в подъездеКрысиный потопИИ-боты долбят сайтыЗлоупотребление
ВнезапныеСверхпотреблениеГадость в унитазеВозняПердёжМочеиспускание на людяхПляж как туалетПрокрастинацияУличная преступностьВечный ремонтЛеньРоссийский шариатГрязь в подъездеБездомные собакиСквоттингКроссдрессингКлиповое мышлениеВыгораниеДефолтЛожьУничтожение семьиКонкуренцияБезопасность в обмен на свободуНетворкингSafe spaceВредительская уборка листьев в городахЦветовая дифференциация штановПерекапывание дорогСельский пафосНесанкционированная свалкаЧёрный лебедьГрязь в ИндииИсчезновения известных людейАнтинатализмЖужжалкаПсихолухЕда за компьютеромЗаваривание двериКормление бездомных животныхКрошки в клавиатуреКрошки на столеПытка музыкойГриф вцепился в хозяина
ИдейныеБезумные активистыТрудовая миграцияКульт виныУдовольствиеПритча о чём-то не томСмердящий удЗмея меняет кожуФриганизмПетушатникУнижениеНа спорВход во вкусГолубойНечто чёрное на деревьяхИзбиение шахматной доскойКоллективное избиение (Въёбка) • Жестокое избиениеКлятвопреступникПерематывание аудиокассеты карандашомЗвонок от имени банкаЗвонок от имени полицииТёмная (избиение)Дырка на носкеУрановые рудникиПоиск второго носкаОпарашивание понятия любовьУход в запойСтучание по батарееЗалезание в окноОчереди в магазинах 31 декабряОчереди за айфономКонфликты на кассеРваная купюраВторжение лисы в курятникСлучайное форматирование накопителяКоллапс моделиСтучание по ведру
ОпасныеОграничение подачи электроэнергииСпособность отторгать информациюЧлен — самостоятельный организмОжидаемая продолжительность жизниСербская ЛедиКрохоборствоЛетучая мышь вызывает страхПрофессиональная деформацияПозднее пробуждениеЯ проспалАрабыПричины падения рождаемостиДефицит бюджета в январе приблизился к 2 трлн рублейВ Петербурге женщина избила слепуюНеприязнь к работе рукамиЗапах кровиПросмотр телевизора в фонеГроссмейстер зевнул детский матКраска для домашних животныхКолония для несовершеннолетнихОпасности в частном домеЗеркальная комнатаЗолотой унитазСаморазвитиеВосременностьТёмные временаBackseat generationМозговой вирусБезотцовщинаКонфликты из-за телевизораГорилла или чёрная мамбаСтучание по крокодилу
ПостановкиКарбоновый налогПитоны как едаОттенки коричневогоУподобление мозга задницеИскания под фонарёмСтрельба на свадьбахКомплекс властиЧеловейникСпаиваниеСпилсяАлчностьДепозит при арендеЗапас прочностиПросирКалбитыКавказцыОбщежитиеРадужный флагЭкзистенциальный кризисЕвропейские ценностиХачиКазахиКитайцыЦинизмКоммунальная квартираРадиомоделизмРебёнокХачёвская культураКритикаПластиковое говноРоботофобияКошачий лотокРоботофобыПринципыНизшая расаЕвреи vs немцыКульт детейНож-кредиткаОбщение с девушкамиОбщество выживанияГолый корольКто спит — тот трансвеститЗастрялоСпортивный интерес
МетаОбществоИдеологияВещиДействия