Этот спецпроект — точка входа в NLP для тех, кто только начинает: студентов и выпускников филологического факультета и переводческих программ; людей с гуманитарным или смешанным образованием и опытом. Мы разберемся, как устроены языковые технологии, где в них место людям, которые любят и понимают язык, и какие шаги можно сделать уже сейчас.
Гуманитарное образование полезно в NLP, однако путь в языковые технологии у каждого складывается по-разному и включает освоение новых технических инструментов и теоретических основ. Проект показывает реальные траектории входа в область: какие задачи доступны на старте, какие компетенции уже могут пригодиться и что потребуется освоить для дальнейшего развития.
Обработка естественного языка, или natural language processing (NLP), — область на стыке компьютерной лингвистики и машинного обучения, которая изучает методы работы с естественным языком: от классификации текстов до генерации речи. На этих методах основаны машинный перевод, поиск, голосовые помощники, чат-боты и современные большие языковые модели.
Эти модели стали частью повседневной жизни: они помогают искать и обобщать информацию, переводить и редактировать тексты, готовить документы, писать код и т. д. Именно благодаря им интерес к NLP сильно возрос.
Особое мнение главного редактора «Системного Блока»:
Методы решения задач обработки языка компьютером в последние десятилетия эволюционировали в одном общем направлении. Из них уходила лингвистическая теория и подходы, основанные на попытках явно закодировать «правила» языка. Взамен приходили более масштабируемые и универсальные подходы, основанные на машинном обучении с опорой на большое количество языковых данных (тексты, диалоги, аудиозаписи и т. д.). Таким образом, в NLP оставалось все меньше запроса на узкую экспертизу, связанную с языком и языками, и все больше — на общие навыки Computer Science, Machine Learning и Data Science. Люди с математическим, естественно-научным или техническим образованием находили и находят себя в NLP, причем сравнительно легко переходят в него из областей, которые, казалось бы, с языком не связаны, например, компьютерное зрение.
С развитием больших нейросетевых моделей этот тренд не ослаб и даже вышел на новый уровень: примерно с 2023 появляется все больше мультимодальных нейросетевых моделей, которые могут обрабатывать и тексты, и картинки, и видео, не имея внутри каких-то специально выраженных отдельных компонентов для разных типов данных. Изображение там переводится в визуальные токены и обрабатывается той же нейросетевой моделью внутри. Этот тренд показывает, что выделение именно NLP в общем потоке инженерных задач анализа данных — не какая-то незыблемая вещь, и в будущем существование NLP как отдельного направления не гарантировано. Это важно помнить и осознавать, планируя карьеру.
NLP — одна из самых быстро меняющихся областей, в рамках которой одновременно развиваются AI-агенты, мультимодальные системы и технологии для малоресурсных языков — а вместе с ними появляются новые задачи и профессиональные роли.
По данным hh.ru, в январе — феврале 2026 года работодатели разместили 10 777 вакансий с требованием владения инструментами ИИ — на 15% больше, чем за тот же период годом ранее. Среди востребованных навыков выделяются умение составлять и дорабатывать промпты, задавать модели контекст и критически оценивать ее ответы [1].
Рынок нуждается не только в разработчиках, но и в специалистах, работающих с текстом и качеством ответов. По данным «Авито Работы», за последние три года по числу вакансий среди профессий в сфере ИИ лидировали AI-тренеры и AI-редакторы [2]. Эти специалисты создают и вычитывают тексты, готовят корректные примеры для датасетов и проверяют качество материалов до того, как они попадут в обучение модели.
Языковые модели меняют не только способы работы с текстом, но и всю профессиональную область. Чтобы LLM была полезной, недостаточно обучить ее на большом массиве данных: нужно подготовить корпус текстов, учесть контекст и стиль, разработать методологию оценки ответов модели, найти ошибки и их учесть.
Лингвист, филолог и переводчик умеют работать со смыслом и контекстом, но не всегда понимают, как применить эти знания в AI и какие технические навыки нужны на старте. Поэтому может казаться, что попасть в сферу можно только с техническим бэкграундом. На практике в NLP есть различные задачи: разметка и подготовка данных, оценка качества моделей, разработка тестов и работа с малоресурсными языками.
В области языковых технологий есть несколько профессиональных траекторий для гуманитариев: исследование языка и ошибок LLM, обучение и оценка моделей, контроль качества перевода. Определить, какая из этих задач вам ближе и с чего можно начать, поможет наш тест.
Перед тем как разбираться в математике, архитектурах моделей и MLOps, нужно освоить основной словарь NLP и машинного обучения. В этом вам помогут статьи «Системного Блока», а также небольшая памятка ниже.
AI-агент — система на базе языковой модели, которая не только отвечает на запрос, но и может планировать действия, пользоваться инструментами, проверять промежуточные результаты и исправлять ошибки.
Бенчмарк — стандартизованный набор заданий или критериев, с помощью которого сравнивают качество моделей, агентов или систем.
Воспроизводимость — возможность повторить эксперимент или процесс разработки при тех же данных и настройках и получить сопоставимый результат.
Галлюцинация LLM — правдоподобный, но ложный или неподтвержденный факт, который языковая модель выдает как достоверный.
Дообучение, или файнтюнинг, — дополнительное обучение готовой модели на специализированных данных, чтобы она лучше справлялась с конкретной задачей.
Дрейф данных — изменение входных данных по сравнению с теми, на которых модель обучалась. Например, появление нового сленга, тем или типов текстов.
Инференс — это процесс генерации ответа обученной большой языковой моделью на основе поданного пользователем текстового запроса (промпта).
Контекстное окно — максимальный объем текста, который модель может обработать за один раз; обычно его измеряют в токенах.
Корпус — структурированная размеченная коллекция текстов или записей речи, собранная для лингвистического исследования или обучения языковых моделей.
Мультимодальность — способность модели работать с несколькими видами информации: текстом, изображениями, аудио или видео.
Нейросеть (искусственная нейронная сеть) — это компьютерный алгоритм, который устроен по принципу человеческого мозга и учится на примерах, а не по жестким правилам.
NLPOps (Natural Language Processing Operations) — практики для разработки и поддержки систем обработки естественного языка.
Пайплайн — последовательность связанных этапов обработки данных или выполнения задачи. Например: собрать тексты, очистить их, разметить, сохранить в базу и подготовить для анализа.
Параметры модели — настройки нейросети, которые применяются во время обучения и влияют на ее поведение.
Переобучение — ситуация, когда модель слишком хорошо запоминает обучающие примеры, но хуже справляется с новыми данными.
Предобучение — первый этап обучения большой модели на широком наборе обычно неразмеченных данных; на нем модель осваивает общие закономерности языка.
Промпт — текстовый запрос к модели, который может включать инструкцию, контекст, ограничения и примеры желаемого ответа.
Разметка данных — добавление к данным меток или пояснений. Например, указание темы текста, эмоции, типа ошибки или качества ответа модели.
Семантическое сходство — близость текстов по смыслу, а не по буквальному совпадению слов.
Смещение в данных — неравномерная представленность тем, языков, точек зрения, групп или типов текстов в датасете.
Токен — единица текста, на которую модель делит ввод и вывод: это может быть слово, часть слова, знак препинания или короткая последовательность символов.
Токенизация — разбиение текста на токены.
Трансформер — одна из возможных архитектур нейросетей, заточенная на работу с последовательностями, например текстом.
Функция потерь — числовая мера того, насколько модель ошибается (насколько ее выдача отличается от ожидаемой); в процессе обучения алгоритм стремится ее уменьшить.
Эмбеддинг — числовое представление слова, фразы или текста, в котором близкие по смыслу единицы обычно оказываются близкими и математически.
В этом блоке простым языком объясняется, какой минимум математики нужен, чтобы понимать принципы работы моделей, и что происходит с ними после обучения — при внедрении в сервисы, продукты и реальные рабочие процессы.
Даже если вы не планируете писать код, базовое понимание технической стороны NLP поможет говорить с инженерами на одном языке и лучше понимать, как устроена индустрия изнутри.
Как устроены языковые модели и почему они ошибаются? Материалы этого блока помогут разобраться в ключевых принципах работы NLP. Вы узнаете, как модели учитывают контекст, как учатся генерировать текст и почему состав обучающего корпуса влияет на их знания и ответы. А еще — почему модель может уверенно выдавать недостоверную информацию.
Главная проблема новичков в NLP — отсутствие проектов, которые можно показать работодателю. Но где их взять, если опыта работы еще нет? На самом деле материал уже есть. Курсовая, дипломная работа или исследование дискурса — это готовая база для проекта. Нужно только правильно ее оформить. Наша статья подскажет, как это сделать: что включить в репозиторий на GitHub, как описать данные и методы и на чем сосредоточиться в первую очередь.
Начать изучать NLP можно через разные направления: прикладную и компьютерную лингвистику, анализ данных и т. д. В зависимости от целей подойдут как магистратура, так и программы дополнительного образования.
Ниже — подборка программ, на которые стоит обратить внимание.
Компьютерная лингвистика, Цифровые технологии в гуманитарных исследованиях, НИУ ВШЭ. Хороший вариант для карьеры в NLP для выпускников лингвистических, филологических и переводческих направлений. Программа соединяет теорию языка, работу с языковыми данными, автоматическую обработку текста, машинный перевод и методы машинного обучения. Подойдет тем, кто хочет заниматься корпусами, языковыми моделями, качеством генерации, разметкой, переводом или исследованиями языка.
Компьютерная лингвистика, МГУ. Подходит тем, кому важна фундаментальная лингвистическая база, формальные модели языка и возможность углубиться в вычислительные методы анализа текста.
Компьютерная и прикладная лингвистика, СПбГУ. Программа готовит специалистов в области прикладной лингвистики и современных языковых технологий.
Искусственный интеллект, ИТМО AI Talent Hub (онлайн-магистратура). Техническая программа с проектным обучением и задачами от индустриальных партнеров. Здесь можно развиваться в машинном и глубоком обучении, LLM, анализе данных, генеративных моделях и AI-продуктах.
Глубокое обучение и генеративный искусственный интеллект, ИТМО. Подходит тем, кто хочет глубоко работать с нейросетевыми архитектурами и генеративными моделями. В обязательном модуле есть дисциплины по обработке естественного языка.
Науки о данных (Data Science), НИУ ВШЭ — магистратура по анализу данных и машинному обучению. В программе изучают современные методы анализа данных, математическое моделирование и основы машинного обучения. Подойдет тем, кто хочет получить фундаментальную подготовку в ML и затем специализироваться, в том числе в NLP.
Интеллектуальный анализ больших данных, МГУ. Программа дает фундаментальную подготовку в машинном обучении и анализе данных. Это хороший вариант для тех, кто хочет сначала освоить математическую и техническую базу: работу с данными, построение и оценку моделей, алгоритмы машинного обучения, а затем применять ее к задачам в NLP.
Введение в компьютерную лингвистику и машинный перевод, ДПО ВИНИТИ РАН. Курс рассчитан на специалистов как гуманитарного, так и технического профиля и дает базовое представление о компьютерной лингвистике и NLP. В рамках программы участники разбирают принципы работы машинного перевода, осваивают предобработку и векторизацию текстовых данных, работу с корпусами и CAT-системами, а также пробуют проектировать прикладные решения для обработки текста.
Обработка естественного языка (NLP), МФТИ. Эта программа для слушателей, уже знакомых с Python, линейной алгеброй, статистикой и основами машинного обучения. Курс рассматривает классические и современные методы NLP: скрытые марковские модели для разметки текста, тематическое моделирование и многое другое. Подойдет тем, кто хочет систематизировать техническую базу и перейти к практическим задачам обработки текста, но не является вводным курсом с нуля.
Искусственный интеллект и практика его применения в области обработки текстов (Natural Language Processing): от статистического подхода до ChatGPT, МГУ. Программа знакомит с интеллектуальным анализом данных и методами NLP, особенностями обработки текстов для разных задач и практическим применением AI-инструментов. Слушатели также осваивают базовые навыки программирования решений для анализа данных на Python.
Создание и интеграция интеллектуальных ассистентов (LLM), ДПО Центра непрерывного образования ФКН НИУ ВШЭ. Онлайн-курс посвящен созданию и внедрению интеллектуальных ассистентов на основе больших языковых моделей. Подойдет тем, кто хочет перейти от общего знакомства с генеративным ИИ к прикладной работе с LLM-сервисами и прототипами.
Есть варианты обучения и в магистратуре за рубежом (к сожалению, стипендии студентам не из ЕС обычно недоступны).
Университет Лотарингии, Франция. На первом году обучения студентам предлагается выбрать один из двух треков: Computational Linguistics или Computer Science. На втором году обучения студенты могут выбрать между треками Robustness, который предполагает погружение в оценку языковых моделей, и Reasoning, который служит для более глубокого изучения формальных и символьных подходов к AI и NLP.
Университет Гронингена, Нидерланды. Классический университетский трек по NLP, включающий как курсы по теоретической и формальной лингвистике, так и межфакультетские занятия по компьютерным наукам.
Университет Штутгарта, Германия. Современная программа с фокусом на технологии больших языковых моделей, перевода речи в текст. Значительная часть программы отводится на исследовательские семинары и проведение исследований.
Университет Тюбингена, Германия. Один из ведущих классических вузов Германии, предлагающий фундаментальную подготовку в области компьютерной лингвистики. Междисциплинарная учебная программа объединяет лингвистику, информатику и психологию с практическими проектами.
Университет Эдинбурга, Великобритания. Университет предлагает сильную магистерскую программу в области обработки речи и естественного языка. Обучение охватывает все аспекты анализа речи и текста, включая фонетику, машинный перевод, синтез и распознавание речи.
Если вы не готовы учиться в другой стране, хорошим вариантом может стать летняя школа по NLP (сайты приведены для школ 2026 года, но подаваться придется уже в следующем году).
Летняя школа в Афинах — программа ориентирована на специалистов из областей, смежных с NLP.
ESSLLI — программа с фокусом на логических, формальных и символьных подходах к лингвистике.
CreteLing (Crete Summer School of Linguistics) — двухнедельная школа по теоретической и экспериментальной лингвистике. Подойдет тем, кто хочет углубить знание языка перед работой в компьютерной лингвистике или NLP.
Corpus Linguistics Summer School — школа с фокусом на разработку и исследование корпусов.
LxMLS (Lisbon Machine Learning Summer School) — летняя школа по машинному обучению для исследователей и студентов из NLP, компьютерной лингвистики и смежных областей; включает лекции, лабораторные занятия и доклады.
Summer School “Methods in Language Sciences” — школа по методам языковых исследований. Среди модулей — NLP, Python, R, статистика и анализ данных; трек NLP можно объединить с вводным курсом Python.
IASNLP — школа по речевым и языковым технологиям с фокусом на Speech LLM: распознавание и синтез речи, голосовые ассистенты и перевод речи. Есть вводный двухдневный модуль для участников без базы в NLP, лингвистике или программировании.
Мастерская анализа текстовых данных — двухнедельный интенсив для участников от 18 лет: предобработка текстов, базовая статистика, классификация, PyTorch, LLM, анализ тональности и эмбеддинги.
Желаем всем успехов в покорении NLP!
В музее вы точно заметите разноцветные фрески и изысканные статуи, а вот мимо монет можете пройти. Хотя они хорошо помогают…
Восковая скульптура Микеланджело, которую нельзя выставлять в тепле. Средневековый французский ковёр длиной 70 метров, который невозможно рассмотреть целиком. Египетские саркофаги,…
Малярия — одна из самых страшных болезней, которая веками отнимала силы и жизни у миллионов людей. Уже жителям Римской империи…
Принцип Смурфетты — это ситуация, когда среди мужских персонажей фильма есть только одна героиня. Ее образ — это стереотипное представление…
Что общего между ДНК-маркерами, прогностическими моделями и дронами с мультиспектральными камерами? Все это — инструменты селекции, которая за последние два…
Как ИИ изменит общество и образование? Что в школе будущего должен делать учитель, а что — тренажер? Почему в XXI…
Историки и биологи давно исследуют прошлое человечества вместе. С недавних пор к ним присоединились палеогенетики и биоинформатики. Их методы позволяют…
В художественных произведениях часто упоминаются исторические личности. Что будет, если посмотреть на русскую литературу XIX века через упоминания реальных людей?…
Подводим итоги и рассказываем о самых важных событиях в мире ИИ за прошедший год
За что и как наказывали людей в прошлом? Как судебные архивы превращаются в базы данных, а историки — в дата-аналитиков? Чем историкам права помогают цифровые методы? На примере проекта The…
Мы привыкли, что на месте преступления ищут отпечатки пальцев, следы обуви и человеческую ДНК. Но сегодня вещественным доказательством может стать…
Как Север может оказаться южнее Москвы? С какими сложностями сталкивается исследователь языков и народов Арктики? Где лучше искать носителей чукотского…
Прогресс больших языковых моделей через увеличение их размеров застопорился: их масштабирование уже почти не дает прироста качества. Выход ищут в…
Когда в СССР пластинки с западной музыкой оказались под запретом, меломаны нашли неожиданный выход. Вместо винила они использовали... медицинские рентген-снимки.…
Почему ваши файлы на компьютерах и смартфонах до сих пор лежат в «папках»? Все началось с бухгалтеров XIX века и…
Как «разложить» все книги мира на одной гигантской полке? 📚 Оказывается, для этого достаточно внимательно посмотреть на коды ISBN. Рассказываем,…
Драконы, духи и герои древних легенд теперь не бродят по туманным мирам — они появляются на картах. Современные базы данных…
Как работает поиск изображений по текстовым описаниям? Как это связано с генерацией изображений? Как языковые модели «понимают» не только текст,…
Искусственный интеллект повсюду: заменяет врачей, ищет нефть, а инженеры разрабатывают специальные чипы для машинного разума. Звучит как заголовки из 2025…
ЕГЭ — нервное событие, а подготовка к экзаменам — долгая и сложная. На помощь ученикам и учителям приходят сервисы на…
DeepSeek — новая китайская нейросеть, вызвавшая фурор как среди простых пользователей, так и специалистов. Некоторые даже окрестили ее «убийцей ChatGPT».…
Исследование мест массовых убийств позволяет высветить обстоятельства и корни преступление против человечности, а также делает нас свидетелями прошлого. Современные технологии…
Геоглифы Наски известны людям с XVI века — о них упоминали конкистадоры, которые проходили через пустыню. Тем не менее научное…
Средневековые студенты часто перемещались из одного университета в другой, чтобы получить всестороннее образование и ученую степень. Все это, наряду с…
Могут ли новые технологии помочь прочесть нечитаемую древнюю надпись на камне? Как трехмерные модели старинных надгробий, крестов, камней и эпиграфических…
Болезни Альцгеймера подвержены миллионы людей по всему миру, и с каждым годом число заболевших продолжает расти. Однако традиционные методы диагностики…
Борис Ярхо — один из самых недооцененных филологов знаменитого поколения «русских формалистов» 1910-х — 1920-х. В отличие от куда более…
Язык — естественная система. Он распространяется, развивается и даже мутирует, подчиняясь законам естественных наук. Можно ли с его помощью реконструировать…
Современные технологии хорошо помогают в криптоанализе: программы, перебирающие тысячу вариантов за несколько секунд, в разы превосходят возможности человека. Однако слепого…
В 2024 году «Системный Блокъ» опубликовал 180 материалов. В этом посте мы рассказываем о наших итогах года: о запуске новых…
Петроглифы — небольшие древние наскальные изображения — часто сложно датировать и атрибутировать. При этом для некоторых рисунков может быть очень…
Хотите смоделировать процесс эволюции или работу человеческого глаза? Не можете разобраться в баллистике? Тогда воспользуйтесь интерактивным симулятором. Мы собрали самые…
Куда развивается искусственный интеллект и какие новые умения он приобретет в ближайшем будущем? Что делать с тем, что коммерческие продукты…
23 года назад вышел фильм «Пароль “Рыба-меч”» — знаковая лента о хакерах с Джоном Траволтой. Это не только первый массовый…
Как Линней придумал таксономию живых организмов, в чём польза игральных карт для каталогизации знания и сколько человек нужно, чтобы описать…
Информация бесполезна, если мы не знаем, как и где её найти. С появлением книгопечатания проблема упорядочивания выпущенных книг занимала учёных…
Популярная музыка транслирует социальные нормы. Чем популярнее музыка, тем больше людей могут себя с ней соотнести. На какие детали быта…
Как в СССР возник машинный перевод? Чем нетрадиционная лингвистика отличается от традиционной? Почему эмиграция иногда становится спасением жизни? Об этом…
Эйнштейн объясняет старшеклассникам теорию относительности. Маяковский читает стихи у доски. Ученик «обменивается» телом с учителем, а у педагогов остаётся время…
По данным ООН, закрытие школ во время пандемии, сокращение и автоматизация рабочих мест отодвинули равноправие женщин и мужчин на 31…
Продолжаем наше руководство по анализу текста с помощью Voyant Tools. В прошлом материале мы рассказали, как загрузить и подготовить корпус.…
Филологи уже долгое время подозревают, что одна из пьес чешского драматурга Карела Штайгервальда на самом деле принадлежит перу Милана Кундеры.…
Может ли работа с данными помочь в борьбе с коррупцией? «Системный Блокъ» выяснил, какие цифровые сервисы и проекты занимаются антикоррупционной…
Как отделить язык от диалекта? Должна ли вся страна говорить на одном «стандартном» языке и какие преимущества есть у использования…
Где можно найти настольную игру, иронизирующую над перестройкой, матрёшку с мордой собаки Стрелки и сборник суеверий из XVIII века? Рассказываем…
Как примирить сторонников количественных и качественных исследований культуры? Как исследователям фольклора помогают цифровые базы данных? О чём могут рассказать лозунги…
Идиостиль — это авторский стиль писателя. И если на небольших стихах его изучать удобно, то вот на текстах Льва Толстого…
Стилометрия — количественный метод определения авторства, который проверен на десятках современных языков. А что там с языками древними? Историк философии…
Какие советские ученые стоят у истоков исторической информатики? Как математические методы позволяют моделировать исторические процессы? Как складывались отношения российских исторических…
Статья Агаты Холобут и Яна Рыбицкого The Stylometry of Film Dialogue: Pros and Pitfalls показывает связь между жанровыми особенностями кино…
В конце 60-х гг. не только США разрабатывали компьютерные сети. В СССР также строили грандиозные планы по созданию системы, которая…
Цифровые филологи научились «измерять стиль»: у «Системного Блока» есть подборка статей о стилометрии и гайд о том, как провести собственное…
Представляем результаты авторского цифрового исследования: граф социальных связей персоналий Серебряного века на основе материалов проекта «Устная история». Центральная фигура —…
Как связаны имена Блока и Гумилёва с историей крупнейшей коллекции этнографических аудиозаписей? Когда исполнители перестали бояться раструба фонографа? Что происходит,…
Владимир Набоков известен тем, что писал и на русском, и на английском. Сможет ли компьютер распознать его оригинальный стиль? Этот…
Стилометрический анализ позволяет определить, принадлежат ли тексты одному и тому же автору. Но что если писатель творит под несколькими литературными…
Может ли машина писать мелодии, разговаривать с музыкантом во время выступления и руководить групповым танцем? В середине прошлого столетия последователи…
Исследователи-филологи, занимающиеся древними текстами, давно используют компьютерную обработку текста. Но арабистика пока лишена многих цифровых инструментов текстового анализа. Рассказываем, почему…
Современный мир захлестнула цифровизация. Это не обошло стороной, в том числе, и институции культурного наследия, которые начали массово переводить свои…
Проблема домашнего насилия — одна из наиболее острых социальных проблем в современной России. А вопрос о достоверной статистике по этой…
За последние годы появилось много возможностей исследовать русскую культуру, не выходя из дома. Сейчас для этого нужен лишь компьютер либо…
Исторические игры регулярно попадают в десятку самых продаваемых видеоигр в разных странах, а опирающаяся на всемирную историю Assassin's Creed —…
Ранее мы рассказывали про цифровой анализ речи героев «Войны и мира». В этом материале с помощью сетевого анализа разбираемся, как…
Наверняка вы когда-нибудь слышали о группе «Король и Шут». Даже, если вы не преданный фанат, то мы почти уверены, что,…
Что такое языковая модель? Что общего между клавиатурой вашего телефона и GPT? Почему языковые модели умеют не только моделировать язык?…
Кирилл Маслинский — цифровой филолог, руководитель Лаборатории цифровых исследований литературы и фольклора в Пушкинском Доме, создатель Детского корпуса и Репозитория…
Исторические сокровища, ранее доступные лишь немногим, впервые появились в сети благодаря проекту «Книжные памятники». Мы расскажем, как и зачем происходит…
Национальный корпус русского языка (НКРЯ) — важнейший инструмент любого исследователя, который занимается русским языком, русской литературой и вообще русской словесной…
В конце 80-х годов опасения, что госструктуры будут контролировать зарождающийся интернет, привели к возникновению движения шифропанков. Эти интернет-активисты выступали за…
В России вступил в действие закон, объявляющий повестку из военкомата врученной вне зависимости от ее получения призывником. Теперь повестку достаточно…
Сайт Госуслуг «упал» после объявления в России мобилизации. Rutube обрушился 9 мая 2022 года и не работал три дня. Некоторые…
Новая нейросеть семейства GPT не только точнее, надёжнее и безопаснее GPT-3 и ChatGPT. Еще она умеет работать с изображениями. Благодаря…
Анастасия Бонч-Осмоловская ― лингвист, филолог, цифровая исследовательница, идейная вдохновительница и душа российских Digital Humanities. «Системный Блокъ» поговорил с Анастасией о…
Фантастика часто предугадывает будущие достижения науки и техники. «Системный Блокъ» уже рассказывал, как русские писатели XIX века предсказали появление генеративных…
«Пишу тебе» всегда призывает наших читателей и волонтеров делиться открытками из семейного архива. История, которой мы хотим сегодня поделиться, началась…
Сейчас историки всё чаще уделяют внимание не столько выдающимся деятелям прошлого, сколько целым группам людей, жившим в ту или иную…
Научная фантастика в русской литературе имеет давнюю историю. Писатели XIX и первой половины XX века предсказали многое: от телевидения до…
В 2022 году «Системный Блокъ» опубликовал 247 материалов. В этом посте мы сформулировали краткие итоги ушедшего года: открытие дата-отдела, оцифровка…
По сравнению с современными картографическими сервисами старинные средневековые карты выглядят загадочно и непонятно. Точно так же до недавнего времени на…
Две библейские героини — неприступная Юдифь и обольстительница Саломея — очень непохожи друг на друга. Но в истории каждой из…
23 ноября команда Tolstoy Digital запустила сайт «Слово Толстого» – первый цифровой путеводитель по необъятному наследию писателя
Людьми часто движет любопытство. Мы хотим узнать, чем кончится история, были ли мы правы, что же автор всё-таки имел в…
«Шумно, дергано, стук ужасный» — среди материалов «Пишу тебе» обнаружились открытки знаменитого советского стоматолога, отправленные из Америки и Германии. О…
Можно ли принимать участие в экологических проектах, не будучи экологом? Можно! Ведь существует гражданская наука. Рассказываем, как каждый из нас…
Знали ли вы, что слово «время» в произведениях А. П. Чехова имеет определенные схемы употребления, повторяющиеся от тома к тому?…
Каждый филолог желает знать, что такое семантическое издание. В этой статье мы расскажем вам об одном из них. В нем…
Даже если государственный террор не воздействует на человека напрямую, он влияет на формирование его представлений о государстве и отношение к…
Модель психики «Думай медленно… решай быстро» оказалась верна не только для людей, но и для больших нейросетей. Вслед за интуитивными…
Чем тексты аббатов и епископов отличались от текстов графов и королей? Рассказываем, как при помощи статистики употребления слов и анализа…
Алексей Новиков — кандидат географических наук, глава и соучредитель компании Habidatum, специализирующейся на аналитике городских данных. «Системный Блокъ» поговорил с…
Если посмотреть на голую статистику, может показаться, что женщины-ученые публикуют меньше научных статей, чем их коллеги-мужчины, а также реже получают…
Москва входит в топ-30 городов по покрытию камерами. Цифровизация наблюдения уменьшает риск преступности, но при этом и помогает государству выследить…
Лето почти закончилось, а вы все еще не отличаете сатанинского козодоя от башенного стрижа? А может, вам хотелось стать орнитологом,…
Как цифровые методы помогают понять эволюцию идеи гуманизма в Германии XIX века? Рассказываем об исследовании «гуманистического дискурса» в немецкоязычных газетах…
Системный Блокъ много писал о стилометрии: об атрибуции и верификации авторства, анализе эмоций в песнях и стиля переводчика. Теперь на…
Человеку из XXI века может быть сложно понять социальные реалии, в которых создавались пьесы Шекспира. С помощью цифрового анализа исследователи…
Полина Колозариди — интернет-исследователь, координатор Клуба любителей интернета и общества, преподавательница ИТМО и НИУ ВШЭ. «Системный Блокъ» поговорил с ней…
Дневники людей, живших в различных исторических эпохах, могут многое сказать исследователю, но анализировать их вручную — тяжело и долго. Разбираемся,…
«Привет» или «ПРИВЕТ»? А, может быть, «првиет!»? Вариантов поздороваться в онлайн-переписке, как и написать любое другое слово, множество. Причем каждый…
В наши дни подписание петиций или краудфандинговый сбор средств на чьи-нибудь нужды стали привычным делом. Кажется, постоянный фидбек прочно вошел…
Схемы, модели и другие способы наглядно представить информацию давно стали неотъемлемой частью повседневной жизни. В исторической науке к методу визуализации…
Продолжаем разгадывать вечную тайну «Беовульфа» и рассказывать о том, как цифровые филологи строят научный диалог в поисках правды.
Литература как любая сложная система развивается и эволюционирует. Какие-то произведения остаются в центре внимания читателей на десятки и даже сотни…
С начала боевых действий на Украине мы регулярно слышим о том, что за границей притесняют людей из России. Но чаще…
Нью-йоркский музей МоМА — один из старейших музеев современного искусства в мире. В MoMA хранятся работы Рене Магритта и Энди…
Пандемии, кризисы и войны бьют не только по людям, но и по культуре. Многие музеи оказываются недоступны, а то и…
Еще месяц назад мы с уверенностью смотрели в будущее, почти привыкнув к «новой нормальности» в мире с пандемией. Но оказалось,…
Международное сообщество исследователей запустило инициативу по сохранению украинского культурного наследия в цифровой форме
Рассказываем, как сделать тематическое моделирование для большого объема текста, предположить его содержание и разделить по темам
Инна Кижнер — старший преподаватель кафедры информационных технологий в креативных и культурных индустриях, научный сотрудник лаборатории «Digital Humanities» Сибирского федерального…
Алиса Яндекса, Олег Тинькофф-банка и телеграм-бот для демотиваторов — одно и то же? Или нет? Разбираемся, как работают диалоговые системы…
Gephi — самый известный инструмент для визуализации графов и сетевого анализа. С его помощью можно исследовать и население Викторианской Англии,…
Революция 1917 года — одно из крупнейших потрясений в российской истории. О чем думал Николай II в день отречения? Что…
В октябре «Системный блокъ» опубликовал корпусное исследование русской классики, в котором были проанализированы произведения школьной программы. Тогда в анализ текста…
В наше время компьютер может работать практически с чем угодно, в том числе и с музыкой: существует множество методов как…
Проект по оцифровке открыток «Пишу тебе» подготовил очередную тематическую подборку. На этот раз мы подобрали открытки, в которых есть поздравления…
По традиции 31 декабря «Системный Блокъ» публикует подборку лучших материалов уходящего года. В 2021-м в подборке оказались спецпроект в духе…
Реформы, перевороты, вооружённые конфликты, распад СССР… Все это происходило параллельно с развитием интернета и становлением массовой IT-индустрии. Как информационные технологии…
Что такое «гражданская наука» (citizen science)? Как определить редкий вид орхидеи? И зачем фотографировать углозубов? Читайте в новом материале СБъ
Системный Блокъ поговорил с психологом Ольгой Гулевич, профессором департамента психологии НИУ ВШЭ о том, как психологи изучают поведение в цифровой…
Участница НКО «Немецкая национально-культурная автономия города Ханты-Мансийска» Юлия Папанова рассказывает о цифровом проекте «История немцев ХМАО»: от замысла и сбора…
Многие говорят, что эффективный способ выучить иностранный язык – смотреть сериалы на этом языке. Если вы тоже пробовали такой метод,…
С произведениями классика в интерпретации русских авангардистов и исследователя теперь можно познакомиться на онлайн-экскурсии по мультимедийному музею
В Институте имени Пушкина создали технологию лингвистической оценки учебников. С ее помощью тексты цифрового Яндекс.Учебника сравнили с другими школьными пособиями…
«Системный Блокъ» писал об исследованиях того, как по-разному мужчины и женщины описывались в литературе XIX и XX веков. Сегодня перейдем…
Как понять, кем вам приходится сваха внучатого племянника вашей сестры? Проще всего - нарисовать генеалогическое древо, которое отразит все родственные…
1 октября — Международный день открытки. В этот день в 1869 году австрийский экономист Эммануэль Херрман написал статью о том,…
Экспрессионизм обычно ассоциируется с Джейсоном Поллоком с его красочными разводами. Но создать подобное искусство можно и не пачкая рук. Рассказываем…
Как обучить нейросеть генерировать жёлтые тексты в духе самых трешовых баннеров? Наш автор Иван Торубаров погрузился в глубины кликбейта и…
В младенчестве нам предстояло выучить незнакомый язык на основе речи вокруг себя. Как мы осваивали язык и отделяли слова друг…
Язык интернета имеет свои характерные черты. И если исследованию языка Рунета посвящено множество работ, то DarkNet все еще остается серым…
Людвиг ван Бетховен создал девять симфоний, а еще он успел набросать несколько заметок и к симфонии № 10. Рассказываем, как…
Для исторической науки важны не только битвы, революции, переселения народов, смены экономических укладов и политических режимов. Важно еще понимать, кем…
GPT-3 — самая известная из современных нейросетевых моделей языка. Вокруг нее много мифов, но модель действительно умеет впечатлить. Она отлично…
Сегодня каждая большая IT-корпорация пытается сделать «еще более умную» нейросетевую языковую модель, которая решала бы сразу множество задач: и ответы…
Сегодня в России более 1,3 млн учителей средних школ. «Системный Блокъ» решил узнать, насколько учитель средней школы в России подходит…
Сколько ваших знакомых без проблем смогут прочитать рукописи Пушкина? А петровскую скоропись? А рецепт своего лечащего врача? Чтобы разобрать написанное,…
BERT — нейросетевая модель-трансформер от Google, на которой сегодня строится большинство инструментов автоматической обработки языка. Модель появилась в начале 2018-го,…
Мы проанализировали все речи президентов, которые произносились в честь 9 мая с 2000 года. О том, как эти выступления влияют…
Ученые НИУ ВШЭ и РАН при помощи 3D-модели прочитали текст XII века на стене собора. В надписи перечисляются убийцы князя…
Со временем машины получают все больше способностей. Одной из них стало творчество. Произведения искусства, созданные автономными механизмами, существовали еще несколько…
Для чего филологу учиться программировать? Зачем учить нейросети писать стихи? Как мы опираемся на корпусные методы исследования языка в повседневной…
К грядущему 300-летию одного из самых цитируемых философов мира специалисты из Центра социально-гуманитарной информатики Балтийского федерального университета реконструируют дом своего…
Мы писали о том, как оцифровывают почти все, даже алтари. Но можно ли перевести ткани в цифровой формат? Разбираемся, как…
Может ли сеть средневековых писем рассказать исследователям о политических связях византийцев? Видно ли в ней наступление разобщенности элит, за которым…
Рассказываем, как одни ученые устанавливали авторство знаменитого древнеанглийского эпоса «Беовульф» при помощи статистики, а другие с ними спорили. Ведь научные…
Научить нейросети понимать искусство пытаются уже много лет. И хотя про «понимание» говорить рано, некоторые задачи, ранее доступные лишь искусствоведу,…
Все видели мемы «Проспал дистанционку» с траурной свечкой, «Здоровья погибшим» и «Press F to pay respect»? Кому-то они покажутся циничными,…
Проект «Дальнее чтение для европейской литературной истории» выпустил собрание старых произведений. В коллекцию вошли 884 романа на 18 языках
Визуализация возраста зданий на карте — не новая идея, в том числе для Москвы. Подобную вещь несколько лет назад сделал…
В 2020 году Системный Блокъ опубликовал примерно 400 материалов, включая статьи, интервью, подкасты, видео и мемы. Сегодня мы собрали для…
При изучении прошлого ученые часто сталкиваются с нехваткой данных о событиях. Это вызывает проблемы при проверке подлинности фактов и ведет…
Как посмотреть коллекцию одного из самых известных музеев мира, спланировать посещение или просто насладиться искусством, не тратя время на очереди…
Платформа TaQadam — пример интеграции социальных задач и IT-предпринимательства. Рожденный в стенах ООН проект направлен на помощь одному из самых…
COVID-19 изменил повседневные практики миллионов людей — и это видно по их «цифровым следам». Что говорят об эффективности весеннего карантина…
Коронавирус повысил важность цифровой трансформации для музеев. Когда физический поход на выставку становится невозможен, остается надеяться на онлайн. Мы поговорили…
Трансформер — самая модная сегодня нейросетевая архитектура. Она появилась в 2017 и перевернула всю обработку языка машинами. Мы расскажем о…
История диджитал-арта насчитывает уже не один десяток лет, но сегодня союз искусства и цифровых технологий вступает в новую фазу отношений.…
Огромное количество исторических документов США теперь доступны онлайн в архиве Гилдера-Лермана. Разбираемся, как такие архивы помогают студентам, исследователям и всем…
TEI (Text Encoding Initiative) – это формат кодирования текстов и отличная возможность перенести рукописи в удобный электронный вид. TEI используется…
Продолжаем серию постов о применении Sketch Engine в цифровой филологии на примере исследования текстов Маяковского. В прошлом материале мы узнали,…
Системный Блокъ уже рассказывал, как провести собственное корпусное исследование при помощи antconc и mystem. Теперь мы обратимся к другому инструменту…
Разбираемся в том, как излечить хронически больные картины XIX столетия. Расскажем о методах реставрации картин: от клея из пузыря осетра…
Русское искусство все быстрее переезжает в цифровой мир. Расскажем о виртуальных прогулках по Русскому музею — и о его цифровых…
Ностальгия по СССР подстерегает нас везде. Эту тему эксплуатируют многие, от эфирного ТВ до Лапенко. А мы разбираемся с механизмами…
Второй по величине гербарий в России обрел цифровую форму. В свободном доступе более одного миллиона изображений с оригинальными оцифрованными этикетками…
«Spotify опоздал» — говорят одни. «Spotify — всего лишь один из многих!», — говорят другие. «Spotify неудобен» — говорят третьи.…
Допустим, историк нашел древнюю надпись на скале — и хочет ее сохранить. Что делать? Классические методы: переписывание текста, зарисовка или…
Технологический блогер vas3k (в миру программист Василий Зубарев) известен всему просвещенному интернету как автор постов о машинном обучении, VR, машинном…
Измерение сложности текста — задача для компьютерной лингвистики не новая, и в этой области многое уже придумано. Но применимо ли…
В книге «Жизнь онлайн: исследование реального опыта в виртуальном пространстве» цифровой этнограф Аннет Маркхэм показывает, как личность, социум и отношения…
Филиал России в Америке — это не только про русскую мафию или русских на Брайтон-Бич в Нью-Йорке. Это еще и…
О том, что в Россию пришел крупнейший в мире стриминговый сервис, не сказал только ленивый. Но чем же Spotify так…
Крупнейшая в мире библиотека Конгресса США ничего не скрывает, хотя многое хранит — и это не только книги, но и…
Некоторые знают об этом художнике благодаря легенде об отрезанном ухе. Другие вспоминают его единственную проданную картину «Подсолнухи». Есть те, кто…
Каждый знакомится с литературным наследием Льва Толстого по-разному. Одни изучают его творчество одновременно с биографией, другие читают для себя, а…
Врач — профессия, отношение к которым колеблется от тотальной демонизации до безусловного обожествления, однако за этическими и нравственными вопросами жизни…
Как сочетаются компьютерные технологии и Церковь? Зачем настоятелю монастыря алгоритм дистрибутивной семантики word2vec? Исследовать церковные тексты количественными методами — это…
Кто такой русский рэпер, и о чем он читает? Пацан с района в трениках «три полоски», воспевающий «родных жульбанов»? Татуированный…
В России трудно найти семью, где не было бы родственника-участника ВОВ. Но многие почти ничего не знают о судьбе близких,…
Крафтовый техно-лонгрид издания Системный Блокъ, в котором мы разбираем по винтикам одну из самых ходовых технологий в современной компьютерной лингвистике…
Как вы проводите время на самоизоляции? Наш урбанист Оля, например, встречается с друзьями в Zoom на кулинарных пятницах, куратор Ира…
Школьники, зависающие на сайтах с краткими содержаниями, многое бы отдали за чудо-ресурс, которому можно было бы отдать какое-нибудь художественное произведение…
В истории войны много неизвестных и спорных мест. К сожалению, до сих пор многие данные засекречены, ведутся споры о количестве…
Орден иезуитов был передовым отрядом католической церкви в деле сопротивления Реформации. Иезуиты создали сеть школ и университетов по всей Европе.…
Наряду с разработкой таких ботов-гигантов, как Алекса, Сири и Алиса, за которыми стоят крупнейшие IT-корпорации, появляются и доступные инструменты для…
В 2009 году известный композитор, лауреат премии Грэмми Эрик Витакер придумал собрать людей со всего мира в виртуальный хор. Рассказываем,…
Что может рассказать об истории иудаизма социальная сеть мудрецов которые четыре века только и делали, что спорили?
С помощью алгоритмов компьютерного зрения искусствоведы подтвердили теорию о том, что Поль Сезанн в своем творчестве пользовался математическими расчетами, а…
Пока границы закрыты, изучим возможности, которые предоставляют крупнейшие онлайн-коллекции объектов культурного наследия
То место в центре Москвы, где сейчас находится Пушкинская площадь и главный в стране памятник Пушкину, почти три века занимал…
Какие общие тропы можно найти в Plague Inc., Pandemic и Left 4 Dead? Проводим сетевой анализ печально актуальной игры, в…
Если у вас есть смартфон — вы можете почувствовать себя немного биологом и внести вклад в науку. Информатика биоразнообразия —…
Брайлевский шрифт придумали для передачи военных секретов, а в итоге он пригодился незрячим. Как устроен Брайль, зачем на нем пишут…
На наших глазах происходит один из первых кибер-витков истории человечества. Виртуальные помощники выходят из зоны покорных слуг и обретают больше…
Кому и почему «важно, чтобы корпус жил»? Системный Блокъ узнал, как применяют Национальный корпус русского языка: от школьных исследований до…
Когда мобильный интернет был экзотикой, а отчёты по грантам сдавали на 3,5-дюймовых дискетах... в Рунете уже были цифровые гуманитарные проекты!…
В 2010 году «Оскар» за лучшую режиссуру впервые получила женщина — Кэтрин Бигелоу с фильмом «Повелитель бури». Стали ли после…
Как устроен шедевр Булгакова: анализируем роман «Мастер и Маргарита» с помощью методов цифрового литературоведения
Как ученые пытаются понять по активности мозга, что видит человек, и при чем тут машинное обучение
Научиться программировать мечтают многие, но как выбрать подходящий курс из сотен доступных вариантов? Мы сделали обзор курсов по Python, которые…
Тематическое моделирование — легкий способ понять смысловой состав большой коллекции текстов, которую невозможно быстро прочесть глазами. Пользоваться инструментами тематического моделирования…
Градиентный спуск — это способ поиска точек минимума или максимума в сложных функциях. Рассказываем, почему это так важно для обучения…
Научпоп стремительно обзаводится почитателями по всему миру. Какие ученые хотят рассказать о своей работе больше всего, что ресурсы и паблики…
Как, сколько и с кем общаться, чтобы стать по-настоящему главным героем пьесы — отвечает математика
Компьютерные лингвисты из Вышки, университета Тренто и университета Осло разработали vec2graph — инструмент для визуализации семантической близости слов в виде…
Нейросети научились неплохо подражать человеку в написании текста. Но теперь есть симметричный ответ: системы обнаружения текста, порожденного нейросетями. Запасаемся попкорном…
Авторский стиль тяжело определить формально — это целый комплекс деталей, которые заметны человеческому глазу, но могут ускользнуть от компьютера. Указать…
Сегодня модно исследовать художественную литературу методами анализа социальных сетей. Мы начинаем серию постов по сетевому анализу русской драматургии. В первом…
Мы продолжаем цикл постов о компьютерных языках, используемых для передачи музыки. Сегодня рассказываем о принципиальных отличиях музыки от других видов…
Как обычный «слепой тест» по отделению машинной поэзии от той, что написана людьми, приводит ученых к философскому спору об относительности…
Как соотносятся семейные связи европейских монархов начала XX века с их вероисповеданием? Сказалось ли родство на выборе стороны в Первой…
Ученые сумели перевести электрические импульсы коры мозга в звучащую речь. Это может стать прорывом в лечении речевых расстройств и поддержке…
Кажется, что NLP — это только про код, математику и нейросети, а гуманитариям тут искать нечего. Но на самом деле…
Курсовая сдана, оценка получена, файл kursovaya_final_FINAL2.docx лежит в папке «Учёба». Всё это можно превратить в проект на GitHub, который будет…
В 1989 году два брата из Гвинеи, которым было всего 14 и 10 лет, решили придумать письменность для родного языка.…