Схемы слияния слогов 1 класс: Урок «Слог-слияние», 1 класс

Содержание

Урок «Слог-слияние», 1 класс

Чтение, 15.09.2017

Тема:Слог-слияние

Цель: Способствовать развитию у учащихся умения отличать гласные звуки от согласных, слышать слияние согласного звука с гласным, делить слова на слоги

Планируемые результаты (предметные): Выделяют слияние согласного звука с гласным, согласного звука за пределами слияния; графически изображают слог-слияние; составляют небольшие рассказы повествовательного характера по сюжетным картинкам, по материалам собственных наблюдений

Личностные результаты: Выражают готовность в любой ситуации поступать в соответствии с правилами безопасного поведения в быту

Универсальные учебные действия (метапредметные):

Регулятивные: учатся высказывать свое предположение на основе работы с рисунками и схемами.

Познавательные: общеучебные – находят ответы на вопросы в иллюстрации; логические – анализируют звуко-буквенный состав слов; различают гласные и согласные звуки, называют основные отличительные признаки; осуществляют синтез как составление целого из частей.

Коммуникативные: работают в паре: задают друг другу вопросы по рисунку, отвечают на вопросы товарища, выслушивают и оценивают ответ товарища

Ход урока:

Организация начала урока

    Проверка готовности класса и оборудования; эмоциональный настрой
    на урок

    2. Актуализация знаний

    - Ребята, давайте вспомним, с помощью чего мы общаемся?

    – Из чего состоит речь?

    – Из чего состоят предложения?

    - Из чего состоят слова?

    - Какие бывают звуки?

    2.3. «Звуковая игра»

    - Прошу встать тех ребят, у кого имя начинается на гласный звук, а теперь тех, у кого имя начинается на согласный. Спасибо. Молодцы.

    III. Объяснение нового материала

    3.1. Введение в тему. Проблемная ситуация

    - Посмотрите внимательно на буквы на доске. Что это за буквы? Р, Л, М, Н.

    - Подумайте, что общего у этих букв? (согласные)

    - А теперь попробуйте составить слова из данных букв. (Не получается)

    - Давайте посмотрим на следующую группу букв. Назовите эти буквы. (Ы, Р, А, Б)

    - На какие две группы можно их разделить? (На гласные и согласные)

    - Попробуйте составить слово из данных букв. Записать!!!!

    - А почему не получилось составить слова из первой группы букв: Р, Л, М, Н?

    - Какой вывод можно сделать? (Без гласных невозможно образовать слово)

    3.2. Практическая работа.

    - Медленно проговорите слово рыба.

    - Простучите его карандашом по столу.

    - Прохлопайте это слово. Сосчитайте хлопки. Сколько получилось?

    - В слове ры-ба две части. Назовите первую часть, затем вторую.

    - Когда мы произносим слово не полностью, а делим его на части - это значит, что мы делим его на слоги (показ).

    В слове может быть два, три, четыре и больше слогов. А есть и такие слова, в которых только один слог. Поэтому вы, наверное, заметили, что слова бывают длиннее и короче. Это зависит от того, сколько в нём слогов.

    3.2.2 Работа по учебнику,с.16

    3.3 Составление звуковой схемы

    ПГ «Рыбки плавают, ныряют»

    - Составьте звуковую схему слова «рыба». Посчитайте, сколько гласных в слове? А сколько слогов в этом слове? Что вы заметили?

    3.3. Ознакомление с правилом

    Сколько в слове гласных,

    Столько и слогов.

    Это знает каждый

    Из учеников!

    Чтобы слоги посчитать.

    Надо гласные узнать,

    С каждой гласной связан слог

    Вот и весь о них урок!

    Физминутка «Слоговички - попрыгунчики»

    - Я называю слова, а вы должны, проговаривая слова по слогам, столько же раз прыгнуть.

    IV. Закрепление изученного материала

    4.1.Работа по составлению схем слов и анализу, с.16

    4.2. Дидактическая игра «Раздели слова на слоги».

    Попробуйте сами сначала шепотом, а затем вслух произнести по слогам слова - названия предметов, которые я вам покажу на рисунках.

    4.5. Рефлексия. Игра со слогами «Паровозик»

    Предлагаем ребенку первое слово-паровоз. А к нему нужно пристраивать слова-вагоны, каждое из которых будет начинаться с последнего слога предыдущего слова.

    V.Итог урока

    -Каким способом вы делили слова на слоги?

    -Сколько слогов может быть в слове?

    -Для чего нужно уметь делить слова на слоги?

    - Попробуйте дома разделить на слоги имена родителей, клички животных

    Конспект урока по русскому языку на тему "Слог-слияние" (1 класс)

    Тема: «Слог-слияние»

    1. Необходимо дать:

    1. Структура слог-слияния (С+Г).

    2. Особенности произношения сливания двух звуков при произношении.

    3. Термин «слог-слияние». Этимология.

    4. Схема слог-слияния.

    1. Языковой материал:

    1. Слово со слог-слиянием.

    2. Слово со слог-слиянием.

    1. Повторение.

    Согласные и гласные звуки.

    План урока.

    Цель урока: изучить понятие звук и понятие «Слог-слияние».

    Задачи урока: 1) учить детей делать слого - звуковой анализ слова.

    2) познакомить со слог-слиянием.

    3) развивать речь.

    Ход урока.

    1. Организационный момент.

    Прозвенел звонок,

    Начинается урок.

    Вы за парты дружно сели,

    На меня все посмотрели.

    1. Повторение.

    На доске нарисовать схемы.

    - Что вы видите на доске?

    - А какие это схемы? Они похожи?

    - Как называется 1-я схема?

    - Что вы можете о ней сказать?

    - Из скольких слогов она состоит?

    - Какой слог в этой схеме ударный?

    - Как называется 2-я схема?

    - А из скольких звуков она состоит?

    - Мы можем что-то еще сказать об этой схеме?

    - А как называется 3-я схема?

    - Из скольких звуков она состоит?

    - Какой 1-й звук? Почему?

    - Какой 2-й звук? Почему?

    - Какой 3-й звук? Почему?

    - Какой 4-й звук? Почему?

    - Какой 5-й звук? Почему?

    Вывесить две картинки (кошка и паук)

    - Посмотрите на картинки. Кто на них изображен?

    - Произнесите 1-е слово?

    - Сколько в этом слове слогов? Подставьте ладошку к подбородку и произнесите его.

    - Сколько слогов?

    - Какой 1-й слог?

    - Какой 2-й слог?

    - Позовем слово, чтобы узнать на какой слог падает ударение.

    - Подходит наша 1-я схема?

    - Почему?

    - А теперь послушаем, сколько звуков в этом слове. Послушайте, как это делаю я. (к-о-ш-к-а)

    - Повторим все вместе. Сколько звуков в этом слове?

    - Какой 1-й звук?

    - Какой 2-й звук?

    - Какой 3-й звук?

    - Какой 4-й звук?

    - Какой 5-й звук?

    - Посмотри, подходит ли эта схема ко 2-й схеме?

    - А теперь мы проверим, подходит ли это слово к 3-й схеме.

    - Произнесите это слово по звукам.

    - Какой 1-й звук?

    а) Поется/Не поется

    - Можно ли его пропеть?

    - Попробуйте.

    - А какой он?

    б) Способ образования звука

    - А теперь подставьте ладошку к горлышку и произнесите его.

    - Что вы чувствуете?

    - Правильно! А как же называется это дрожание?

    в) Произношение

    - А теперь подставьте одну ладошку к горлышку, а вторую ко рту. Что происходит?

    - Правильно. Воздух проходит через рот, и мы слышим шум.

    - А что нам мешает при произношении?

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Расскажите об этом звуке. Какой он?

    - Какие три признака этого звука вы знаете?

    - А эти признаки, признаки какого звука?

    - В какой домик мы поселим этот звук?

    - Какой 2-й звук этого слова?

    - Пропойте его.

    - Можно ли пропеть этот звук?

    - Подставьте ладошку к горлу и произнесите этот звук.

    - Что вы почувствовали?

    - А что это было?

    - А теперь мы медленно и протяжно произнесем звук [о].

    - Как были расположены наши зубы?

    - А рот был закрыт?

    - Мешали ли зубы?

    - А как был расположен язык?

    - Что мы узнали о звуке [о]?

    - Какой звук [о]? Перечислите его признаки.

    - Тогда как он называется?

    - В какой домик мы поселим этот звук?

    - Правильно. Теперь произнесем 3-й звук.

    а) Поется/Не поется

    - Пропоем его. Можно ли его пропеть?

    - Почему?

    б) Способ образования звука

    - А теперь, подставьте ладошку к горлу и произнесите его.

    - Что вы почувствовали?

    в) Произношение

    - А теперь, подставьте одну ладошку к горлу, а другую ко рту. Что происходит?

    - Что мы слышим?

    - Значит, что участвует при образовании этого звука?

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Свободно ли проходит струя воздуха?

    - А почему? Что ей мешает?

    - Какая возникает преграда?

    - Назовите 3 признака, которые мы определили.

    - Тогда как он называется?

    - В какой домик мы поселим этот звук?

    - Правильно. Произнесите 4-й звук в этом слове.

    а) Поется/Не поется

    - Можно ли его пропеть?

    - Попробуйте.

    - А какой он?

    б) Способ образования звука

    - А теперь подставьте ладошку к горлышку и произнесите его.

    - Что вы чувствуете?

    - Правильно! А как же называется это дрожание?

    в) Произношение

    - А теперь подставьте одну ладошку к горлышку, а вторую ко рту. Что происходит?

    - Правильно. Воздух проходит через рот, и мы слышим шум.

    - А что нам мешает при произношении?

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Расскажите об этом звуке. Какой он?

    - Какие три признака этого звука вы знаете?

    - А эти признаки, признаки какого звука?

    - В какой домик мы поселим этот звук?

    - Выделите 5-й звук этого слова.

    - Пропойте его.

    - Можно ли пропеть этот звук?

    - Подставьте ладошку к горлу и произнесите этот звук.

    - Что вы почувствовали?

    - А что это было?

    - А теперь мы медленно и протяжно произнесем звук [о].

    - Как были расположены наши зубы?

    - А рот был закрыт?

    - Мешали ли зубы?

    - А как был расположен язык?

    - Что мы узнали о звуке [о]?

    - Какой звук [о]? Перечислите его признаки.

    - Тогда как он называется?

    - В какой домик мы поселим этот звук?

    - Теперь вспомним, какой 1-й звук в слове «кошка»?

    - Какой он?

    - Какой 2-й звук в этом слове?

    - Какой он?

    - Какой 3-й звук в этом слове?

    - Какой он?

    - Какой 4-й звук в этом слове?

    - Какой он?

    - Какой 5-й звук в этом слове?

    - Какой он?

    - Подходит ли нам 3-я схема?

    - Почему?

    - Правильно.

    1. Изучение нового материала.

    1) Структура слог-слияния (С+Г) / 2) Особенности произношения сливания двух звуков при произношении.

    - Что вы можете сказать об этой схеме?

    - Из скольких звуков она состоит?

    - Произнесите, как мы говорим это слово?

    - Как мы произносим звук? По отдельности или вместе?

    - Мы произносим звук «па» и добавляем «ук».

    - Так как мы произносим звуки? Вместе?

    - Звуки [п] и [а] дружат друг с другом в этом слове и поэтому они произносятся слитно.

    - Какой 1-й звук?

    - Какой 2-й звук?

    - Итак, когда в слове 1-й звук согласный, а 2-й гласный – эти звуки дружат друг с другом и произносятся слитно.

    3) Термин «слог-слияние».

    - При произношении эти 2 звука сливаются в один. И когда в слове слог состоит из согласного и следующего гласного звуков, этот слог мы будем называть слог-слиянием.

    4) Схема слог-слияния.

    - Для обозначения этого слога люди придумали схему. И т.к. они дружат мы их поселим в один двухэтажный домик. Они будут жить в одном домике, но на разных этажах.

    - На первом этаже будет жить согласный звук, а на втором – гласный.

    - Каким цветом будет согласный звук?

    - А гласный?

    - Так какой 1-й слог?

    - Из каких звуков он состоит?

    - Как мы будем его называть?

    - Почему?

    - А какой 2-й звук в слове «паук»?

    - А как он произносится в этом слове?

    - Произнесите эти два звука.

    - Сливаются эти звуки или нет?

    - А как мы их произносим?

    - 1-й слог какой?

    - А 2-й слог какой?

    - Итак, в словах встречаются слоги, где 1-й гласный, а 2-й –согласный звуки. Такой слог не сливается.

    - Эти звуки нам тоже нужно будет поселить в домик. Т.к. эти слоги не сливаются, значит они не дружат и поэтому они будут жить в разных домиках.

    - Каким цветом будет домик гласного звука?

    - А согласного?

    - А теперь составим полную схему слова «паук».

    - Из скольких слогов состоит схема слова «паук»?

    - Какой 1-й слог?

    - Почему?

    - Какой 2-й слог?

    - Почему?

    - А сейчас мы также разберем слово «кошка».

    - Что мы можем сказать о схеме слова «кошка»?

    - Из скольких слогов состоит это слово?

    - Произнесите слово так, как мы его говорим.

    - Как мы произносим звуки? По отдельности или вместе?

    - Мы произносим сначала звук «ко», добавляем к нему «ш», а затем «ка».

    - Так как мы произносим звуки, вместе?

    - Звуки [к] и [о] дружат и поэтому мы произносим их слитно.

    - Какой 1-й слог?

    - Какой 2-й слог?

    - Что мы можем сказать об этом слоге?

    - Правильно! И значит мы поселим их?

    - Молодцы!

    - … подойди к доске и напиши схему этого слога.

    - Каким цветом мы покрасим комнату 1-го звука? Почему?

    - А какой 2-й звук этого слова?

    - Каким цветом мы его покрасим? Почему?

    - Какой 3-й звук этого слова?

    - каким он произносится в этом слове?

    - Правильно! Значит где он будет жить?

    - … подойди к доске и напиши схему этого слога.

    - Каким цветом мы покрасим его домик?

    - Какой 3-й слог в этом слове?

    - Как он произносится?

    - Какой 1-й звук в этом слоге?

    - А 2-й?

    - И значит этот слог?

    - Правильно!

    - Куда мы поселим эти 2 звука?

    - В какой домик?

    - Каким цветом мы его покрасим?

    - … подойди к доске и напиши схему этого слога.

    - Из скольких слогов состоит схема слова «кошка»?

    - Какой 1-й слог?

    - Почему?

    - Какой 2-й слог?

    - Почему?

    - Какой 3-й слог?

    - Почему?

    1. Закрепление.

    - А сейчас послушайте загадку.

    Ветви над рекой склонила,

    В реку смотрится уныло.

    (Ива)

    - Посчитайте, сколько в этом слове слогов?

    - Какой 1-й слог?

    - Какой 2-й слог?

    - Поставьте ударение в этом слове.

    - Какой слог ударный?

    - Из каких звуков состоит 1-й слог?

    а) Поется/Не поется

    - Пропойте этот звук. Его можно пропеть?

    б) Способ образования звука

    - А теперь подставьте ладошку к горлышку и произнесите его.

    - Что вы чувствуете?

    - Значит, какой это звук?

    в) Произношение

    - Определите, с помощью чего образуется этот звук.

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Мешает ли нам что-нибудь при произношении?

    - Тогда какой это звук?

    - В какой домик мы его поселим?

    - … подойди к доске и напиши схему этого звука.

    - Из каких звуков состоит 2-й слог?

    - Какой 1-й звук?

    а) Поется/Не поется

    - Можно ли его пропеть?

    - Попробуйте.

    б) Способ образования звука

    - А теперь подставьте ладошку к горлышку и произнесите его.

    - Что вы чувствуете?

    в) Произношение

    - А теперь подставьте одну ладошку к горлышку, а вторую ко рту. Что происходит?

    - А что нам мешает при произношении?

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Какие три признака этого звука вы знаете?

    - А эти признаки, признаки какого звука?

    - Какой 2-й звук в этом слоге?

    а) Поется/Не поется

    - Можно ли его пропеть?

    б) Способ образования звука

    - Определите, какой это звук. Подставьте ладошку к горлышку и произнесите его.

    - Что вы чувствуете?

    в) Произношение

    - А теперь определите, с помощью чего он образован.

    - Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    - Мешает ли нам что-то при произношении?

    - Значит какой он?

    - А теперь назовите 2-й слог слова «ива».

    - … подойди к доске и напиши схему этого слова.

    1. Рефлексия.

    - Что нового мы сегодня с вами узнали?

    _ Когда это происходит?

    - Как слог-слияние обозначается на схеме?

    Урок 67. как выделить слог? - Русский язык - 1 класс

    Конспект по предмету

    «Русский язык» для «1» класса

    Урок № 67 «Как выделить слог?»

    Вопросы, рассматриваемые на уроке.

    на уроке мы повторим какие бывают слоговые модели слова;

    закрепим умение выделять слоги в словах;

    сможем составлять слоговые модели слов

    Глоссарий

    Слог - это часть слова.

    Звуковая модель - схематически записанные звуки, из которых состоит слово.

    Литература

    Основная

    В. П. Канакина В. Г. Горецкий «Русский язык» 1 класс. Учебник для общеобразовательных организаций. Москва «Просвещение» 2014

    Дополнительная

    Справочное пособие по русскому языку. 1–2 классы. Узорова О.В., Нефедова Е.Л. – Москва: АСТ: Астрель, 2013. – 256 с.

    Тренировочные примеры по русскому языку. Задания для повторения и закрепления. 1 класс. Кузнецова М.И. Москва, Издательство "Экзамен", 2014 – 32 с. (Серия "5000 задач")

    Полный курс русского языка: все типы заданий, все виды упражнений, все правила. 1 класс. Узорова О.В., Нефёдова Е.А. – Москва: АСТ: Астрель; Владимир: ВКТ, 2012. – 190, [2]с.

    Занимательный русский язык. 1 класс. Рабочая тетрадь. В 2 ч. Мищенкова Л.В. – М.: 2016 –Ч.1 – 80с., Ч.2 – 80с.

    Язык родной, дружи со мной. А. Шибаев. – Санкт-Петербург, "Детгиз", 2014. – 127с.

    Теоретический материал

    Как составить слоговую модель слова?

    Для того, что бы составить слоговую модель слова, давайте сначала узнаем, как будут обозначаться в схеме звуки.

    красным цветом мы будем обозначать гласный звук

    синим цветом - твердый согласный

    зеленым - мягкий согласный

    слияние слогов мы будем обозначать через черту

    синим и красным мы будем обозначать слияния твердого согласного и гласного

    зеленым и красным - слияние мягкого согласного и гласного

    Давайте составим слоговую модель слова мама

    сначала поделим слово на слоги. в слове два гласных звука (мАмА), значит в слове два слога

    определим слоги слияния

    теперь обозначим в слогах слияния гласные звуки

    дальше выясним какие в слове согласные звуки

    МММа - м в обоих случаях твердый согласный звук

    поставим ударение. маааааааама ,ударение падает на первый слог

    Итак, глядя на слоговую модель слова мама мы можем сказать, что слово сотоит из вух слогов. первый слог - ударный - слог слияния твердого согласного и гласного звуков, второй слог тоже слог слияния твердого согласного и гласного звуков

    Давайте теперь составим слоговую модель слова АПТЕКА

    сначала поделим слово на слоги. в слове три гласных звука (АптЕкА), значит в слове три слога

    определим слоги слияния

    теперь обозначим в слогах слияния гласные звуки

    дальше выясним какие в слове согласные звуки

    ап - п твердый согласный

    те - т мягкий согласный

    ка - к твердый согласный

    поставим ударение

    аптееееека, ударение падает на второй слог

    Итак, глядя на слоговую модель слова аптека мы можем сказать, что слово аптека состоит из трех слогов, первый слог - слог слияния твердого согласного и гласного, второй слог - ударный - слог слияния мягкого согласного и гласного, третий слог - слог слияния твердого согласного и гласного.

    Резюме теоретической части

    У каждого слова есть звуковая модель.

    в звуковой модели звуки обозначаются определенными цветами:

    красным цветом мы будем обозначать гласный звук

    синим цветом - твердый согласный

    зеленым - мягкий согласный

    слияние слогов мы будем обозначать через черту

    синим и красным мы будем обозначать слияния твердого согласного и гласного

    зеленым и красным - слияние мягкого согласного и гласного

    Примеры заданий

    1. Какое из слов подходит к данной звуковой модели?

    щенок

    поле

    зима

    Правильный ответ

    зима

    2. Отправьте слова в столбик с той слоговой моделью слова, которая им соответсвует

    Нина корова пила собака зима копыто

    Правильный ответ

    Нина пила зима

    корова собака копыто

    "Слияние согласного звука с гласным. Алфавит". 1 класс

    Тема. Слияние согласного звука с гласным.

    Знакомство с алфавитом.

    Цели урока. Закрепить знания детей о слиянии согласного звука с гласным;

    продолжить учить составлять звуковые схемы предложений;

    развивать фонетический слух, речь детей, любознательность;

    воспитывать интерес к учебе, стремление учиться, узнавать новое.

    Оборудование. Картинки с изображением льва, школьного автобуса, школы Зверей, слоненка;

    схемы предложений, предметные рисунки, карточки для обозначения звуков;

    наборное полотно; магнитные буквы; листы бархатной бумаги и нитка;

    учебник Горецкого В.Г. “Русская азбука”.

    Ход урока.

    I. Организационный момент.

    Учитель.

    Прозвенел звонок,
    Начинается урок.
    Вы за парты дружно сели,
    На меня все посмотрели.

    II. Актуализация опорных знаний.

    Учитель. Дети, сегодня мы с вами отправимся в гости в город Зверей к таким же школьникам как вы. Но школа эта необыкновенная и ученики в ней тоже необычные. А гидом для нас будет их учитель – Лев.

    Отгадайте на чем мы поедем в гости:
    Дом по улице идет,
    На работу нас везет.
    Не на курьих ножках,
    А в резиновых сапожках.

    (Автобус).

    Учитель. Итак, поехали. Чтобы веселее было ехать, давайте расскажем Льву, как мы учимся в школе. (Дети составляют рассказ о школе).

    Вот мы и приехали. Посмотрим на рисунок. Что вы можете рассказать о школе зверей?

    (Ответы детей).

    Учитель. Составте предложение, соответствующее схеме.

    Дети. – Зверята любят учится.

    - Им нравится школа.

    - Учит их лев.

    Учитель. Что такое предложение? Из чего состоит предложение? Сколько слов может быть в предложении? (Ответы детей).

    (Учитель обращает внимание детей на иллюстрации).

    Лев нам дал еще одно задание: назовите предметы, изображенные на рисунке. С какого звука начинается их название? (Даны рисунки: лось, кот, лев, осёл, улитка, орёл. Учащиеся называют предметы и звуки).

    Учитель.Чем отличается произношение одних звуков от других? (Ответы детей).

    Дети.

    Гласные тянутся в песенке звонкой,
    Могут заплакать и закричать,
    В темном лесу звать и аукать
    И в колыбельке сестренку баюкать,
    Но не желают свистеть и ворчать.

    Дети.

    А согласные согласны
    Шелестеть, шептать, скрипеть,
    Даже фыркать и шипеть,
    Но не хочется им петь.

    Артикуляционная гимнастика.

    Учитель и дети.

    С-с-с – змеиный слышен свист,
    Ш-ш-ш – шуршит опавший лист,
    Ж-ж-ж – шмели в лесу жужжат,
    Р-р-р – моторы тарахтят.

    Учитель. А что такое слог?

    Дети.

    Дружат гласная с согласной
    Образуя вместе слог.
    “Ло” и “си”, а вмести “лоси”
    К нам явились на урок.

    Учитель. Следующее задание учителя Льва : по предметным картинкам составить схемы к словам.

    (Учитель выставляет на доске картинки с изображением лосей, кота, льва. Один ученик работает у доски, остальные - за партой.) Анализируется слово “лоси”.

    Ученик. “Лоси”. В слове два слога. Слог “ло” - в нем два звука, которые образуют слияние согласного [л] с гласным [о] и т. д.

    (Выставляется на наборном полотне две карточки с изображением слияния).

    Ученик. – Кот. В слове один слог; в нем три звука. Два первых звука согласный [к] и гласный [о ], слились и образовали слияние. Третий звук [т ] – согласный, находится за пределами слияния.

    (Выставляет на наборном полотне одну карточку с изображением слияния и одну с изображением согласного звука)

    Третий ученик аналогично проводит работу со словом “лев”.

    Учитель. – Сравните схемы. Что заметили?

    Дети. – Схемы к словам “лев” и “кот” одинаковы.

    Учитель. – Какой вывод можно из этого сделать?

    Дети. – Одна и та же схема может относиться к разным словам.

    Учитель. – Кто сможет написать эти слова?

    (На доске записывают дети слова кот и лев печатными буквами).

    Упражнения на дыхание.

    Учитель. – Автобус сломался, спустило колесо. Давайте его накачаем.

    Встать, ноги врозь, держа в руках воображаемую камеру. На счет “раз” - “два” -  сделать глубокий вдох через рот; “три” - “четыре” - усиленный выдох через рот, имитируя движениями рук увеличивающуюся камеру. Повторить 3-4 раза в медленном темпе.

    III. Изучение нового материала.

    Учитель. – Для того, чтобы написать слово, используют буквы. Сегодня мы и узнаем: какие есть буквы, что это такое, где они “живут”.

    Пусть отгадают первоклассники:

    Чудесные! Прекрасные!
    Гласные! Согласные!
    Разные такие!
    Без них нельзя
    Постичь науки!
    Вы догадались?
    Это …

    Дети. – Звуки.

    Учитель. Да, это звуки.

    Но мы не можем их увидеть!
    Их можно лишь услышать!
    Звуки – невидимки!
    Таинственные гости!
    Их можно лишь услышать!
    Произнести их просим.

    Произнесите звуки, которые вам нравятся.

    (Дети называют звуки).

    Учитель. – А как же хочется увидеть эти звуки. Для этого нужно построить для них домики. У людей есть квартиры, у зверей норки, в которых они живут. Должны где-то жить и звуки. Квартиры у них особенные, их строят карандашом, ручкой, фломастерами, мелом, красками, чем угодно. И называют эти дома буквами.

    Букв - 33. И все они “живут” в городе, который называется алфавитом или азбукой. Посмотрите внимательно в учебнике страницы 22 -23. Все эти буквы мы будем учить. Когда выучим все буквы алфавита, научимся читать любые слова. А человек, который умеет читать, может узнать много интересного и нового из книг.

    IV. Закрепление изученного.

    Учитель. – Ребята, Слоненок в Лесной школе шалил на перемене и рассыпал рисунки и звуковые схемы. Все они перепутались, и теперь он не может понять, какому слову какая соответствует схема.. (У детей на партах лежит рисунок и несколько схем).

    - Помогите Слоненку . Найдите необходимые схемы. (Учитель проверяет соответствие схемы и рисунка).

    - А теперь на листике напишите букву, с которой начинается слово, изображенное у вас на рисунке. Если кто-то знает все буквы и умеет их писать, то напишите это слово.

    Физкультминутка.

    Поросенок Пятачок
    Отлежал себе бочок.
    Встал на ножки,
    Потянулся,
    А потом присел, нагнулся
    И немножко поскакал,
    И на месте пошагал,
    А потом опять прилег.
    Но уже на левый бок.

    (Сидя, повернуть вправо, влево, руки на поясе . Встать, руки вверх и потянуться. Присесть, встать, сделать наклон вперед, выпрямиться. Руки на поясе, прыжки на двух ногах на месте. Руки вниз, шаг на месте).

    Учитель. – А сейчас, ребята, Буквы вам расскажут о себе, а вы поможете им построить домики и расставить их по порядку на магнитной доске. Будьте внимательны!

    Тридцать три родных сестрицы,
    Писаных красавицы.
    На одной живут странице,
    А повсюду славятся!
    К вам они сейчас спешат,
    Славные сестрицы,
    Очень просят всех ребят
    С нами подружиться!
    А, Б, В, Г, Д, Е, Ё, Ж-
    Прикатили на еже.

    -У кого на парте буквы, которые я назвала, расставьте их на магнитной доске в том же порядке.

    (Учитель готовит буквы для детей с учетом их готовности к школе. Дети выходят к доске и выставляют буквы, о которых только что услышали, по порядку.)

    Учитель. – З, И, Й, К, Л, М. Н, О –

    Дружно вылезли в окно.

    (Дети выходят и выставляют буквы).

    - П, Р, С, Т, У, Ф, Х –
    Оседлали петуха.

    (Дети выходят и выставляют буквы).

    - Ц, Ч, Ш, Щ, Э, Ю, Я-
    Все теперь мои друзья.

    (Дети выходят и выставляют буквы).

    -Ъ, Ы, Ь.
    Три сестренки опоздали
    Заигрались в прятки,
    А теперь все буквы встали
    В азбучном порядке.

    - Где нужно поставить эти буквы? (Дети выставляют буквы, сравнивая свою работу с алфавитом, который дан в книге).

    - Познакомьтесь с ними, дети,-
    Вот они стоят рядком.
    Очень плохо жить на свете
    Тем, кто с ними не знаком.

    V. Итог урока.

    Учитель. – Пора прощаться с лесом и его гостеприимными хозяевами. Понравилось вам в гостях в Лесной школе? А на память зверятам давайте сделаем подарки. На бархатной бумаге нитью выложим первую букву алфавита. А возвращаясь домой, давайте вспомним: где же мы с вами сегодня побывали?

    Дети. – Мы были в городе Зверей, в Лесной школе.

    Учитель. – А что мы там делали?

    Дети. – Составляли предложения.

    - Составляли звуковые схемы.

    - Помогли Слоненку подобрать нужную схему.

    - Составляли алфавит.

    - Подарили буквы зверятам.

    Учитель. – Молодцы, ребята. Я думаю, что эта встреча понравилась и вам, и зверятам.

    Литература:

    Волина В.В. Учимся играя. – М.: Новая школа,1994.

    Кудыкина Н.В. Дидактические и занимательные задания для 1 класса. – К.: Радянська школа.,1989.

    Парамонова Л.Г. Русский язык. Правила в стихах. СПб. : Дельта,1999.

    Новоторцева Н.В. Учимся писать . Обучение грамоте в детском саду. – Ярославль: Академия развития, 1998.

    Что такое слияние букв в русском языке. Запоминаем слоги

    Уважаемые родители, для ребят, которые идут в 1 класс, будут очень полезны занятия по составлению звуковой схемы слова.

    Давайте попробуем разобраться, как правильно составить звуковую схему слова или звуковую модель слова. Данный вид работы мы также можем назвать звуко-буквенным разбором слова или фонетическим разбором.

    Фонетика – раздел науки о языке, в котором изучаются звуки языка, ударение, слог.

    Звуки, которые произносит человек, мы называем звуками речи. Звуки речи образуются в речевом аппарате при выдыхании воздуха. Речевой аппарат – это гортань с голосовыми связками, ротовая и носовая полости, язык, губы, зубы, нёбо.

    В русском языке гласных звуков шесть: [а], [о], [у], [э], [ы], [и]. Гласные звуки бывают ударными и безударными.

    Гласные звуки мы будем обозначать красным цветом (условные обозначения для звуков я взяла из программы “Школа России”).

    Предлагаем большой выбор школьных рюкзаков для девочек и мальчиков. В нашем магазине вы можете купить школьный рюкзак для первоклассников и для подростков, а также школьные сумки и мешки для обуви.

    Когда мы произносим согласные звуки, воздух встречает преграду (губы, зубы, язык). Одни согласные состоят только из шума – это глухие согласные. Другие – из голоса и шума. Это звонкие согласные.

    Согласные также делятся на твёрдые и мягкие.

    Твёрдые согласные обозначают синим цветом, мягкие – зелёным.

    По программе “Школа России” слияние гласного звука с согласным мы обозначаем прямоугольником, разделённым наискосок прямой линией, где снизу закрашиваем согласный, а сверху гласный.

    Сделайте из цветного картона или бумаги карточки, чтобы составлять слова. Также понадобятся карточки со знаком ударения и разделительной чертой.

    Можно рисовать схемы в тетради в крупную клеточку. Ещё лучше совмещать оба вида работы.

    Начинайте работу с простых слов – односложных или двусложных.

    Итак, вы сделали карточки и готовы к занятию.

    Подумайте, как заинтересовать ребёнка.

    Может вы научите составлять слова куклу Машу или любимого зайку?

    Или будете отгадывать загадки и составлять схему слова-отгадки?

    А может быть слово (карточка или картинка) спрятаны и вы поиграете в игру “холодно-горячо”?

    Очень хорошо, если вы придумали что-то интересное и появился стимул к работе.

    Фрагмент занятия.

    Отгадай загадку.

    Сидит дед в сто шуб одет.

    Кто его раздевает,

    Тот слёзы проливает.

    Давай, составим схему слова лук.

    1. Делим слово на слоги.

    Произносим с хлопком в ладоши – лук. В этом слове 1 слог.

    2. Из каких звуков состоит слог?

    Произносим протяжно л-у-к.

    Первый звук – [л]. Это твёрдый согласный звук. Второй звук – [у]. Это гласный звук. Звуки [л], [у] сливаются вместе, получается слияние [лу]. Выбираем нужную карточку – слияние твёрдого согласного с гласным звуком.

    Третий звук [к] – твёрдый согласный. Выбираем карточку для твёрдого согласного.

    3. Обозначим звуки буквами. Звук [л] обозначаем буквой “эль”. Звук [у] – буквой “у”. Звук [к] – буквой “ка”.

    Ударение в односложных словах не ставим. В слове один гласный звук, значит он ударный.

    По программе “Школа России” нет обозначений звонкого и глухого согласного. Поэтому можно проявить фантазию и придумать свои обозначения для звонкого и глухого согласного. Например, в игре “Узнай звук” для обозначения звонкого согласного я выбрала колокольчик, а для глухого согласного – смайлик в наушниках. Картинки можно распечатать и использовать в схеме.

    Потренироваться давать характеристику звуку можно в игре.

    Игра

    Дать характеристику звуку вам поможет лента букв.

    На ленте очень хорошо видно какие звуки обозначают буквы.

    Например, буква “эн” обозначает два звука – твёрдый [н] и мягкий [н"]. Поэтому прямоугольник двух цветов – синего и зелёного. Эти звуки звонкие, поэтому сверху – колокольчик.

    Все звуки в верхнем ряду звонкие, а в нижнем – глухие.

    Буква “жэ” обозначает один звук – твёрдый звук [ж]. Поэтому прямоугольник полностью синего цвета. Это звонкий звук.

    Особое внимание надо обратить на йотированные гласные.

    Буквы я, ё, ю, е могут обозначать два звука или один.

    Если они стоят в начале слова или после гласного, они обозначают два звука:

    я [й" а], ё [й" о], ю [й" у], е [й" э]

    После согласного звука они обозначают один звук: я [а], ё [о], ю [у], е [э].

    Составим схему слова Яна.

    1. Делим слово на слоги.

    В этом слове два слога.

    2. Первый слог – я. Это слияние двух звуков – [й"], [а]. Звук [й"] – мягкий согласный, звук [а] – гласный. Выбираем карточку – слияние мягкого согласного и гласного звука.

    3. Ставим разделительную черту после первого слога.

    3. Второй слог – на. Это слияние двух звуков – [н], [а]. Звук [н] – твёрдый согласный, звук [а] – гласный. Выбираем карточку – слияние твёрдого согласного и гласного звука.

    4. Ставим ударение. Находим ударный слог. Говорим слово целиком, выделяя ударный слог. Ударный слог – первый. Чтобы ребёнок понял, что ударение поставлено верно, попробуйте поставить ударение и на второй слог.

    5. Обозначаем звуки буквами.

    Звуки [й"а] обозначают одной буквой – буквой я.

    Звук [н] обозначают буквой “эн”.

    Звук [а] обозначают буквой а.

    Все условные обозначения звуков в статье взяты из программы “Школа России”. Но для нас самое главное, чтобы ребёнок научился давать характеристику звуку, умел работать с моделями. Если ребёнок научился давать характеристику звуку, то заменить обозначение не составит труда.

    Обучение чтению детей – процесс непростой и не быстрый. Когда начинать, родители решают самостоятельно для своего ребенка, и каким образом это делать – тоже. Но существуют методики и пособия, помогающие в этом вопросе. Слоговые таблицы для быстрого чтения дают возможность ребенку легко перейти от стадии изучения отдельных букв к непосредственному чтению по слогам.

    Многие родители и педагоги, попробовавшие занятия с ребенком по слоговым таблицам, довольны результатами. Но чтобы понять, насколько этот инструмент полезен, важно разобраться как его применять, и какие существуют особенности такого обучения.

    Что представляет собой слоговая таблица

    Слоговая таблица скоростного чтения для детей – это столбцы гласных букв и ряды согласных, которые при пересечении создают слоги. На строчке с согласной буквой «Н» получились слоги со всеми гласными буквами: «на», «но», «ну» и т.д. Ребенку гласные «поющие» буквы даются гораздо легче, чем согласные. Поэтому выучив одну из них, например, букву «Н», малыш легко сможет прочитать все слоги, которые можно с ней составить.

    Далее можно переходить к следующей согласной букве и подставлять к ней гласные. Обучение будет проходить легко, ведь табличка наглядная и простая к запоминанию. Для удобства ребенка гласные буквы обозначены красным цветом, а согласные – синим. Ведь цветовое восприятие ребенка тоже будет полезным при изучении слогов и правил чтения.

    Во время занятия ребенок обязательно заметит, что в некоторых ячейках стоит прочерк вместо слога. Важно объяснить ему, что такого сочетания букв, как при пересечении столбца и строчки, не бывает. Например, «ЖЫ» никогда не употребляется, после шипящей согласной всегда ставится гласная «И».

    Елена, мама шестилетней Вари: «Я принципиально не учила дочь раннему чтению, как это делали многие знакомые. И хотя мне все вокруг говорили, что потом будет сложнее, что надо начинать пораньше, я решила дать ребенку возможность больше играть а не учиться. А в 5 лет мы начали учиться читать по слоговым таблицам. Варя выучила буквы за несколько недель, потом за пару занятий по таблицам научилась проговаривать целые слоги, и сейчас читает на уровне первоклашек совершенно самостоятельно» .

    Как правильно и эффективно пользоваться таблицей

    Многие родители, решившись попробовать обучение чтению при помощи слоговых таблиц, интересуются, как пользоваться этим инструментом, и сколько раз в день нужно заниматься с ребенком. Обучение делится на этапы:

    1. Изучение букв.
    2. Складывание их в слоги на пересечении строк и столбцов таблицы.
    3. Чтение слогов, образованных от одной согласной, то есть все слоги из одной строчки.
    4. Распечатка таблицы и вырезание отдельных слогов на карточках.
    5. Чтение слогов вразброс с разных карточек.
    6. Соединение нескольких слогов в простые слова.

    Периодичность и длительность занятия зависят от возраста ребенка. Некоторые родители предпочитают раннее обучение, когда ребенку исполнилось 3 или 4 года, но делают это больше для себя, чем для него. Оптимальный возраст для обучения чтению 5-6 лет, когда начинается подготовка к школе. Тогда заниматься можно дважды в день по 10-15 минут утром и вечером.

    АУОЫИЕЯЁЮЭЬ
    ННАНУНОНЫНИНЕНЯНЁНЮНЭНЬ
    ММАМУМОМЫМИМЕМЯМЁМЮМЭМЬ
    ТТАТУТОТЫТИТЕТЯТЁТЮТЭМЬ
    ККАКУКО-КИКЕ-КЁ-КЭКЬ
    ХХАХУХО-ХИХЕ---ХЭХЬ
    ББАБУБОБЫБИБЕБЯБЁБЮБЭБЬ
    ВВАВУВОВЫВИВЕВЯВЁВЮВЭВЬ
    ГГАГУГО-ГИГЕ-ГЁ-ГЭГЬ
    ДДАДУДОДЫДИДЕДЯДЁДЮДЭДЬ
    ЖЖАЖУЖО-ЖИЖЕ-ЖЁ--ЖЬ
    ЗЗАЗУЗОЗЫЗИЗЕЗЯЗЁЗЮЗЭЗЬ
    ЛЛАЛУЛОЛЫЛИЛЕЛЯЛЁЛЮЛЭЛЬ
    ППАПУПОПЫПИПЕПЯПЁПЮПЭПЬ
    РРАРУРОРЫРИРЕРЯРЁРЮРЭРЬ


    Польза и результаты обучения

    Как сказал однажды выдающийся педагог-новатор и писатель Василий Сухомлинский: «Чтение – это один из истоков мышления и умственного развития».

    Таблицы скоростного чтения обладают множеством преимуществ для обучения детей. К ним можно отнести не только умение читать весь слог, а не его отдельные буквы, но и способность ориентироваться в таблице и быстро находить нужные слоги. Самый сложный этап в обучении чтению – преодолеть барьер между изучением всех букв и умением читать их слитно, а не по отдельности. Использование таблицы поможет перескочить этот этап.

    С первого дня обучения при помощи таблиц ребенок будет иметь понятие, что такое открытый слог, как он формируется и как читается. Регулярные занятия помогут за короткий период освоить навык, и уже в скором времени можно переходить с ребенком на чтение первых книжек по слогам.

    Обучающее видео

    Полное описание

    В статье и таблицах представлен материал, который может быть использован:

    1) для обучения чтению;

    2) для выявления пробелов в знаниях и навыках;

    3) для корректировки ошибочных навыков;

    4) для развития навыка определения мягкости-твердости согласных и правильного подбора гласных;

    5) для усвоения некоторых правил русского языка (ЖИ-ШИ, ЧА-ЩА, ЧУ-ЩУ и др.)

    В статье обобщен практический опыт обучения чтению и звуко-буквенному анализу дошкольников педагога-психолога Воробьевой Н.Ф.

    Комментарии к использованию таблиц:

    1. До использования таблиц взрослый должен помочь ребенку выучить все гласные, структурированные следующим образом (читать по столбцам):

    Возможные варианты:

    вариант 1: Б, В, Ж

    вариант 2: Г, Д, Ш

    вариант 3: З, К, Ц

    вариант 4: Л, М, Ж

    вариант 5: Н, П, Ш

    вариант 6: Р, С, Ц

    вариант 7: Т, Ф, Ж

    вариант 8: Х, Ч, Ш

    вариант 9: Щ, Й, Ц

    3. Желательно, чтобы узнавание и чтение слогов-слияний доводилось до автоматизма.

    4. Редко встречающиеся слоги-слияния выделены мелким шрифтом.

    5. Для восполнения пробелов в обучении чтению или корректировки неадекватных навыков может быть достаточно чтения лишь некоторых соответствующих решаемой проблеме таблиц. Например, ребенок пытается смягчить (произносить мягко) те согласные, которые всегда остаются твердыми. Значит ребенку в этом случае достаточно чтения таблиц для букв Ж, Ш, Ц.

    6. Привычка читать твердые и мягкие согласные парами (например, ТА-ТЯ, ТО-ТЁ, ТУ-ТЮ и т. д.) может помочь ребенку в дальнейшем делать правильный подбор букв и легко различать мягкие и твердые согласные при переходе от звука к букве.

    Таблица 1 (Б).


    Таблица 2 (В)


    Таблица 3 (Г)


    Таблица 4 (Д)


    Таблица 5 (Ж)



    Таблица 6 (З)


    Таблица 7 (Й)


    Таблица 8 (К)


    Таблица 9 (Л)

    Таблица 10 (М)

    Таблица 11 (Н)

    Таблица 12 (П)

    Таблица 13 (Р)

    Таблица 14 (С)

    Таблица 15 (Т)


    Таблица 16 (Ф)


    Таблица 17 (Х)


    Таблица 18 (Ц)


    Таблица 19 (Ч)


    Полное описание

    Этот тренинг является частью цикла тренингов на нашем сайте . Цикл посвящен домашнему репетиторству навыков чтения. Тренинг может полезен как родителям дошкольника, так и педагогам.

    Слог-слияние – это сочетание согласной и последующей гласной, либо сочетание согласной и мягкого знака. Такие буквосочетания - наиболее трудный и важный элемент обучения чтения. Системное представление материала в нашей статье оптимально для обучения чтению. В устной речи при чтении в таких случаях два звука как бы сливаются в один для сочетания согласной и гласной, либо твердый согласный становится мягким.

    Ниже приведена полная таблица распространенных слогов-слияний.


    А

    О

    У

    Ы

    И

    Е

    Я

    Ё

    Э

    Ю

    Б

    БА

    БО

    БУ

    БЫ

    БИ

    БЕ

    БЯ

    БЁ

    БЮ

    БЬ

    В

    ВА

    ВО

    ВУ

    ВЫ

    ВИ

    ВЕ

    ВЯ

    ВЁ

    ВЮ

    ВЬ

    Г

    ГА

    ГО

    ГУ

    ГИ

    ГЕ

    ГЁ

    ГЮ

    ГЬ

    Д

    ДА

    ДО

    ДУ

    ДЫ

    ДИ

    ДЕ

    ДЯ

    ДЁ

    ДЮ

    ДЬ

    Ж

    ЖА

    ЖО

    ЖУ

    ЖИ

    ЖЕ

    ЖЁ

    ЖЮ

    ЖЬ

    З

    ЗА

    ЗО

    ЗУ

    ЗЫ

    ЗИ

    ЗЕ

    ЗЯ

    ЗЁ

    ЗЮ

    ЗЬ

    Й

    ЙА

    ЙО

    ЙЕ

    К

    КА

    КО

    КУ

    КЫ

    КИ

    КЕ

    КЁ

    КЮ

    Л

    ЛА

    ЛО

    ЛУ

    ЛЫ

    ЛИ

    ЛЕ

    ЛЯ

    ЛЁ

    ЛЭ

    ЛЮ

    ЛЬ

    М

    МА

    МО

    МУ

    МЫ

    МИ

    МЕ

    МЯ

    МЁ

    МЭ

    МЮ

    МЬ

    Н

    НА

    НО

    НУ

    НЫ

    НИ

    НЕ

    НЯ

    НЁ

    НЮ

    НЬ

    П

    ПА

    ПО

    ПУ

    ПЫ

    ПИ

    ПЕ

    ПЯ

    ПЁ

    ПЭ

    ПЮ

    ПЬ

    Р

    РА

    РО

    РУ

    РЫ

    РИ

    РЕ

    РЯ

    РЁ

    РЭ

    РЮ

    РЬ

    С

    СА

    СО

    СУ

    СЫ

    СИ

    СЕ

    СЯ

    СЁ

    СЭ

    СЮ

    СЬ

    Т

    ТА

    ТО

    ТУ

    ТЫ

    ТИ

    ТЕ

    ТЯ

    ТЁ

    ТЮ

    ТЬ

    Ф

    ФА

    ФО

    ФУ

    ФЫ

    ФИ

    ФЕ

    ФЯ

    ФЁ

    ФЮ

    ФЬ

    Х

    ХА

    ХО

    ХУ

    ХЫ

    ХИ

    ХЕ

    ХЁ

    ХЮ

    Ц

    ЦА

    ЦО

    ЦУ

    ЦЫ

    ЦИ

    ЦЕ

    ЦЮ

    Ч

    ЧА

    ЧО

    ЧУ

    ЧИ

    ЧЕ

    ЧЁ

    ЧЬ

    Ш

    ША

    ШО

    ШУ

    ШИ

    ШЕ

    ШЁ

    ШЬ

    Щ

    ЩА

    ЩО

    ЩУ

    ЩИ

    ЩЕ

    ЩЁ

    ЩЬ

    В таблице выделены и подчеркнуты слоги, в которых дети наиболее часто делают ошибки. Данная таблица пригодна как для обучения чтению, так и для контроля за усвоением материала.

    Если ребенок знает все буквы – ему легче читать по столбцам, чем по строкам. Взрослый должен контролировать, чтобы чтение слогов-слияний производилось ребенком как бы «автоматически». Обучение чтению можно производить по частям. Рекомендуем взрослым распечатать и сделать несколько рабочих экземпляров таблицы, вычеркивая при обучении и контроле слоги-слияния, который ребенок узнает и быстро читает (то есть навык доведен «до автоматизма»).

    Для обучения чтению и развитию навыка чтения слогов-слияний нами разработан

    Смотрите также статьи:

      Структура слог-слияния (С+Г).

      Особенности произношения сливания двух звуков при произношении.

      Термин «слог-слияние». Этимология.

      Схема слог-слияния.

      Языковой материал:

      Слово со слог-слиянием.

      Слово со слог-слиянием.

      Повторение.

    Согласные и гласные звуки.

    План урока.

    Цель урока: изучить понятие звук и понятие «Слог-слияние».

    Задачи урока: 1) учить детей делать слого - звуковой анализ слова.

    2) познакомить со слог-слиянием.

    3) развивать речь .

    Ход урока.

      Организационный момент.

    Прозвенел звонок,

    Начинается урок.

    Вы за парты дружно сели,

    На меня все посмотрели.

      Повторение.

    На доске нарисовать схемы.

    Что вы видите на доске?

    А какие это схемы? Они похожи?

    Как называется 1-я схема?

    Что вы можете о ней сказать?

    Из скольких слогов она состоит?

    Какой слог в этой схеме ударный?

    Как называется 2-я схема?

    А из скольких звуков она состоит?

    Мы можем что-то еще сказать об этой схеме?

    А как называется 3-я схема?

    Какой 1-й звук? Почему?

    Какой 2-й звук? Почему?

    Какой 3-й звук? Почему?

    Какой 4-й звук? Почему?

    Какой 5-й звук? Почему?

    Вывесить две картинки (кошка и паук)

    Посмотрите на картинки. Кто на них изображен?

    Произнесите 1-е слово?

    Сколько в этом слове слогов? Подставьте ладошку к подбородку и произнесите его.

    Сколько слогов?

    Какой 1-й слог?

    Какой 2-й слог?

    Позовем слово, чтобы узнать на какой слог падает ударение.

    Подходит наша 1-я схема?

    Почему?

    А теперь послушаем, сколько звуков в этом слове. Послушайте, как это делаю я. (к-о-ш-к-а)

    Повторим все вместе. Сколько звуков в этом слове?

    Какой 1-й звук?

    Какой 2-й звук?

    Какой 3-й звук?

    Какой 4-й звук?

    Какой 5-й звук?

    Посмотри, подходит ли эта схема ко 2-й схеме?

    А теперь мы проверим, подходит ли это слово к 3-й схеме.

    Произнесите это слово по звукам.

    Какой 1-й звук?

    а) Поется/Не поется

    Можно ли его пропеть?

    Попробуйте.

    А какой он?

    б) Способ образования звука

    Что вы чувствуете?

    в) Произношение

    Какой 2-й звук этого слова?

    Пропойте его.

    Что вы почувствовали?

    А что это было?

    А рот был закрыт?

    Мешали ли зубы?

    А как был расположен язык?

    Что мы узнали о звуке [о]?

    Тогда как он называется?

    В какой домик мы поселим этот звук?

    Правильно. Теперь произнесем 3-й звук.

    а) Поется/Не поется

    Пропоем его. Можно ли его пропеть?

    Почему?

    б) Способ образования звука

    А теперь, подставьте ладошку к горлу и произнесите его.

    Что вы почувствовали?

    в) Произношение

    А теперь, подставьте одну ладошку к горлу, а другую ко рту. Что происходит?

    Что мы слышим?

    Значит, что участвует при образовании этого звука?

    Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    Свободно ли проходит струя воздуха?

    А почему? Что ей мешает?

    Какая возникает преграда?

    Назовите 3 признака, которые мы определили.

    Тогда как он называется?

    В какой домик мы поселим этот звук?

    Правильно. Произнесите 4-й звук в этом слове.

    а) Поется/Не поется

    Можно ли его пропеть?

    Попробуйте.

    А какой он?

    б) Способ образования звука

    А теперь подставьте ладошку к горлышку и произнесите его.

    Что вы чувствуете?

    Правильно! А как же называется это дрожание?

    в) Произношение

    А теперь подставьте одну ладошку к горлышку, а вторую ко рту. Что происходит?

    Правильно. Воздух проходит через рот, и мы слышим шум.

    А что нам мешает при произношении?

    Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    Расскажите об этом звуке. Какой он?

    Какие три признака этого звука вы знаете?

    А эти признаки, признаки какого звука?

    В какой домик мы поселим этот звук?

    Выделите 5-й звук этого слова.

    Пропойте его.

    Можно ли пропеть этот звук?

    Подставьте ладошку к горлу и произнесите этот звук.

    Что вы почувствовали?

    А что это было?

    А теперь мы медленно и протяжно произнесем звук [о].

    Как были расположены наши зубы?

    А рот был закрыт?

    Мешали ли зубы?

    А как был расположен язык?

    Что мы узнали о звуке [о]?

    Какой звук [о]? Перечислите его признаки.

    Тогда как он называется?

    В какой домик мы поселим этот звук?

    Теперь вспомним, какой 1-й звук в слове «кошка»?

    Какой он?

    Какой 2-й звук в этом слове?

    Какой он?

    Какой 3-й звук в этом слове?

    Какой он?

    Какой 4-й звук в этом слове?

    Какой он?

    Какой 5-й звук в этом слове?

    Какой он?

    Подходит ли нам 3-я схема?

    Почему?

    Правильно.

      Изучение нового материала.

    1) Структура слог-слияния (С+Г) / 2) Особенности произношения сливания двух звуков при произношении.

    Что вы можете сказать об этой схеме?

    Из скольких звуков она состоит?

    Произнесите, как мы говорим это слово?

    Как мы произносим звук? По отдельности или вместе?

    Мы произносим звук «па» и добавляем «ук».

    Так как мы произносим звуки? Вместе?

    Звуки [п] и [а] дружат друг с другом в этом слове и поэтому они произносятся слитно.

    Какой 1-й звук?

    Какой 2-й звук?

    Итак, когда в слове 1-й звук согласный, а 2-й гласный – эти звуки дружат друг с другом и произносятся слитно.

    3) Термин «слог-слияние».

    При произношении эти 2 звука сливаются в один. И когда в слове слог состоит из согласного и следующего гласного звуков, этот слог мы будем называть слог-слиянием.

    4) Схема слог-слияния.

    Для обозначения этого слога люди придумали схему. И т.к. они дружат мы их поселим в один двухэтажный домик. Они будут жить в одном домике, но на разных этажах.

    На первом этаже будет жить согласный звук, а на втором – гласный.

    Каким цветом будет согласный звук?

    А гласный?

    Так какой 1-й слог?

    Из каких звуков он состоит?

    Как мы будем его называть?

    Почему?

    А какой 2-й звук в слове «паук»?

    А как он произносится в этом слове?

    Произнесите эти два звука.

    Сливаются эти звуки или нет?

    А как мы их произносим?

    1-й слог какой?

    А 2-й слог какой?

    Итак, в словах встречаются слоги, где 1-й гласный, а 2-й –согласный звуки. Такой слог не сливается.

    Эти звуки нам тоже нужно будет поселить в домик. Т.к. эти слоги не сливаются, значит они не дружат и поэтому они будут жить в разных домиках.

    Каким цветом будет домик гласного звука?

    А согласного?

    А теперь составим полную схему слова «паук».

    Из скольких слогов состоит схема слова «паук»?

    Какой 1-й слог?

    Почему?

    Какой 2-й слог?

    Почему?

    А сейчас мы также разберем слово «кошка».

    Что мы можем сказать о схеме слова «кошка»?

    Из скольких слогов состоит это слово?

    Произнесите слово так, как мы его говорим.

    Как мы произносим звуки? По отдельности или вместе?

    Мы произносим сначала звук «ко», добавляем к нему «ш», а затем «ка».

    Так как мы произносим звуки, вместе?

    Звуки [к] и [о] дружат и поэтому мы произносим их слитно.

    Какой 1-й слог?

    Какой 2-й слог?

    Что мы можем сказать об этом слоге?

    Правильно! И значит мы поселим их?

    Молодцы!

    Каким цветом мы покрасим комнату 1-го звука? Почему?

    А какой 2-й звук этого слова?

    Каким цветом мы его покрасим? Почему?

    Какой 3-й звук этого слова?

    Каким он произносится в этом слове?

    Правильно! Значит где он будет жить?

    - … подойди к доске и напиши схему этого слога.

    Каким цветом мы покрасим его домик?

    Какой 3-й слог в этом слове?

    Как он произносится?

    Какой 1-й звук в этом слоге?

    А 2-й?

    И значит этот слог?

    Правильно!

    Куда мы поселим эти 2 звука?

    В какой домик?

    Каким цветом мы его покрасим?

    - … подойди к доске и напиши схему этого слога.

    Из скольких слогов состоит схема слова «кошка»?

    Какой 1-й слог?

    Почему?

    Какой 2-й слог?

    Почему?

    Какой 3-й слог?

    Почему?

      Закрепление.

    А сейчас послушайте загадку.

    Ветви над рекой склонила,

    В реку смотрится уныло.

    (Ива)

    Посчитайте, сколько в этом слове слогов?

    Какой 1-й слог?

    Какой 2-й слог?

    Поставьте ударение в этом слове.

    Какой слог ударный?

    Из каких звуков состоит 1-й слог?

    а) Поется/Не поется

    Пропойте этот звук. Его можно пропеть?

    б) Способ образования звука

    А теперь подставьте ладошку к горлышку и произнесите его.

    Что вы чувствуете?

    Значит, какой это звук?

    в) Произношение

    Определите, с помощью чего образуется этот звук.

    Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    Мешает ли нам что-нибудь при произношении?

    Тогда какой это звук?

    В какой домик мы его поселим?

    - … подойди к доске и напиши схему этого звука.

    Из каких звуков состоит 2-й слог?

    Какой 1-й звук?

    а) Поется/Не поется

    Можно ли его пропеть?

    Попробуйте.

    б) Способ образования звука

    А теперь подставьте ладошку к горлышку и произнесите его.

    Что вы чувствуете?

    в) Произношение

    А теперь подставьте одну ладошку к горлышку, а вторую ко рту. Что происходит?

    А что нам мешает при произношении?

    Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    Какие три признака этого звука вы знаете?

    А эти признаки, признаки какого звука?

    Какой 2-й звук в этом слоге?

    а) Поется/Не поется

    Можно ли его пропеть?

    б) Способ образования звука

    Определите, какой это звук. Подставьте ладошку к горлышку и произнесите его.

    Что вы чувствуете?

    в) Произношение

    А теперь определите, с помощью чего он образован.

    Наши зубы сомкнуты, губы прикрыты и язычок расположен внизу.

    Мешает ли нам что-то при произношении?

    Значит какой он?

    А теперь назовите 2-й слог слова «ива».

    - … подойди к доске и напиши схему этого слова.

      Рефлексия.

    Что нового мы сегодня с вами узнали?

    Когда это происходит?

    Как слог-слияние обозначается на схеме?

    Конспект урока по обучению грамоте (чтению) в 1 классе "Гласные и согласные звуки"

    - Заглянула к нам пчела. (Ж-ж-ж-ж-ж.)

    - Волк завыл. (У-у-у-у-у.)

    - Собака зарычала. (Р-р-р-р-р.)

    - Кошка замяукала. (Мяу-мяу.)

    Молодцы! Сколько звуков нас окружает, которые издают насекомые, животные,

    человек! Мы можем слышать шорох, скрип, шелест. Всё имеет свои звуки.

    - Но каждое слово тоже состоит из звуков, которые стоят в строгом порядке. Это речевые

    звуки. Вот сегодня мы и будем разбираться в звуках человеческой речи. Какие они?

    - Какая гостья к нам сегодня пожаловала? (слайд) (Маша из м/ф «Маша и медведь.)

    - Маша покажет звуки, а вы их отгадайте по губам (слайды).

    - Что за звуки загадала Маша? (А, о, у, ы, и, э.)

    - Какие это звуки, ребята? Послушайте про них стихотворение:

    Воздух свободно идёт через рот,

    Нет препятствий разных

    Голос участвует, голос зовёт

    Звук получается … (гласный.)

    - Все певцы и певицы распеваются на этих звуках.

    - Давайте и мы попробуем! Споём «В лесу родилась ёлочка» на звук [а]

    В лесу родилась ёлочка (а-а-а-а-а-а ….)

    Теперь на звук [у] (у-у-у-у-у …)

    [о] (о-о-о-о-о…)

    [ы] (ы-ы-ы-ы-ы …)

    [и] (и-и-и-и-и …)

    [э] (э-э-э-э-э …)

    Звуки легко поются, воздух свободно проходит, произносятся с помощью голоса ( в старину

    голос называли «глас») – поэтому звуки называются гласными: а, о, у, ы, и, э.

    Их ровно шесть и легко всех перечесть: а, о, у, ы, и, э.

    Их ещё называют «гласные – красные». Кто знает почему? (Гласные звуки обозначают на

    схемах красным цветом.)

    - А вот другие звуки произносятся с трудом; мешают преграды: губы, зубы, язык. Согласные

    звуки согласны шелестеть, шептать, свистеть, фыркать, скрипеть, но не хочется им петь.

    - Попробуйте за мной повторить звуки: [ф], [д], [т], [л], [м], [р]

    [ф’], [д’], [т’], [л’], [м’], [р’].

    - Согласные произносятся резко, не тянутся, встречают преграду при произношении.

    - Итак, ребята, какие бывают звуки? (Звуки бывают гласные и согласные.)

    4. Физкультминутка

    Машенька приглашает нас немножко с ней отдохнуть. Встаньте.

    По дорожке, по дорожке

    Скачем мы на правой ножке (скачем)

    И по этой же дорожке скачем

    Скачем мы на левой ножке (скачем)

    По тропинке побежим,

    До лужайки добежим (бежим на месте)

    На лужайке, на лужайке

    Мы попрыгаем, как зайки (прыжки на двух ногах)

    Стоп. Немного отдохнём

    И домой пешком пойдём (шагом на месте)

    5. Продолжение работы по теме урока

    - Составим схему слова ум.

    - Сколько слогов в слове? (Один.) Он же ударный.

    Комплект уроков обучения грамоте 1 класс. ГЛАСНЫЕ И СОГЛАСНЫЕ ЗВУКИ. СЛИЯНИЕ СОГЛАСНОГО ЗВУКА С ГЛАСНЫМ

    Урок 10. ГЛАСНЫЕ И СОГЛАСНЫЕ ЗВУКИ.
    СЛИЯНИЕ СОГЛАСНОГО ЗВУКА С ГЛАСНЫМ

    Цели: дать учащимся представление о гласных и согласных звуках; познакомить со слиянием согласного звука с гласным; развивать умение делить слова на слоги, правильно ставить ударение; развивать речь учащихся.

    Оборудование: учебник; картинка с изображением аиста.

    Ход урока

    I. Мобилизующая часть урока.

    II. Актуализация опорных знаний.

    Вопрос:

    – Из чего состоит наша речь? (Наша речь состоит из предложений.)

    ■ Развитие связной речи учащихся.

     Работа по учебнику: с. 16–17.

    Вопросы:

    – Что вы видите на картинке?

    – Что делают дети?

    – Что делают взрослые?

    – Каких животных видите? Что они делают?

    – Какое время суток изображено на картинке? Почему так думаете?

    Физкультминутка

    III. Формирование новых знаний, умений и навыков.

    На доску вывешивается рисунок с изображением аиста.

    1. Звуко-буквенный анализ слова аист.

    • Беседа с учащимися по вопросам:

    – Давайте произнесем слово аист хором.

    – Запишем схему этого слова:

    – Сколько слогов в этом слове? (Два.)

    – Произнесите первый слог. Сколько звуков вы слышите?

    Учащиеся протяжно произносят несколько раз первый слог и делают вывод, что он состоит из одного звука.

    – Произнесите второй слог. (-ист.)

    – Сколько в нем звуков? (Три.)

    – Произнесем этот слог протяжно, замедленно. (иииссст.)

    – Какой первый звук? (иии.)

    – Какой второй? (ссс.)

    – Какой третий? (т.)

    – Сколько же всего звуков в слове? (Четыре.)

    – Сколько в первом слоге? (Один.)

    – Сколько во втором? (Три.)

    —Каждый звук обозначаем клеточкой. Клеточки располагаются одна за другой слева направо. Длинной поперечной чертой отделяем один слог от другого.

    – Какой слог ударный? (Первый.)

    2. Представление о гласных и согласных звуках.

    —Произнесите слово аист.

    – Как вы думаете, чем отличается первый звук слова от последнего?

    Варианты ответов детей.

    – При произнесении звука [a] выдыхаемый воздух во рту не встречает никаких преград, при произнесении же звука [т] преграда есть – язык и зубы плотно сомкнуты. Те звуки, которые произносятся без преград, поются, – называются гласными.

    Те звуки, которые произносятся с затруднением, как бы через преграду, называются согласными.

    Постановка целей и задач урока.

    ● Работа со схемами.

    — Для того чтобы различать гласные звуки на схемах, обозначим их красным цветом.

    На наборном полотне выставляются два красных квадратика – обозначение гласных звуков [a] и [и] – и добавляются к ним два синих квадратика – обозначение твёрдых согласных звуков [с] и [т].

    Физкультминутка

    3. Введение понятия о слиянии согласного звука с гласным.

    Вопросыпо картинке: с. 16–17.

    – Какое дерево склонилось над прудом? (Ива.)

    – Произнесите первый звук. ([и].)

    – Что можете о нем сказать? (Он гласный.)

    – Посчитайте, сколько слогов в слове ива(Два.)

    – Произнесите второй слог. (-ва.)

    – Сколько звуков вы слышите в этом слоге? (Два.)

    – Какой гласный? (Звук [a].)

    — В слоге -ва два звука тесно между собой связаны, они слились вместе и поэтому произносятся за один раз, без всяких (даже мельчайших) остановок, неразрывно друг от друга. Обозначать такое слияние согласного с гласным мы будем не двумя клеточками, а так:

    При таком изображении видно, что в слоге -ва два звука, слог начинается согласным звуком, а заканчивается гласным, они слиты друг с другом. Вот почему согласный вместе с гласным будем называть слиянием.

    Аналогичная работа проводится со словом осы.

    Физкультминутка

    IV. Закрепление пройденного материала.

     Работа по учебнику: с. 16.

    1) Анализ слова куры.

    Вопросы  и задания:

    – Кто это? (Куры.)

    – Сколько слогов в слове куры(Два.)

    – Произнесем каждый слог протяжно. Сколько гласный звуков услышали? (Два.) Назовите их.

    – Произнесите первый слог. (Ку-.)

    – Что можете о нем сказать? (Два звука, которые образовали слияние согласного с гласным.)

    – Произнесите второй слог. (-ры.)

    – Что можете сказать о нем? (Два звука, которые образовали слияние согласного с гласным.)

    – Составим схему данного слова:

    – Поставьте ударение. (Ударение падает на первый слог.)

    – Произнесите слово целиком с ударением на первом слоге.

    2) Аналогичная работа проводится со словом гуси.

    Вопрос:

    – Почему у слов куры и гуси одинаковые схемы? (Оба слова состоят из двух слогов-слияний, ударение падает на первый слог.)

    3) Слого-звуковой разбор слова голуби (с опорой на схему).

    Вопрос и задание:

    – Сравните схему этого слова со схемами предыдущих слов. Укажите их сходство и различие. (Сходство: все слоги – слияния; ударение падает на первый слог. Различие: в словах куры и гуси два слога, а в слове голуби – три.)

    V. Итог урока. Рефлексия.

    – Что нового узнали на уроке?

    – Что особенно понравилось? Почему?

    – Что вызвало затруднение? Почему?

    Спасибо за урок.

    Как учить типы слогов

    Согласно словарю Вебстера 1828 года, слог - это «буква или комбинация букв, произнесенная вместе или при одном усилии или импульсе голоса». Иногда учителя называют слоги фрагментами слов . Каждый слог должен содержать гласную.

    Как научить слогу

    Ученикам важно распознавать слоги в словах. Когда они могут произносить по одному слогу за раз, орфография становится намного проще.К счастью, научить распознавать слоги несложно. Вот пример диалога для демонстрации вашему ученику, что такое слог:

    • «У всех слов есть слоги. В слове может быть один, два или даже больше слогов ».
    • « Чтение состоит из двух слогов: читает (хлопок) - ing (хлопок)». Чтобы продемонстрировать, хлопайте в ладоши, произнося каждый слог.
    • « Blue состоит из одного слога: blue (хлопок)».
    • Тыква состоит из двух слогов: помпа (хлопок) - кин (хлопок).”
    • «А теперь попробуйте. Хлопайте в ладоши по каждому слогу в слове свинья ».

    Попросите вашего ученика попрактиковаться с этими словами:

    семь

    мыши

    хот-дог

    окно

    грузовик

    бумага

    желтый

    игрушки

    слон

    Еще один хороший метод обучения счету слогов - это положить руку под подбородок.Произнесите слово и посчитайте, сколько раз ваша челюсть отвисает.

    Типы слогов

    Есть шесть типов слогов:

    1. закрытый слог оканчивается согласной. Гласная имеет короткий гласный звук, как в слове летучая мышь .
    2. Открытый слог оканчивается на гласную. Гласная имеет долгий гласный звук, как и в первом слоге фартука.
    3. Слог гласный-согласный-е обычно находится в конце слова.Конечная е молчит и делает следующую гласную перед ней длинной, как в слове имя .
    4. В слоге группы гласных есть две гласные рядом друг с другом, которые вместе произносят новый звук, как в слове юг .
    5. Согласный звук + слог l-e встречается в таких словах, как handle , puzzle и middle .
    6. Слог , управляемый буквой r, содержит гласную, за которой следует буква r. Буква r управляет гласной и меняет способ ее произношения, как в слове car .

    Как наша программа учит типы слогов

    • Все о правописании определил лучшую последовательность для обучения типам слогов для максимального изучения и запоминания.
    • Студенты обретают уверенность в себе и осваивают один слог за раз.
    • Ваша работа в качестве учителя станет намного проще с полными планами уроков с легким сценарием.
    • Плитки с буквами используются для демонстрации типов слогов. Плитки с буквами с особой цветовой кодировкой позволяют легко показать учащимся концепции так, как они запомнят.
    • Программа All About Spelling позволяет вашим ученикам быстро освоить шесть типов слогов.

    Аудиовизуальная комбинация слогов включает динамику, зависящую от времени, вытекающую из сбоя слияния

    Введение

    Связь с экраном создает определенные проблемы для нашего мозга в части интеграции аудиовизуальных (AV) несоответствий из-за асинхронности между звуковыми и визуальными сигналами (например, Facetime, Skype) или несоответствие физических характеристик (дублированные фильмы).Чтобы понять противоречивые аудиовизуальные речевые стимулы, наш мозг в основном сосредотачивается на слуховых сигналах, которые принимаются за основную истину, и пытается отбросить тревожные визуальные сигналы. Однако в некоторых конкретных случаях несоответствие AV остается незамеченным, и слуховые и визуальные входы неявно сливаются в восприятие, которое не соответствует ни одному из них. Возможно, что более интересно, несовместимые AV-стимулы также могут быть , объединенными в составное восприятие, при котором одновременные сенсорные входы воспринимаются последовательно.Эти два различных результата могут быть экспериментально получены с использованием «эффекта Мак-Герка» 1 , где слуховой / аба / дублированный на лицевой дисплей артикулирующий / ага / вызывает восприятие слитого слога / ада /, в то время как слуховой / ага / дублированный на визуал / aba / обычно приводит к смешению комбинированных слогов / abga / или / agba /. Что определяет, будут ли AV-стимулы сливаться 2–4 или объединяться 5 , и лежащая в основе нейронная динамика такого расхождения восприятия пока неизвестна.

    Интеграция аудиовизуальной речи основана на ряде этапов обработки, распределенных по нескольким кортикальным областям, включая слуховую и зрительную корку, левую заднюю височную кору, а также языковые области более высокого уровня левого префронтального 6–9 и переднего височная кора 10, 11 . В этой распределенной сети левая верхняя височная борозда (STS) играет центральную роль в интеграции визуальных и слуховых входов из области зрительного движения (средневисочной коры, MT) и слуховой коры (AC) 12–17 .STS характеризуется относительно плавными свойствами временной интеграции, что делает его устойчивым к естественной асинхронности между слуховыми и визуальными речевыми входами, то есть тому факту, что орофациальные речевые движения часто начинаются раньше, чем звуки, которые они производят 4, 18, 19 . Хотя STS лучше реагирует, когда слуховая и визуальная речь абсолютно синхронны 20, 21 , его активность может справляться с большими временными несоответствиями, отражая широкое временное окно интеграции в порядке длины слога (до ~ 260 мс) 22 .Это большое окно интеграции может быть даже патологически растянуто примерно до 1 с у субъектов, страдающих расстройством аутистического спектра 23 . Тем не менее, обнаружение более коротких височных АВ асинхроний возможно и имеет место в других областях мозга, в частности в дорсальной премоторной области и нижней лобной извилине 24–27 . Таким образом, области STS и IFG обладают разными функциями в интеграции AV-речи из-за их различных свойств временной интеграции 28 .Интересно, что относительная устойчивость к асинхронности может придать STS особую чувствительность к несоответствию физических характеристик в модальностях A и V. Ключевая функция STS, следовательно, может заключаться в устранении несоответствий 29 AV-речевых характеристик посредством процесса, требующего двойной чувствительности к каноническим визуальным движениям (движения губ) и слуховым спектрально-временным сигналам (формантные переходы). Напротив, лобная кора широко связана с обработкой временной информации как в краткосрочной, так и в долговременной памяти 30, 31 .При обработке AV-речи лобная доля может отслеживать и оценивать временную последовательность AV 26 .

    Чтобы охарактеризовать механизм (ы), лежащий в основе интеграции физических речевых характеристик A и V (в STS), мы ранее разработали модель генеративного прогнозирующего кодирования 32 , которая проверяла, можно ли использовать кросс-модальные прогнозы и ошибки прогнозирования для объединения речевые стимулы в различные перцепционные решения, соответствующие слились , т. е. / ada / или вместе , т.е.е., / abga /, перцепты (примечание 1). Модель показала, что рассмотрение временных паттернов в двухмерном (2D) пространстве признаков акустической форманты / губной апертуры 2 nd достаточно для качественного воспроизведения поведения участников для слитных 15, 33 , но также объединенных ответов. 32 . Моделирование показало, что слияние возможно и даже ожидаемо, когда физические характеристики стимула A и V, представленного формантой 2 nd и губой в модели, расположены по соседству с существующим двумерным представлением слога.Так обстоит дело с каноническим стимулом Мак-Гурка, который попадает в область / ada /, когда входной сигнал соответствует / aga / визуальным характеристикам и / aba / слуховым характеристикам. И наоборот, аудиовизуальные стимулы, не имеющие достоверного слогового представления в их 2 и формантах / губах (рис. 1A), приводят к ощущению, что два (квази) одновременных согласных / b / и / g / произносятся последовательно, например комбинация восприятия / abga / или / agba / 34–36 .Учитывая устойчивость STS к асинхронности, процесс комбинация , вероятно, включает дополнительные области мозга, чувствительные к времени AV.

    Рисунок 1.

    (A) Предлагаемые нейрофизиологические механизмы для слияния по сравнению с комбинацией . Мы утверждаем, что после обработки первичными слуховыми зонами и зонами, чувствительными к движению (нижний ряд), AV-входы сходятся в левой верхней височной борозде (STS, средний ряд), которая работает как многомерное пространство признаков, здесь сокращенное до простого 2D-пространства в какие движения губ и 2 и речевых формант являются основными измерениями.STS относительно нечувствителен к асинхронности AV (как показано в B), но кодирует оба физических входа в 2D-пространстве, сходясь на наиболее вероятной причине общего источника речи с учетом этих входов. В визуальном / ага / - слуховом / aba / состоянии координаты в двухмерном пространстве близки к координатам существующего слога / ада /, который выбирается в качестве решения, так что субъект не ощущает конфликта. В визуальном / aba / - слуховом / aga / состоянии отсутствие существующего / aXa / решения при пересечении координат запускает апостериорную реконструкцию наиболее вероятной причины входных сигналов через сложный переход согласных / abga / (истинная временная последовательность) , с редкими временными инверсиями звуковой последовательности / agba / 35 .Оба выхода комбинации требуют дополнительного взаимодействия с чувствительными ко времени (префронтальной и слуховой) областями мозга. Серые стрелки представляют выход STS как считывание областей более высокого порядка. Синие и красные стрелки обозначают визуальный и слуховой входы соответственно. (В). Несоответствующие звуковые (A) и визуальные (V) слоговые речевые единицы / aXa / представлены в критическом временном окне для их интеграции как единый элемент, поступающий из одного источника. Слуховое восприятие - это либо комбинация McGurk fusion / ada / (слева), либо комбинация percept / abga / (справа).

    Эти теоретические данные подтверждают недавнее предположение, что нейронные процессы, лежащие в основе комбинации AV , отличаются от тех, которые участвуют, когда стимулы AV конгруэнтны и для слияния AV 5, 37 . В этом исследовании мы выясняем, включает ли комбинация AV дополнительные процессы, чувствительные ко времени, и пытаемся разделить две альтернативные гипотезы: 1) легко ли включает в себя комбинацию точное обнаружение асинхронности AV (вне STS, скорее всего, в левой IFG). ), и восприятие возникает онлайн из реального порядка, в котором обнаруживается каждая фонема (рис. 1B, правая панель), или 2) вызвана ли ретроспективная реконструкция наиболее правдоподобной AV-последовательности невозможностью для AV-стимулов сойтись на единое 2D-представление (губа / формант) в STS.Последняя гипотеза имеет два экспериментальных следствия, которые мы пытались проверить. Первый заключается в том, что задержка для достижения вероятного решения должна быть больше в комбинации , чем в комбинации fusion , потому что комбинация требует устранения несоответствия AV путем явной сериализации слуховых и визуальных входов в сложный переход согласных (рисунок 1B). Дополнительное время обработки для комбинации по сравнению с fusion должно проявляться как во времени реакции, так и во времени нейронных событий.Второе значение состоит в том, что комбинация должна появиться из раннего AV-сравнения в STS и только впоследствии вовлечь слуховую и (артикуляционную) префронтальную кору, чтобы произвести упорядоченный и артикулируемый новый составной слог. Ожидается, что в этом процессе STS будет играть ключевую роль, и поэтому мы должны наблюдать усиленные функциональные взаимодействия между STS и этими дополнительными областями мозга во время комбинации по сравнению с fusion .

    Результаты

    Чтобы выяснить, является ли объединение AV-стимулов результатом онлайн-чувствительности к AV-асинхронности или из-за сбоя fusion в STS, мы использовали два канонических условия Мак-Гурка, которые приводят к восприятию слияния . 'ada' или 'ata', или комбинированное решение 'abga', 'agba' или 'apka', 'akpa'.Хотя эти стимулы являются искусственными (см. 38–40 для экологически обоснованной аудиовизуальной стимуляции), они позволяют строго параметризовать различные результаты интеграции AV-речи.

    Сначала мы провели два поведенческих эксперимента, проведенных в разных группах участников. В обоих экспериментах использовались слоги гласные-согласные-гласные типа aXa, обозначаемые / aXa / для звука и [aXa] для визуального. Эти AV-стимулы использовались в трех различных условиях: (i) конгруэнтное состояние , в котором слуховые и визуальные входы соответствовали одному и тому же слогу (стимулы / ada / + [ada] и стимулы / ata / + [ata]), и два неконгруэнтных состояния , в которых слуховые и визуальные входы могут вызвать либо (ii) восприятие слияния (стимулы / aba / + [aga] и стимулы / apa / + [aka]), либо (iii) комбинацию восприятия (стимулы / aga / + [aba] и стимулы / aka / + [apa]) (рис. 2C).Все стимулы представляли собой видеоклипы, показывающие, как мужчина или женщина артикулируют aXa-стимулы, принадлежащие семейству фонем «bdg» или семейству фонем «ptk». В первом эксперименте 20 участников выполнили повторное задание. Инструкции были такими же, как и в статье McGurk & MacDonald (1976): участники смотрели видео, и их просили как можно быстрее повторить то, что они «слышали» (рис. 2A), без ограничений по произнесенному слогу. Подробный поведенческий анализ представлен в разделе «Методы».

    Рисунок 2.

    (A) Типичный временной ход аудиовизуальных стимулов. (B) Примеры испытаний из экспериментов 1 и 2. Эксперимент 1: испытания начались с периода фиксации 1 с, за которым последовал видеоролик, показывающий, как говорящий произносит слог. Участники должны были как можно быстрее повторять «услышанный» слог. Эксперимент 2: испытания начинались с письменного слога, состоящего из единиц, за которым последовал короткий видеоролик, показывающий, как говорящий произносит слог. Участников проинструктировали нажимать кнопку как можно быстрее, если письменный слог совпадал со слогом, который они воспринимали из аудиовидеоклипа.(C) Экспериментальные условия, используемые в поведенческих экспериментах и ​​экспериментах MEG. Те же три условия, обозначенные как « конгруэнт », « слияние » и « комбинация », были использованы в поведенческих экспериментах и ​​экспериментах по нейровизуализации. В каждом из условий стимулы объединяли видеодорожку и аудиодорожку и использовали два семейства согласных: «bdg» или «ptk». Правая панель: интересующий ответ (ожидаемый ответ в зависимости от конкретной комбинации AV-стимула ) выделен жирным курсивом.

    AV

    комбинация занимает больше времени, чем fusion

    Мы сравнили зависимые переменные задачи (ответ процентной ставки и время отклика) между тремя условиями ( конгруэнт , fusion и комбинация ) с использованием двух повторяющихся - измеряет ANOVA (см. методы, рисунок 3, таблицу S1, таблицу S2). В повторяющейся задаче (поведенческий эксперимент 1) частота отчетов для каждого интересующего ответа (т. Е. Процент ответов «ada» и «ata» в условиях слияния и конгруэнтных условий , а также процент ответов «abga», «apka» ',' agba 'и' akpa 'в условиях комбинации ) различались в зависимости от условий ( F (2,38) = 275.51, P <.001, частичное η 2 = 0,68), независимо от семейства согласных ( F <1) или пола говорящего ( F <1) (Таблица S2). Субъекты сообщили о большем количестве ответов «ada» и «ata» в условиях конгруэнтного , чем слияния ( t (19) = 8,45, P <0,001, d по Коэну = 0,76) (Рисунок 3A, слева панель), но средние показатели для каждого интересующего ответа не различались в условиях слияния и комбинации ( t (19) = 0.69, P > 0,20, Коэна d = 0,03). Как и ожидалось, в условиях слияния участники в основном сообщали о слитных и слуховых ответах. В условиях комбинации они сообщили в основном о комбинированных ответах, но также о слуховых и визуально-управляемых ответах (таблица S2). В трех условиях анализировались только времена отклика (RT), связанные с интересующими ответами, то есть ответы «ada» и «ata» в условиях конгруэнтных и слияния , а также «abga» - «apka» - Ответы «агба» ​​- «акпа» в условии комбинация .RT различались в зависимости от условий ( F (2,38) = 6,92, P = 0,001, частичное η 2 = 0,65): слог, слышимый в слиянии , повторялся так же быстро, как и в конгруэнтном ( t <1, Cohen d = 0,002), тогда как задержка для повторения услышанных слогов была больше в условии комбинации , чем в конгруэнтных и условиях слияния ( t (19 ) = 3,98, P <.001, Коэн d = 0,61, разница комбинация - конгруэнтная = 198 мс ; t (19) = 3,78, P <0,001, Cohen d = 0,59 разность комбинация - слияние = 191 мс , соответственно) (рис. 3A, правая панель), независимо от согласной семья ( F <1) или пол носителя ( F <1) (Таблица S2). Таким образом, RT показывают, что субъекты медленнее интегрируют несоответствующие аудиовизуальные входы, когда они вызывают комбинированное, а не слитное восприятие.Важно отметить, что время повторения для ‘ada’ или ‘ata’ было одинаковым независимо от того, возникло ли оно из конгруэнтных или неконгруэнтных слогов, показывая, что неконгруэнтность AV не была причиной более медленной RT для комбинации .

    - Таблица S1 -

    Время отклика и процент ответов (в скобках), усредненных по участникам, для каждой категории слогов, произведенных в эксперименте 1, в соответствии с каждым условием (конгруэнтность, слияние и комбинация).

    - Таблица S2 -

    Процент ответов (среднее значение и стандартное отклонение в скобках), усредненный между участниками для каждой категории слогов, в соответствии с полом говорящего, использованным в видео (мужской или женский), и в соответствии с каждым условием ( конгруэнтный, слияние, сочетание), в опыте 1.

    Рисунок 3.

    (A) Зависимые переменные из поведенческого эксперимента 1, задание на повторение слога. (В). Зависимые переменные из поведенческого эксперимента 2, задание на составление пары слогов. (A и B, левые панели) Частота (%) ответов, представляющих интерес для каждого условия, т. Е. Ответов «ada» или «ata» в конгруэнтных условиях и fusion , «abga», «agba», « Ответы apka или akpa в условии комбинации . (A и B, правые панели) Время отклика для интересующих ответов при каждом состоянии АВ.В (A и B) планки погрешностей соответствуют s.t.d. Три звезды указывают на значительную разницу при P <0,001, две звезды указывают на значительную разницу при P <0,01 и n.s. указывают на незначительную разницу ( P > 0,05).

    Хотя этот первый эксперимент поддерживает вторую гипотезу о том, что участники должны быстрее объединять, чем объединять AV-стимулы, эффект может быть искажен из-за сложности планирования и артикуляции более сложной (двойной согласной) комбинации , чем (одиночной согласный) слияние слога.Чтобы решить эту потенциальную проблему, мы провели второй эксперимент, в котором 16 новых участников выполнили задание на спаривание (поведенческий эксперимент 2), где каждое испытание включало письменный слог, за которым следовал видеоклип. Участники должны были определить, соответствует ли слог, отображаемый на экране перед видео, слогу, который впоследствии был услышан (рис. 2B). Интересно, что оценка для каждого интересующего ответа в каждом состоянии была аналогична баллу для повторной задачи (рис. 3B, левая панель).Испытуемые лучше идентифицировали конгруэнтный , чем инконгруэнтный стимул ( F (2,30) = 30,26, P <0,001, частичное η 2 = 0,27). Кроме того, участники быстрее сопоставляли письменный слог с видео в условиях congruent и fusion , чем в условиях комбинации ( F (2,30) = 6,84, P <.001, частичное η 2 = 0,92; разность комбинация - конгруэнтная = 206 мс, t (15) = 3.06, P = 0,08, Коэн d = 0,58; разница комбинация - слияние = 186 мс, t (15) = 2,82, P = 0,018, Коэн d = 0,54; разница слияние - конгруэнтно = 20 мс, t (15) = 0,39, P = 0,694, Коэна d = 0,08), что подтверждает наши предыдущие результаты (рис. 3B, правая панель) и показывает, что дополнительная задержка для комбинации не связана с дополнительной сложностью артикуляции.Эти данные в целом предполагают, что несоответствие AV было легче разрешить в случае слияния , чем с условием комбинации , и что интеграция неконгруэнтных AV-стимулов предположительно зависит от различных нейронных процессов в зависимости от того, сливаются ли индивидуумы или объединяются конфликтующие AV. входы.

    Глобальная динамика мозга комбинации AV

    Чтобы исследовать нейронную основу комбинации AV , мы записали активность мозга во время восприятия конгруэнтных и неконгруэнтных стимулов AV с помощью магнитоэнцефалографии (МЭГ).Участники смотрели видео, в которых говорящий произносит слог, и сообщали, какой слог они слышали среди 5 альтернатив (например, «aba», «ada», «aga», «abga», «agba» в семействе «bdg» и «apa»). ',' ата ',' ака ',' апка ',' акпа 'в семействе' птк '). Ответы субъекта были намеренно задержаны, чтобы избежать временного перекрытия между процессами восприятия / принятия решений и двигательными эффектами из-за нажатия кнопки. Таким образом, время отклика не является здесь релевантными данными, и мы рассматриваем только показатели отчета (рисунок 4), которые были рассчитаны для каждого условия, включая совпадающие ответы (т.е., / ada / или / ata /) в конгруэнтном условии , слитые ответы (т.е. «ada» или «ata») в условии fusion и комбинированные ответы (либо VA, то есть «abga» или 'apka', или AV, то есть 'agba' или 'akpa') в условии комбинация . Чтобы выяснить, были ли компоненты мозговой сети интеграции AV в первую очередь чувствительны к асинхронности или к физическим характеристикам AV (формант и движение губ), и как эти две переменные влияют на комбинацию по сравнению с fusion , мы также изменили задержку между звуком. и визуальные слоги.Мы использовали 12 различных асинхронных сигналов начала стимула во временном окне в диапазоне от -120 мс аудио-опережения до аудио-задержки 320 мс (шаг 40 мс), окна, соответствующего диапазону, в котором ожидается, что fusion ответов будут преобладать над слуховыми реакциями. 4 ; следовательно, максимальное количество отчетов fusion (рис. 4). Этот диапазон асинхронности был выбран, чтобы не нарушать процесс интеграции, поскольку в пределах этого временного окна входы A и V воспринимаются как одновременные 22, 41 .Таким образом, мы можем исследовать чувствительность к асинхронности AV независимо от каких-либо изменений в поведении. В этой задаче реакция процентной ставки различалась в зависимости от условий ( F (2,30) = 15,99, P <0,001), независимо от семейства согласных ( F (1,15) = 1,98, P = 0,16), пол говорящего ( F <1) или асинхронность (F <1) (подробную статистику см. В таблице S3).

    - Таблица S3 -

    Поведенческие результаты эксперимента MEG. В верхней части таблицы представлены результаты ANOVA.В нижней части таблицы представлены результаты анализа линейной регрессии между каждым условием и асинхронностями.

    Рис. 4. Эксперимент

    MEG, поведенческие результаты. Скорость отклика зависит от асинхронности начала стимула (SOA) между зрительными и слуховыми стимулами. Асинхронность начала отрицательного стимула указывает на то, что слух опережает зрительный ввод, тогда как асинхронность начала положительного стимула показывает, что слух отстает от визуального. Планки погрешностей соответствуют s.e.m. На левой панели показаны ответы в условиях конгруэнтного и слияния : реакция процентных ставок в условиях слияния и конгруэнтного (закрашенные квадраты), скорость слухового отклика в условиях слияния (темно-серые звезды) и визуальная скорость отклика в состоянии fusion (темно-серые ромбы).На правой панели показаны ответы только в комбинации : реакция процентной ставки, т. Е. Комбинированные ответы VA (зрительно-слуховые) (светло-серые квадраты) и AV (аудиовизуальные) комбинированные ответы (светло-серые квадраты) в Комбинация Условие , частота слуховой реакции в состоянии комбинации (светло-серые звезды) и частота визуальной реакции в состоянии комбинации (светло-серые ромбы).

    После проверки глобальной достоверности результатов в пространстве датчиков (рис. S1) мы использовали моделирование динамического источника данных MEG, чтобы исследовать глобальную динамику комбинации AV относительно условий слияния и (рис. S3). .Мы проанализировали вызванную активность в шести областях интереса, показавших самый сильный эффект неконгруэнтности (несовпадение> конгруэнтность): а именно: левый PAC (первичная слуховая кора), MT (средневисочная зрительная область), STS (верхняя височная борозда), STG (верхняя височная борозда). Gyrus), IFG (нижний фронтальный Gyrus) и ATC (передняя височная кора) (см. Рис. S2 для пространственного расположения соответствующих разведчиков). На рисунке 5 показаны основные контрасты условий для STS и IFG (см. Рисунок S4 для результатов по всем регионам).Мы обнаружили общий статистический эффект комбинации по сравнению с конгруэнтным слиянием и по сравнению с конгруэнтным в STS в ~ 100 мс до начала слухового стимула (рисунок 5, синий и красный), что указывает на то, что STS может сигнализировать о предстоящем несоответствии AV. , предположительно на основе визуальной информации ( 29, 42, 43 , см. также следующий анализ данных). Это был единственный момент времени и место, где комбинация fusion и комбинация имела аналогичный образец ответа. Важно отметить, что комбинация была связана с более плотным паттерном активности, чем fusion как в IFG, так и в STS. Комбинация вызвала повышение активности до аудио в IFG на -80 мс, за которым последовало увеличение активности в IFG на + 120 мс, в STS на + 350 мс и снова в IFG на +750 мс. На рисунке 5 дополнительно показан более кратковременный эффект в левой верхней височной области (~ 350 мс после появления слухового стимула). Комбинация также была связана со снижением специфической нейронной активности на ~ 200 мс в левом STS и на ~ 350 мс в левом IFG, которые трудно интерпретировать с использованием прямых сравнений по условиям.Эти первые результаты дают общую картину последовательности событий, действующих в нашей экспериментальной парадигме, и хотя все события нельзя объяснить простыми контрастами, общий анализ показывает, что комбинация связана с улучшенной обработкой как в STS, так и в IFG.

    Рис S1.

    Профили отклика в пространстве датчика МЭГ. (A) реакция, вызванная визуальными стимулами (видео после черного экрана) от активности, измеренной с помощью градиометров (вверху) и магнитометров (внизу).(B) реакция, вызванная слуховыми стимулами, то есть при согласной вспышке стимулов, от активности, измеренной с помощью градиентометров (вверху) и магнитометров (внизу).

    Рис S2.

    Области интереса: левая первичная слуховая кора (PAC), левая средневисочная кора (MT), левая верхняя височная извилина (STG), левая верхняя височная борозда (STS), левая нижняя лобная извилина (IFG) и левая передняя височная кора (АТС).

    Рис S3.

    Вызванное связанное поле в каждом состоянии (конгруэнтное синим, слияние красным и сочетание желтым) в каждой интересующей области.Спектрограммы являются примерами, которые используются для иллюстрации того, как нейронная активность привязана к слуховому сигналу.

    Рис S4.

    Различия в связанной с событием активности между условиями в шести областях интереса, т. Е. PAC, STG, STS, ATC, MT и IFG (слияние> конгруэнтные условия синим цветом, комбинация> конгруэнтные условия красным, комбинация> условия слияния желтым) . Звездочки указывают на значимые значения t-критерия Стьюдента, которые оценивались для каждой разницы: условия слияния и конгруэнтные условия выделены синим цветом, комбинация против условий.конгруэнтные условия показаны красным, комбинация и условия слияния отмечены желтым ( P <0,05, скорректировано для множественных сравнений с использованием FDR). PAC. первичная слуховая кора; СТГ. верхняя височная извилина; СТС. верхняя височная борозда; УВД. Передняя височная кора; MT. MedioTemporal Cortex; IFG. нижняя лобная извилина

    Рис. 5.

    Различия в связанной с событием активности между состояниями в двух областях интереса, то есть в STS и IFG ( слияние > конгруэнтных условий синим цветом, комбинаций > конгруэнтных условий красным цветом, комбинация > условия слияния желтым цветом).Звездочки указывают на значимые значения t-критерия Стьюдента , которые оценивались по для каждой разницы: слияния против конгруэнтных условий синим, конгруэнтных условий красным, комбинация против слияния желтым ( P ) <0,05, с поправкой на множественные сравнения с использованием FDR).

    Шаблоны направленной связи для

    Fusion по сравнению с комбинацией

    Поведенческие результаты и данные MEG моделирования динамического источника показывают, что комбинация AV была более требовательной, чем fusion , что позволяет предположить, что объединение несовпадающих стимулов может потребовать дополнительных ресурсов и, возможно, другая нейронная сеть, чем их объединение.Основываясь на предыдущей работе по моделированию 32 , мы предположили, что левая STS играет ключевую функцию, то есть что участие дополнительных нейронных ресурсов для комбинации может быть вызвано невозможностью локально сойтись на бимодальном слоговом решении. Для дальнейшего изучения этой гипотезы мы сначала исследовали направленную функциональную связь между 6 ранее определенными интересующими областями левого полушария (ATC, IFG, STS, STG, MT и PAC) с использованием динамического причинно-следственного моделирования (DCM).Этот анализ не был разрешен во времени, поэтому показал только доминирующие модели подключения на протяжении экспериментальных испытаний. Мы обнаружили, что fusion и комбинация имела радикально разную нейронную динамику, характеризующуюся доминирующей модуляцией прямой связи и обратной связи от и к STS, соответственно (Рисунок 6). Fusion был связан с увеличенной связью от STS к ATC и MT и уменьшением от MT к STS, что согласуется с распространением решения fusion на регионы более высокого порядка и обновлением визуального представления движения в зависимости от решение разработано в СТС.В соответствии с предыдущими исследованиями, показывающими, что визуальное предсказание речи может напрямую влиять на активность слуховой коры 39, 44 , возможность подключения также увеличилась от MT к PAC и уменьшилась от PAC к ATC во время слияния . Напротив, комбинация была связана с увеличением возможности подключения от IFG и PAC к STS. Наконец, возможность подключения также увеличилась от PAC к STS и IFG и уменьшилась от STS к ATC, от ATC к IFG, от STG к PAC.

    Рисунок 6.

    Динамическое причинно-следственное моделирование (DCM) связи с использованием реакции, связанной с событиями, в шести основных регионах, участвующих в интеграции аудиовизуальной речи. Кружки представляют собой выбранные источники: первичная слуховая кора (PAC), средневисочная кора (MT), верхняя височная извилина (STG), левая верхняя височная борозда (STS), нижняя лобная извилина (IFG) и передняя височная кора ( УВД). Все соединения и их значения отражают повышенную или пониженную возможность соединения ответов fusion (A) и комбинации (B) по сравнению с ответами в условии congruent .Мы проверили различия между условиями, используя параметрические эмпирические байесовские модели (PEB). Вместо того, чтобы сравнивать разные сетевые архитектуры, мы выполнили апостериорный поиск, отбросив параметры, которые не вносили вклад в свидетельство модели (p <0,05). В результате получается разреженный график, на котором показаны связи, которые в значительной степени способствовали доказательству модели. Красные пунктирные линии: ограниченное соединение; Синие линии: улучшенная связь.

    Результаты функциональной связности подтверждают центральную роль STS как в fusion , так и в комбинации .Они также показывают, что в слиянии STS отправляет информацию (предположительно об идентифицированном слоге) в другие области мозга для распознавания и обновления сенсорного представления, тогда как в комбинации он централизует информацию из областей более высокого порядка, возможно, из областей, которые являются более чувствителен к точному времени AV-событий, чем STS. Важно отметить, что эти результаты показывают, что возможность подключения к IFG была улучшена только в комбинации .

    Временная чувствительность и нейронные детерминанты

    Комбинация vs. Fusion

    Как и предполагалось, наблюдаемая задержка поведенческой реакции и специфическая чувствительность IFG для комбинации могут быть объяснены двумя различными нейронными механизмами. IFG может напрямую отслеживать входы A и V в режиме онлайн, или он может ретроспективно реконструировать порядок AV после сбоя fusion в STS. Чтобы решить проблему временной чувствительности во время обработки AV-речи и выяснить, является ли результат комбинации результатом одного или нескольких конкретных нейронных событий, мы использовали общую линейную модель (GLM).Мы регрессировали нейронную активность с синхронизацией слухового входа для каждой из шести областей интереса в каждый момент времени по ключевым экспериментальным количествам (полное описание GLM см. В Методах): (i) отверстие губ , связанное с условием стимула со значениями [1, 0,6, 0,37] для [ Комбинация , Конгруэнт , Fusion ] (Рис. S5), (ii) второй формант , связанный с условием стимула со значениями [0,5, 0,5, 0,2] для [ Комбинация , Конгруэнт , Fusion ] (Рис. S5), (iii) AV-асинхронность значений (от 0 мс до 320 мс), независимо от того, идет ли слуховой или визуальный сигнал первым, (iv) AV физический неконгруэнтность , связанная со стимулом, т.е.е. конгруэнтно инконгруэнтному движению губ / 2 и формантных паттернов, (v) комбинированных выходных данных, т.е. ответов участников со значением 1, если входы AV были объединены, или 0, если они не были объединены, и (vi) объединенного выхода с значение 1, когда входы AV были объединены, и 0, когда они не были.

    Рис S5.

    Стимульные особенности. Верхняя панель: Измерение амплитуды движения губ и 2 формант и после высвобождения согласных для каждого из 20 стимулов в каждой категории стимулов семейства «bdg».Ромбами показаны медианные значения для каждого типа стимула. Амплитуда движения губ соответствует разнице апертуры губ между максимальной апертурой на гласных и минимальной апертурой при окклюзии согласных в середине: ((max_lip aperture 1-min lip aperture) + (max_lip aperture 2-min lip aperture)) / 2. Расположение конгруэнтных стимулов ага и аба дано для справки, они не были представлены участникам исследования. Нижняя панель: спектрограмма семплов воспроизведения звуков / aba /, / ada / и / aga /.

    В соответствии с прямым сравнением экспериментальных условий и анализом DCM, основной эффект физического несоответствия AV (рис. 7A) был значительным сначала в STS в течение периода времени от 150 мс до 70 мс перед началом звука. В наших экспериментальных условиях второй вход можно было предсказать из первого: участники всегда получали / ada / + [ada] в конгруэнтном состоянии, или / aba / + [aga] в условии fusion , или / aga / + [aba] в условии комбинация .Эта высокая предсказуемость, по-видимому, объясняет, что кросс-модальные эффекты возникли очень рано в STS (рис. 7A и рис. S6), как показано ранее 44 . Сильные прогнозы, вероятно, были результатом чрезмерно изученных АВ-ассоциаций и краткосрочных адаптаций, которые могут произойти в текущих экспериментальных условиях 45 . Включая изменение апертуры губ в зависимости от условий в GLM, мы могли подтвердить, что апертура губ в первую очередь отражалась на активности STS до начала звука и, следовательно, могла отражать прогноз последующего несоответствия (рис. 7A и рис. S6). ).Взаимодействие между апертурой губы и AV-несоответствием было значимым только до слухового начала, тогда как взаимодействие между слуховыми особенностями и AV-несоответствием никогда не было значимым. Вместе эти результаты показывают, что неконгруэнтность AV может отражать эффект ожидания до слухового начала, но реальный процесс AV интеграции после слухового начала.

    Рис S6.

    Результаты анализа GLM в четырех областях интереса (STS, IFG, STG и PAC). Толстые горизонтальные линии и светло-серые области указывают временные окна, в которых оценки параметров значительно отклоняются от нуля при временном скорректированном по кластерам p-значении, равном 0.05. Заштрихованные границы ошибок указывают на s.t.d. СТС. верхняя височная борозда; IFG. нижняя лобная извилина; СТГ. верхняя височная извилина; PAC. первичная слуховая кора.

    Рисунок 7.

    Результаты анализа GLM, показывающие временную динамику нормализованного бета в двух областях, представляющих интерес, то есть STS и IFG. (A) Корреляция между активностью STS и регрессорной AV-неконгруэнтностью возникает значительно до слухового начала, в то же время, когда активность STS коррелирует с апертурой губ.(B и C) Корреляция между IFG и асинхронностью AV достигает пика около -50 мс и прекращается, как только слитное восприятие идентифицируется в STS, но длится до 200 мс после начала слухового стимула, когда входы AV не могут быть объединены (т. Е. в состоянии комбинации ). (D) Комбинированное восприятие коррелирует в IFG на ∼700 мс, после рекурсивной обработки неконгруэнтности AV в STS. Толстые горизонтальные линии и светло-серые области указывают временные окна, в которых оценки параметров значительно отклоняются от нуля при временном скорректированном по кластерам p-значении, равном 0.05. Заштрихованные границы ошибок указывают на s.t.d. СТС. верхняя височная борозда; IFG. нижняя лобная извилина

    Подтверждая контраст вызванных ответов, показанных на рисунке 5, физическая неконгруэнтность AV также положительно коррелировала с нейрональной активностью в STS через ~ 50 мс после слухового входа (рисунок 7A). Этот эффект происходил параллельно с отслеживанием изменений во втором форманте (рис. S6), отражая реальный процесс интеграции в STS, а не простое ожидание. Важно отметить, что эффект неконгруэнтности остановился на ~ 50 мс для fusion , но повторился на 400 и 600 мс в комбинации (рисунок 7D, внизу и рисунок S6).

    Подтверждая недавнюю литературу, AV асинхронность отражалась в первую очередь в нейронной активности IFG (от 20 мс до начала слухового стимула до 200 мс после его появления), но также и в PAC (около 300 мс после начала слухового стимула) (Рисунок 7B и Рисунок S6). ). Последовательность положительных коэффициентов в IFG, а затем в PAC говорит о роли IFG в контекстуализации процесса сенсорной интеграции 46, 47 , поскольку AV-асинхронность, вероятно, напрямую запускает ожидания и, возможно, связанные процессы памяти 48 .Важно отметить, что в fusion эффект асинхронности AV в IFG быстро снизился (50 мс после аудио), тогда как в комбинации он снова возник через 100–200 мс (рис. 7C). Повторяемость эффектов неконгруэнтности в STS и эффектов асинхронности в IFG в комбинации , но не fusion , согласуется с поведенческими данными, указывающими на то, что комбинация требует больше времени, чем комбинация fusion .

    Наконец, слитные восприятия от слияния стимулов (рис. 7B) были отражены в активности STS, как только возник слуховой стимул, предположительно сигнализируя о возможном совпадении с визуальным ожиданием.За этим эффектом последовал значительный эффект fusion в STG через 400 мс после начала слухового стимула, что, возможно, отражает то, что слог, выбранный для STS, имеет фонологическую достоверность (рис. S6). В отличие от слитных восприятий, комбинированные восприятия включали активность в STS, PAC и IFG, причем все они достигают пика примерно через 700 мс после начала слухового стимула (рис. 7D и рис. S6). Эта поздняя активность указывает на то, что, когда вход AV не соответствовал известному слогу (невозможно слияние ), набор областей, ранее участвовавших в обнаружении физического несоответствия AV (0-100 мс), был повторно активирован для генерации комбинированного восприятия (рис. 7D). и Рис. S6).Эта комбинация позднего Эффект может сигнализировать о разработке комбинации двойных согласных, сначала индексируя две отдельные позиции в мультисенсорном пространстве признаков в STS, и упорядочивая их в левой префронтальной чувствительной ко времени области для последующей артикуляции.

    В целом эти результаты показывают, что STS не участвует в обнаружении асинхронности AV, но может предсказать входной слуховой сигнал на основе визуального стимула и может быстро обнаружить несоответствие AV независимо от последующего результата ( fusion или комбинация ).В случае слияния активность STS быстро падает по мере того, как он сходится к раствору, тогда как в комбинации AV активность, чувствительная к времени, повторно возникает в IFG вместе с эффектом неконгруэнтности в STS. Все PAC, IFG и STS проявляют устойчивую активность до тех пор, пока не будет получен комплексный (согласная последовательность) решение. Важно отметить, что последовательность нейронных событий в комбинации завершается поздним эффектом в IFG, который не отражает асинхронное отслеживание (рис. 7B), но, по-видимому, представляет собой более абстрактный процесс синхронизации, вероятно, ретроспективно упорядочивающий AV-стимулы.

    Нейронное декодирование идентичности слога для

    Fusion по сравнению с комбинацией

    Установив, что STS может быстро обнаруживать несоответствия между слуховыми и визуальными физическими характеристиками и что IFG чувствителен к асинхронности AV, мы постулировали эту слоговую идентичность комбинированные слоги (т. е. «абга», «агба», «апка» или «акпа») могут быть декодированы на основе нейронной активности как IFG, так и STS, тогда как слоговая идентичность слитых слогов (например, «ада» или «ата») ) может быть декодирован только из STS.

    Таким образом, мы исследовали, содержит ли нейронная активность, выраженная в STS и IFG, достоверную информацию об идентичности слогов, используя два анализа декодирования в испытаниях с интересующими ответами, чтобы классифицировать (1) 'abga', 'agba', 'apka' и ' akpa 'ответы на комбинацию условие против ответов' ada 'и' ata 'из конгруэнтного условия, (2) ответы' abga ',' agba ',' apka 'и' akpa 'на комбинацию условие против' ada 'и' ata 'из условия fusion (рисунок 8B и рисунок S7).Мы использовали декодирование с временным разрешением , чтобы отслеживать последовательность распространения информации. В соответствии с предыдущими выводами 49 , мы заметили, что локальная вызванная активность из одного региона была достаточно различимой, чтобы разрешить категоризацию по слогам с использованием классификатора максимального коэффициента корреляции (см. Методы). Мы определили, связаны ли нейронные реакции с комбинацией и . конгруэнтные восприятия могут быть разделены (рис. 8А). Нейронные данные могут быть классифицированы в IFG уже через ~ 360 мс после появления слухового стимула, а затем в STS через ~ 380 мс (рис. 8A).Напротив, нейронные ответы, связанные с объединенными и слитными восприятиями, можно было различить только в STS на ∼170 мс, ∼340 мс и ∼650 мс после появления слухового стимула (Рисунок 8B). Эти анализы подтвердили два важных момента: (1) комбинация была единственным восприятием, которое можно было декодировать по нейронной активности вне STS, подтверждая решающее значение IFG при объединении противоречивых AV-входов; (2) комбинированные и слитые слоги вызвали различимую активность STS на ∼170 мс, предполагая, что с этого момента невозможность слияния AV-входов в STS была восприимчива к запуску последовательности событий, ведущих к идентификации комбинированного слог.

    Рис S7.

    Расшифровка левой первичной слуховой коры (PAC), левой верхней височной извилины (STG), левой верхней височной борозды (STS), левой нижней лобной извилины (IFG). (A) Динамика результатов (нормализованного) одномерного классификатора для комбинированных и конгруэнтных восприятий. (В). Временной ход (нормализованных) результатов одномерного классификатора для слитного восприятия по сравнению с комбинированным восприятием.

    Рис. 8.

    Декодирование в левой верхней височной борозде (STS) (левые панели) и нижнем лобном гирусе (IFG) (правые панели).(A) Динамика одномерной классификации (точности) для ответов «abga», «agba», «apka» и «akpa» из , комбинация по сравнению с ответами «ada» и «ata» из конгруэнтных . Однофакторная классификация интересующих ответов от конгруэнтного и комбинации была возможна в IFG при ∼360 мс и в STS при ∼380 мс. (B) Динамика одномерной классификации (точности) для ответов «abga», «agba», «apka» и «akpa» из комбинации vs.Ответы «ada» и «ata» из fusion . Однофакторная классификация представляющих интерес ответов от условий слияния и сочетания была возможна в STS на ∼170 мс, ∼340 мс и ∼650 мс, но не в IFG.

    Обсуждение

    В то время как механизмы, приводящие к слиянию аудиовизуальной речи , относительно хорошо изучены, механизмы, приводящие к комбинации аудиовизуального стимула , все еще неизвестны. Основываясь на предыдущей вычислительной модели, мы предположили, что комбинация AV следует из сложности отображения слуховых и визуальных физических характеристик в мультисенсорном пространстве, предположительно расположенном в левом STS 32 .Комбинация AV , следовательно, приведет к более требовательной последовательности обработки, чем AV-слияние, возможно, включая пост-произвольное временное изменение порядка слухового и визуального ввода. Модель была адаптирована к стимулам Мак-Гурка и, следовательно, хорошо работала только с губами и 2 формантными значениями и (хотя, по-видимому, в интеграции AV-речи задействовано больше функций). Согласно этой простой 2-мерной модели, слияние происходит, когда физические характеристики дискордантных AV-стимулов приближаются к тем, которые соответствуют лексически правдоподобному и простому (одиночный переход согласного) речевому представлению, тогда как комбинация возникает, когда физическая функции не находят функций сопоставления AV (рис. 1A).С этой точки зрения, после сбоя fusion , комбинация требует дополнительной обработки, возможно, лобными областями, чтобы скрыто генерировать правдоподобный речевой звук, совместимый с входом AV. Альтернативный сценарий может заключаться в том, что слияние происходит, когда асинхронность AV не обнаруживается (например, потому что зрительный стимул является слабым предиктором), тогда как комбинация возникает, когда начала A и V могут быть последовательно восприняты (например, сильный визуальный предиктор) .Два сценария приводят к различным предсказаниям относительно задержки, с которой возникает восприятие комбинации . В первом случае объединение несовместимых AV-стимулов должно занять значительно больше времени, чем их объединение, то есть время, необходимое для сбоя fusion и активной генерации альтернативных операций, таких как упорядочивание стимулов A и V. Во втором случае время слияния и комбинирования противоречивых AV-стимулов должно быть примерно одинаковым, потому что комбинация в основном зависит от онлайн-восприятия AV-порядка (рис. 1B).

    Наши поведенческие результаты показывают более длительные задержки для сообщения о комбинации AV , чем конгруэнтных и слияния восприятий, новый вывод, предполагающий, что сообщение о комбинации AV требует дополнительных ресурсов обработки. Хотя конгруэнтная AV-речь должна давать более быстрые и точные ответы, чем неконгруэнтная AV-речь 50, 51 , мы не подтвердили, что AV fusion требовал больше времени, чем ответ на конгруэнтные AV-слоги 2, 12, 52–56 .Разница между нашими результатами и предыдущими объясняется тем фактом, что, в отличие от предыдущих исследований 12, 52–56 , мы анализировали только испытания, в которых субъекты эффективно испытали слияния , отбрасывая неудачные слияния испытаний (~ 45% от испытания).

    Что еще более важно, результаты обоих поведенческих исследований последовательно показывают, что комбинация потребовала больше времени, чем слияние (+ 200 мс). Второе поведенческое исследование даже прояснило, что эффект не был связан с дополнительными требованиями к артикуляции.При изучении ответов MEG с разрешением источника в STS, то есть ключевой области для интеграции звуковой и визуальной речевой информации 17, 57–59 , мы обнаружили, что нейронные ответы для комбинации уже были задержаны на самой ранней стадии интеграции речи AV. , и, следовательно, вряд ли отражали просто механизмы внимания или усилий. Таким образом, задержка ответа для комбинации частично связана с дополнительным временем обработки в STS.

    Чтобы лучше понять природу задержки обработки для комбинации AV по сравнению с fusion , мы исследовали, насколько STS была чувствительна к асинхронности AV, и могли ли другие области мозга участвовать в онлайн или в онлайн-режиме.ретроспективное упорядочение стимулов A и V, приводящее к комбинации . Таким образом, наш экспериментальный план МЭГ включал различные асинхронные действия стимула. Хотя поведенческий эффект AV-асинхронности был слабым (рисунок 4), как и ожидалось в выбранном асинхронном диапазоне 22, 41 , мы обнаружили, что и левый PAC, и IFG чувствительны к этому параметру до такой степени, что алгоритм классификации из Деятельность IFG может расшифровать контраст между комбинацией и конгруэнтными восприятиями.Это открытие предположительно отражает значение IFG в задачах восприятия речи, требующих точного временного анализа или упорядочивания речевых сигналов 28, 60, 61 .

    В отличие от IFG, STS был нечувствителен к асинхронности, но очень чувствителен к несоответствию слуховых и зрительных физических характеристик 17, 62 , и в соответствии с предыдущими выводами он очень рано сигнализировал о несоответствии AV-стимулов с помощью первый эффект, обусловленный визуальными предсказаниями (т. е.ответ слуховой коры, индуцированный визуальным входом), а второй - после слухового входа, вызванного несоответствием AV (Arnal et al., 2009).

    Роль STS в слиянии

    / динамическое расхождение

    Хотя установлено, что STS интегрирует информацию, поступающую от A- и V-модальностей, до сих пор неизвестно, обрабатывает ли он аналогично или по-разному AV-стимулы. приводит к fusion или комбинации .Используя подход GLM, мы обнаружили, что STS была первой областью, сигнализирующей о физическом несоответствии между двумя сенсорными модальностями. Эффект неконгруэнтности даже ожидался STS на основе предсказаний по визуальным стимулам. Возможное объяснение этого упреждающего эффекта заключается в том, что STS быстро оценивает, следует ли ожидать точного слухового ввода (сильное визуальное предсказание) или, скорее, набора возможных слуховых входов (слабое визуальное предсказание) 29 . Когда визуальное предсказание слабое (напр.g., visual / aga /), STS может легче объединять слуховые и визуальные входы (в пределах ~ 100 мс), тогда как при сильном визуальном прогнозировании (например, / aba /) воспринимаемое несоответствие потенциально сильнее, в некоторых случаях приводя к в комбинации percept. Другими словами, AV fusion может частично зависеть от достоверности, связанной с ожидаемым вводом 38 .

    Однако, согласно нашей модели прогнозирования интеграции AV-слога 32 , наиболее важным фактором, определяющим слияние , является то, встречаются ли два стимула близко к артикуляционному действительному представлению слога в пределах 2 nd акустической форманты / апертуры губы 2D Космос.В случае McGurk fusion визуальный / aga / и слуховой / aba / падают в непосредственной близости от 2D / ada / представления, что быстро оказывается верным решением. Этот сценарий подтверждается анализом декодирования, показывающим, что нейронная активность в STS сигнализирует об идентичности слитых слогов на 200 мс раньше, чем совмещенных слогов. Важно отметить, что, комбинируя DCM и часть «перцептивного выхода» анализа GLM, мы показываем, что несоответствие было зарегистрировано и решено чрезвычайно быстро в STS, и что результат был передан вперед (в IFG и ATC). Fusion отличался от конгруэнтной обработки только тем, что вывод STS также передавался обратно в MT, предположительно для обновления модели визуального движения слога fusion . Обратное влияние STS на нижние сенсорные области (MT) 63, 64 обеспечивает интересную иллюстрацию того, как прогнозирующее кодирование может применяться к интеграции AV 32, 65, 66 .

    В случае комбинации , поскольку нет двумерного представления слога в визуальных / aba / и слуховых / aga / координатах, STS не может легко прийти к жизнеспособному артикуляционному решению.Активность в STS повышается на 200 мс после начала слухового стимула, как fusion , но остается устойчивой до 400 мс; в течение этого промежутка времени STS рекурсивно участвует в более сложном процессе интеграции, включающем PAC, STG и IFG. Эти данные предполагают, что комбинация требует тесной координации между временной сетью и IFG 39 , предположительно для организации временной сериализации AV-входов.

    Нижняя лобная спираль отслеживает атриовентрикулярную асинхронность

    Восприятие времени - это адаптивная функция, затрагивающая различные области мозга, такие как мозжечок, гиппокамп и лобная кора 67, 68 .Конкретный ответ одной области, а не другой, в основном зависит от продолжительности полученного стимула 69 и выполненной задачи 70, 71 . В то время как неоцеребеллярные области выполняют особую функцию в вычислении временных интервалов, лобная кора поддерживает, контролирует и организует временные представления 24, 72 . Среди лобных областей дорсолатеральная префронтальная кора (DLPFC) может модулироваться нагрузкой на память из-за асинхронности стимулов, тогда как области, традиционно считающиеся вовлеченными в обработку речи, такие как нижняя лобная кора и верхняя височная кора, могут модулироваться посредством временная сложность слуховых и зрительных входов 26 .Эти данные согласуются с нашим наблюдением, что раннее участие IFG в интеграции AV не связано с идентификацией признаков, а специфично для времени AV. IFG отслеживал асинхронность AV, по крайней мере, в пределах диапазона, используемого в эксперименте (от слухового опережения -120 мс до слухового запаздывания 320 мс), без преобразования в ощущение смещения. Это подтвердило, что этот диапазон AV-асинхронности регистрируется при хорошей перцепционной переносимости 4, 22, 41 . Важно отметить, что отслеживание асинхронности само по себе не объясняет всех комбинированных эффектов, которые мы наблюдали в IFG, в частности, не учитывает последний эффект.Это говорит о том, что более сложные / абстрактные временные процессы также имеют место в IFG во время комбинации .

    Наконец, мы заметили, что за эффектом асинхронности в IFG следует аналогичный эффект в PAC, открытие, которое хорошо согласуется с наблюдением, что регулярность последовательностей тонов модулирует активность IFG, и что предполагаемые интервалы распространяются от IFG к PAC. 46, 47 . Наше исследование подтверждает, что IFG генерирует нисходящие сигналы о предполагаемой точности или предсказуемости сенсорных стимулов 73 .Чувствительность к временному порядку в левой IFG может, например, позволить слушателям прогнозировать порядок слов на основе синтаксической информации 74, 75 , функциональная роль, совместимая с ретроспективной последовательностью AV-стимулов.

    Он-лайн отслеживание времени AV по сравнению с апостериорным временным упорядочением в комбинации

    Когда слуховые и визуальные сигналы хорошо выровнены, интеграция AV-слогов является простым и относительно низкоуровневым процессом, но когда они асинхронны или физически противоречивые, интеграция предполагает более сложную динамику.Наши результаты показывают, что комбинация возникает как в результате идентификации слуховых и зрительных функций в STS, так и в результате обнаружения тонкой временной асинхронии AV в левой IFG. Направленность глобального информационного потока (DCM) и последовательность событий (GLM) показывают, что комбинация fusion и возникает из визуальной предварительной активации STS, которая либо соответствует совместимому звуку ( fusion ), либо дополнительно обрабатывается как известный слог ( fusion ) или отбрасывается несовместимым слогом и далее обрабатывается как временная асинхронная AV-последовательность.Таким образом, наши результаты подтверждают, что комбинация запускается из-за отказа AV слияния в STS и отражает апостериорную реконструкцию наиболее вероятной AV-последовательности.

    Мы не нашли поведенческих или нейрофизиологических аргументов в пользу альтернативного сценария, в котором временное упорядочение в комбинации происходит онлайн. Хотя IFG был чувствителен к асинхронности AV в относительно раннем временном интервале, эффекты комбинации в конце не учитываются при отслеживании времени в режиме онлайн.Комбинация визуального [aba] и слухового / aga / может принимать две формы 35 : одна («abga», 72% ответов), которая соответствует реальному временному порядку AV, и другая («agba», 8% ответов), который не соответствует (аналогичные результаты для двух комбинаций восприятий, сформированных с помощью / aba / и [ada], см. 36 ). Производство «ошибочного» комбинированного восприятия «agba» решительно поддерживает апостериорный процесс, возникающий в результате рекурсивной активности в STS, PAC, STG и IFG, а не в результате онлайн-секвенирования, которое предлагает меньше возможностей для смешивания AV-стимулов. .

    Методы

    Субъекты

    Двадцать здоровых субъектов участвовали в первом поведенческом эксперименте (9 мужчин - возрастной диапазон: 20-28 лет), 16 субъектов - во втором поведенческом эксперименте (9 мужчин - возрастной диапазон: 21-31 год), и 15 приняли участие в исследовании MEG (10 мужчин в возрасте от 21 до 24 лет). Количество испытуемых в эксперименте 1 было определено в соответствии с предыдущими исследованиями 3, 15, 16, 37, 55, 62, 76–78 . Все участники были правшами, носителями французского языка и не имели в анамнезе слуховых или языковых расстройств.Каждый поведенческий эксперимент состоял из 1-часового сеанса, проводимого в тихой комнате, в то время как эксперимент MEG состоял из 2-х сеансов по 2 часа каждый. Всем участникам была выплачена оплата за участие. Разрешение по этике было предоставлено университетской больницей Женевы в Швейцарии для поведенческих экспериментов (CEREH 13-117) и этическим комитетом Inserm во Франции (биомедицинский протокол C07-28) для эксперимента MEG. Все участники предоставили письменное информированное согласие до начала эксперимента.

    Стимулы

    Мы записали естественную речь, состоящую из словосочетания мужского и женского лиц, артикулирующих слоги. Эти два носителя французского языка произносили слоги / apa /, / ata / и / aka / или слоги / aba /, / ada / и / aga /. Два слоговых континуума различаются в зависимости от места артикуляции; кроме того, слоги глухие в одном континууме, то есть / апа /, / ата / и / ака /, и озвучены в другом континууме, то есть / аба /, / ада / и / ага /. Для сохранения естественной вариативности речи мы использовали 10 экземпляров каждого произносимого слога.Фильмы записывались в звукоизолированной комнате в виде фильма с разрешением 720 x 480 пикселей со скоростью оцифровки 29,97 кадра в секунду (1 кадр = 33,33 мс). Стереофонические звуковые дорожки были оцифрованы с частотой 44,1 кГц с разрешением 16 бит.

    Мы создали 3 категории фильмов, которые соответствовали 3 условиям стимуляции. Конгруэнтных видеороликов соответствовали исходному записанному видеоролику из слогов / ada / или / ata /. Все ролики имели одинаковую длину и длились 1000 мс. Используя звуковую дорожку, мы гомогенизировали продолжительность стимулов: вокальный взрыв первого / а / и согласный звуковой сигнал были выровнены по видео.Длина второй вокальной партии немного варьировалась в зависимости от стимула. Неконгруэнтное слияние пары были созданы путем дублирования аудио / apa / или / aba / на видео [aka] или [aga], соответственно. Аудио и видео были объединены с одного динамика. Новый саундтрек (/ apa / или / aba /) систематически согласовывался с исходным саундтреком (/ aka / или / aga /) на основе вокального пакета первого / a / и согласного звука. Неконгруэнтная комбинация пары были созданы путем дублирования аудио / aka / или / aga / на видео [apa] или [aba] соответственно с использованием той же процедуры выравнивания.Слуховые и визуальные параметры каждого состояния показаны на рисунке 1 и рисунке 2.

    Дизайн задач

    Слухово-визуальные стимулы были представлены с использованием Psychophysics-3 Toolbox и дополнительных пользовательских скриптов, написанных для Matlab (The Mathworks, Natick, Massachussetts, версия 8.2.0.701). Звуки подавались бинаурально с частотой дискретизации 44100 Гц и на слуховом уровне, индивидуально установленном перед задачей, через наушники с использованием процедуры адаптивной лестницы. Для каждого участника мы определили перед экспериментом их порог слухового восприятия, соответствующий 80% точности категоризации.Расчетный уровень звука использовался для передачи стимулов (средний уровень ощущения 30 дБ) во время поведенческих экспериментов (эксперимент 1 и эксперимент 2) и эксперимента MEG.

    Эксперимент 1, задание на повторение

    Участники были индивидуально протестированы и получили инструкции смотреть каждый фильм и повторять услышанное как можно быстрее. Мы использовали ту же инструкцию, что и МакГурк и Макдональд (1976). Участников попросили повторить как можно быстрее то, что они услышали. Мы не ограничивали возможные ответы ограниченным набором слогов.Тем не менее, обратите внимание, что для трех условий ( конгруэнтного , слияния и комбинации ), в соответствии с нашими гипотезами ожидались разные ответы (см. Рис. S1).

    Эксперимент 2, задание на создание пар

    Участники были индивидуально протестированы и получили инструкции прочитать слог, написанный на экране, затем посмотреть фильм и как можно быстрее нажать клавишу пробела, когда написанный слог совпадет с тем, что они слышат. На занятиях b-d-g участники могли читать «аба», «ада», «ага», «абга» или «агба».Во время сеансов p-t-k участники могли читать «апа», «ата», «ака», «апка» или «акпа».

    В двух поведенческих экспериментах участникам были представлены четыре блока, каждый из которых содержал один пол говорящего (женский или мужской голос) и один континуум (b-d-g или p-t-k). Каждый блок представил 90 AV-стимулов, соответствующих 30 конгруэнтных стимулов (A [d] V [d] или A [t] V [t]), 30 fusion стимулов (A [b] V [g] или A [ p] V [k]) и 30 комбинаций стимулов (A [g] V [b] или A [k] V [p]), всего 360 стимулов на каждого испытуемого.Испытания были представлены в случайном порядке в каждом блоке, а блоки - в случайном порядке среди участников.

    Участники сидели на расстоянии 1 м от монитора, а видео отображалось на 17-дюймовом ноутбуке Apple MacBookPro на черном фоне. Звуки подавались через наушники (sennheiser CX 275).

    Эксперимент MEG

    Каждый континуум (/ bdg / и / ptk /) был доставлен участникам в двух независимых сеансах по 360 испытаний в каждом. Участников попросили выполнить задание на идентификацию.Каждое испытание включало одно видео (случайно выбранное из 3 условий), за которым следовала пауза в 1 секунду; затем экран ответа с 'aba', 'ada', 'aga', 'abga' и 'agba' в сеансах bdg и 'apa', 'ata', 'aka', 'apka' и 'akpa' в сеансах ptk отображались. Слоги отображались на экране случайным образом справа налево, чтобы предотвратить двигательную подготовку и настойчивые реакции. Во время записи MEG появление экрана ответа произвольно изменялось через 100, 300 или 500 мс после паузы в тишине.Участники указали свой ответ, перемещая курсор под слогами и нажимая клавишу, чтобы выбрать выбранный слог как можно быстрее. Ответы субъекта были намеренно задержаны, чтобы избежать временного перекрытия между процессами восприятия и двигательными эффектами из-за нажатия кнопок. Следовательно, время ответа не является релевантными данными. Чтобы ограничить движения глаз, испытуемых просили моргать только после того, как они дали свою двигательную реакцию. После ответа дрожащая задержка от 3 до 5 с привела к следующему испытанию.’

    Аудиовизуальное выравнивание в условиях асинхронности. Аудиовизуальные асинхронности создавались путем смещения аудиофайла с шагом 33,33 мс (единица кадра) по отношению к файлу фильма. Этот процесс привел к созданию 12 различных асинхронностей начала стимула во временном окне в диапазоне от -120 мс аудио опережения до 320 мс задержки аудио (шаг 40 мс).

    Запись и предварительная обработка MEG

    Мозговые сигналы были записаны с помощью Neuromag Elekta с 306 каналами, состоящими из 204 осевых градиентометров и 102 магнитометров.Записи были сначала предварительно обработаны с использованием разделения сигнального пространства с помощью программного обеспечения Neuromag MaxFilter. Это позволяет удалить сигнал, поступающий извне сферы электрода, что позволяет устранить помехи ЭОГ (электроокулография) и ЭКГ (электрокардиография) среди других источников шума. Первоначально сигналы дискретизировались с частотой 1000 Гц и повторно дискретизировались с частотой 250 Гц для дальнейших этапов предварительной обработки. Перед записью MEG для каждого участника с помощью Polhemus была получена форма головы. После сеанса МЭГ была записана индивидуальная анатомическая МРТ (Tim-Trio, Siemens; 9-минутный T1-взвешенный MP-RAGE, 176 срезов, поле зрения = 256, размер вокселя = 1 x 1 x 1 мм 3 ) .Данные MEG были предварительно обработаны, проанализированы и визуализированы с использованием программного обеспечения dataHandler (wiki.cenir.org/doku.php), набора инструментов Brainstorm 79 и пользовательских скриптов Matlab.

    Анализ

    Эксперимент 1, задание на повторение

    Мы записали голосовую реакцию участника с помощью микрофона. После каждого ответа обратной связи не поступало. Время отклика измерялось как интервал между началом видео и началом повторения слога из аудиозаписи в каждом испытании.Мы также оценили выбор идентификации, сделанный участниками, то есть повторение слога в каждом испытании.

    Эксперимент 2, задание на создание пар

    Количество совпадений между написанным слогом и видео, которое привело к интересующей реакции, служило мерой идентификации слога. Время отклика измерялось как интервал между началом видео и нажатием кнопки при каждом испытании.

    В двух поведенческих экспериментах процент интересующих ответов и задержка начала ответа были рассчитаны для каждого условия.Процент интересующих ответов ([ada-ata] для конгруэнтных и условий слияния или [abga-apka-agba-akpa] для комбинации условий) был усреднен отдельно по семейству согласных ('bdg' и ' ptk '), пол говорящего (мужчина и женщина) и условия ( congruent , комбинация и fusion ) факторов. Задержка начала ответа рассчитывалась и усреднялась на основе представляющих интерес ответов по каждому условию). Мы сообщили о процентном соотношении конгруэнтных ответов в условии конгруэнтного (т.е. / ada / или / ata / response), процент визуальных (т.е. / aga / или / aka /), слуховых (т.е. / aba / или / apa /) и слитных (т.е. / ada / или / ata / ) ответов в состоянии fusion , процент визуальных (то есть / aba / или / apa /), слуховых (то есть / aga / или / aka /), VA вместе (то есть / abga / или / apka / ) и комбинированные AV (т. е. / agba / или / akpa /) ответы в условиях комбинация .

    Поведенческий анализ: Дисперсионный анализ. Процент ответов был проанализирован в рамках каждого эксперимента (эксперименты 1 и 2) с использованием ANOVA с повторными измерениями 3 × 2 с условиями ( конгруэнт , слияние , комбинация ) и ответы, представляющие интерес ([ada-ata] ответы для конгруэнтных условий и слияния и ответов [abga-apka-agba-akpa] для условия комбинации ) в качестве факторов внутри субъектов.Что касается средней задержки ответа, мы измерили интервал между началом видео- и голосового ответа для каждого интересующего типа ответа. ANOVA с повторными измерениями 3 × 1 выполняли для времени отклика (RT) с условиями ( конгруэнт , комбинация и слияние ) в качестве фактора внутри субъектов. Все ANOVA моделировали переменные Пол говорящего (женский и мужской) и Семейство согласных («bdg» и «ptk») как фиксированные факторы, чтобы обобщить полученные результаты для каждого говорящего и каждого тестируемого семейства согласных.

    Обработка MEG : Используя структурные данные, модели мозга для каждого субъекта были построены с использованием программного обеспечения Brain Visa 80 . Индивидуальные модели мозга были сопоставлены с шаблоном модели мозга ICBM-112 для анализа на уровне группы. Анализ данных был выполнен с помощью Brainstorm 79 , который задокументирован и находится в свободном доступе для загрузки в Интернете под общедоступной лицензией GNU. Рассматриваемые данные (испытания) начинались за 0,2 с до слухового события и до 0,8 с после слухового ввода (т.э., первая гласная / а / в / аХа /). Мы анализировали только испытания без глазных артефактов и скачков сигнала. Мы не проводили анализ на сенсорном уровне, так как вклад разных источников неоднозначен, и наша цель состояла в том, чтобы описать сеть мозга, участвующую в восприятии AV-речи. Мы вычислили прямые модели, используя метод перекрывающихся сфер, и визуализацию источника, используя взвешенные оценки минимальных норм (wMNE) для предварительно обработанных данных, и все это с использованием параметров мозгового штурма по умолчанию. Классическое решение прямой модели - использовать L2 регуляризованную обратную минимальную норму 81 .Параметр регуляризации L2 был зафиксирован на 0,1, так что ковариационная матрица данных стабилизируется путем добавления к ней единичной матрицы, масштабируемой до 10% от наибольшего собственного значения. WMNEs включали эмпирическую оценку дисперсии шума на каждом датчике MEG, что сводит как магнитометры, так и градиентометры к одному и тому же базовому диапазону единиц, что позволяет производить оценку источника с помощью комбинированного массива из 306 датчиков (204 планарных градиометра и 102 магнитометра). Мы также прореживали данные MEG до 250 Гц, используя БИХ-фильтр нижних частот (Чебышевский тип I порядка 8).

    Области интереса (ROI)

    Мы определили шесть областей интереса в левом полушарии, используя функциональные локализаторы на уровне группы (рис. S2). Мы выбрали все области, которые имели наибольшие слуховые вызванные ответы M100 (~ 110 мс) во всех условиях у субъектов. Анализ рентабельности инвестиций был проведен с помощью дисперсионного анализа для разных субъектов, чтобы гарантировать, что выбранные регионы являются теми, где была обнаружена большая активность независимо от условий.

    Вызванные ответы

    Сигналы из каждой интересующей области были извлечены и проанализированы.Вызванные ответы вычислялись путем усреднения сигналов МЭГ после реконструкции источника по испытаниям для каждой временной выборки вокруг стимулов, для каждого субъекта и каждого состояния (т.е. слияние , сочетание и конгруэнтное ) (рис. S3). Затем мы сопоставили условия, вычтя их соответствующий ответ ERP, что позволило протестировать 3 контраста: слияния минус конгруэнтного , комбинации минус конгруэнтного и комбинации минус слияния .Различия в ответе ERP были обнаружены в зависимости от условий путем выполнения t тестов против 0. Поправки FDR для множественных сравнений были применены по интересующим измерениям (т. Е. Временным выборкам, интересующим регионам и условиям) с использованием метода Бенджамини-Хохберга. процедура.

    Процедура анализа динамического причинно-следственного моделирования (DCM)

    Анализ функциональной связи с помощью динамического причинно-следственного моделирования был выполнен для определения значительных изменений в силе связи в зависимости от условий.Мы выполнили этот анализ, используя данные из 6 областей интереса, определенных выше. Мы смоделировали прямые и обратные соединения между узлами без предварительной информации, то есть были проверены соединения между каждой парой узлов. Эффекты перекрестных испытаний были оценены с использованием конгруэнтного условия в качестве эталона, что позволило моделировать все изменения в соединениях, которые необходимы для объяснения условий слияния и сочетания . Количество режимов для выбора данных было установлено равным 8, и для каждого режима использовался 1 компонент DCT (дискретное косинусное преобразование).Учитывая, что сигналы находятся в пространстве источника, мы устанавливаем параметр пространственной модели на LFP в SPM. Статистические тесты для изменения силы связи были реализованы с использованием параметрического эмпирического байесовского метода через SPM, создавая вложенные модели с разными отключенными соединениями каждый раз и сравнивая полученные данные модели. Это позволяет определить, какие связи существенно влияют на предсказательную силу модели.

    Процедура общей линейной модели

    Затем мы создали одну GLM и применили ее к каждой временной точке и каждой рентабельности инвестиций отдельно.Этот анализ проводился в отношении активности, связанной с событием, в одном испытании, в испытаниях с интересующими ответами. GLM включает следующие параметрические модуляторы: (i) -слоговое семейство (ptk или bdg) со значениями [-1, 1], (ii) пол говорящего в видео (женский, мужской) со значениями [- 1, 1]; (iii-v) слияние , сочетание и конгруэнтных условий с использованием матрицы со значениями [0,1] для каждого столбца; (vi) апертура губ , связанная с условием стимула со значениями [1, 0.6, 0,37] для [ Комбинация , Конгруэнт , Fusion ] (Рис. S5), (vii) второй формант , связанный с условием стимула со значениями [0,5, 0,5, 0,2] для [ Комбинация , Congruent , Fusion ] (рис. S5), (viii) значения асинхронности AV , которые варьируются от 0 мс до 320 мс, без учета того, был ли слуховой или визуальный сигнал первым, (ix) AV физическая неконгруэнтность , связанная со стимулом, который является либо конгруэнтным, либо неконгруэнтным, (x) комбинированный выходной сигнал, т.е.е. ответы участника со значением 1, если входы AV были объединены (например, [abga-apka-agba-akpa]), или 0, если они не были объединены, и (xi) объединенный выход (например, [ada-ata]) со значением 1 или 0, если входы AV не были предохранены. Мы регрессировали однократные испытания сигналов МЭГ по этим 3 параметрическим величинам в последовательные моменты времени от -200 мс до 800 мс после начала слухового стимула. Полученные временные курсы для параметрических модуляторов в GLM были сглажены с использованием полосовой фильтрации (1-40 Гц), а затем усреднены по субъектам.Затем мы определили временное окно, в котором параметрические модуляторы для асинхронности AV, AV p hysical incongruence и значение выбора выхода значительно отличались от нуля. Поправки FDR для множественных сравнений применялись по интересующим измерениям (т. Е. По временным выборкам, интересующим регионам и количеству регрессоров) с использованием пошаговой процедуры Бенджамини – Хохберга.

    Классификация идентичности слогов

    Анализ декодирования проводился с помощью Neural Decoding Toolbox 82 с использованием классификатора максимального коэффициента корреляции для вызванных ответов в каждой интересующей области.Анализ был ограничен испытаниями с интересующими ответами. Были построены два разных классификатора паттернов: один классификатор использовался для обнаружения нейронной активности, способной различать интересующий ответ в слиянии (т. Е. Ответы «ada» и «ata») и комбинации условий (т. Е. « ответы abga, agba, akpa и apka). Поскольку в этих двух условиях используются несовместимые AV-входы, результаты декодирования отражают только идентичность выходов. Другой классификатор был использован для определения того, где нейронная активность позволила различить интересующий ответ в комбинации (т.е.е., ответы "abga", "agba", "akpa" и "apka") и совпадающих условий (т. е. ответов "ada" и "ata"). Сравнение результатов классификатора между объединенным и комбинированным выходом с другим классификатором между комбинацией и конгруэнтным выходом позволило нам оценить сходство профилей между классификаторами. Сравнивая кривые классификаторов, мы могли определить элементы, которые конкретно соответствуют выходу комбинации .

    В процедуре декодирования каждый классификатор был обучен связывать образцы данных MEG с соответствующими условиями стимула (для каждого испытания идентичность воспринимаемого слога). Количество соответствующей информации в сигнале MEG оценивалось путем тестирования точности классификатора на отдельном наборе тестовых данных. Мы выполняли анализ в каждый момент времени в пределах 1 мс неперекрывающихся интервалов.

    Анализ декодирования проводился для каждой области интереса с процедурой перекрестной проверки, в которой классификатор обучается на подмножестве данных, а затем эффективность классификатора оценивается на сохраненных тестовых данных.Для каждого прогона декодирования данные из выбранных испытаний были разделены на наборы из 10 испытаний, и данные из каждого набора из 10 испытаний были усреднены вместе (см. 83 для подобной процедуры). Каждый запуск декодирования выполнялся на уровне группы, объединяя всех субъектов вместе (см. 84 для аналогичной процедуры). Например, в первой процедуре декодирования классификатор паттернов был обучен связывать паттерны MEG с ответами участников (идентифицированный слог, то есть «ада» vs.‘Abga’) в условиях слияния и комбинации . Для каждого анализа декодирования классификатор паттернов был обучен ответу участника. Он вычислял корреляцию между данными MEG и слогом, идентифицированным в каждый момент времени, и был обучен на 80% данных, в то время как его эффективность оценивалась на скрытых 20% тестовых данных. Процедура разделения обучающих и тестовых данных была выполнена 100 раз, чтобы уменьшить дисперсию оценки производительности.Классификатор вычислил корреляцию между тестовыми векторами (т. Е. Случайно выбранными средними значениями 10 испытаний в ROI в каждый момент времени) и вектором, созданным из среднего значения обучающих векторов. Каждая контрольная точка принимала метку того класса обучающих данных, с которым она максимально коррелировала. Сообщаемая окончательная точность классификации выражается как процент правильных испытаний, классифицированных в наборе тестов, усредненный по всем разделам перекрестной проверки. Затем мы оценили временное окно, в котором значения решения между двумя категориями значительно отличались от нуля ( t тест против нуля).Поправки FDR для множественных сравнений применялись по интересующим измерениям (т. Е. По временным выборкам, интересующим регионам и количеству классификаторов) с использованием пошаговой процедуры Бенджамини – Хохберга.

    % PDF-1.3 % 3629 0 объект > эндобдж xref 3629 166 0000000016 00000 н. 0000003676 00000 н. 0000047986 00000 п. 0000048148 00000 п. 0000048272 00000 н. 0000048554 00000 п. 0000048803 00000 п. 0000048981 00000 п. 0000049281 00000 п. 0000049630 00000 п. 0000049942 00000 н. 0000050316 00000 п. 0000050536 00000 п. 0000050865 00000 п. 0000051236 00000 п. 0000051475 00000 п. 0000051735 00000 п. 0000052075 00000 п. 0000052427 00000 п. 0000052785 00000 п. 0000053125 00000 п. 0000053363 00000 п. 0000053532 00000 п. 0000053815 00000 п. 0000054108 00000 п. 0000054161 00000 п. 0000054447 00000 п. 0000054712 00000 п. 0000055073 00000 п. 0000055409 00000 п. 0000055695 00000 п. 0000056053 00000 п. 0000056377 00000 п. 0000056709 00000 п. 0000057049 00000 п. 0000057331 00000 п. 0000057532 00000 п. 0000057777 00000 п. 0000058024 00000 п. 0000058317 00000 п. 0000058609 00000 п. 0000058901 00000 п. 0000059132 00000 п. 0000059411 00000 п. 0000059648 00000 н. 0000060432 00000 п. 0000060951 00000 п. 0000061228 00000 п. 0000061559 00000 п. 0000061855 00000 п. 0000062187 00000 п. 0000062351 00000 п. 0000062644 00000 п. 0000062931 00000 н. 0000063226 00000 п. 0000063541 00000 п. 0000063839 00000 п. 0000064159 00000 п. 0000064451 00000 п. 0000064865 00000 п. 0000065156 00000 п. 0000065369 00000 п. 0000065640 00000 п. 0000065822 00000 п. 0000066175 00000 п. 0000066417 00000 п. 0000066659 00000 п. 0000067764 00000 п. 0000067988 00000 п. 0000068173 00000 п. 0000068509 00000 п. 0000068690 00000 п. 0000069036 00000 п. 0000069325 00000 п. 0000069741 00000 п. 0000070069 00000 п. 0000070337 00000 п. 0000070666 00000 п. 0000070988 00000 п. 0000071268 00000 п. 0000071613 00000 п. 0000071818 00000 п. 0000072071 00000 п. 0000072252 00000 п. 0000072615 00000 п. 0000072943 00000 п. 0000073165 00000 п. 0000073470 00000 п. 0000073769 00000 п. 0000074133 00000 п. 0000074410 00000 п. 0000074784 00000 п. 0000075033 00000 п. 0000075335 00000 п. 0000075527 00000 п. 0000075831 00000 п. 0000076087 00000 п. 0000076563 00000 п. 0000076896 00000 п. 0000077139 00000 п. 0000077529 00000 п. 0000077582 00000 п. 0000077934 00000 п. 0000078196 00000 п. 0000078469 00000 п. 0000078909 00000 п. 0000079081 00000 п. 0000079252 00000 п. 0000079489 00000 п. 0000079693 00000 п. 0000079970 00000 н. 0000080186 00000 п. 0000080472 00000 п. 0000080689 00000 п. 0000080975 00000 п. 0000081170 00000 п. 0000081432 00000 п. 0000081671 00000 п. 0000081945 00000 п. 0000082235 00000 п. 0000082458 00000 п. 0000082751 00000 п. 0000083097 00000 п. 0000083343 00000 п. 0000083546 00000 п. 0000083829 00000 п. 0000084105 00000 п. 0000084288 00000 п. 0000084575 00000 п. 0000084739 00000 п. 0000085022 00000 п. 0000085231 00000 п. 0000085794 00000 п. 0000087043 00000 п. 0000087366 00000 п. 0000087609 00000 п. 0000087840 00000 п. 0000088109 00000 п. 0000088406 00000 п. 0000088735 00000 п. 0000088979 00000 п. 0000089336 00000 п. 0000089621 00000 п. 00000 00000 п. 00000 00000 п. 00000 00000 п. 00000 00000 п. 00000

    00000 п. 0000091614 00000 п. 0000092041 00000 п. 0000092398 00000 п. 0000092721 00000 н. 0000093053 00000 п. 0000093339 00000 п. 0000093626 00000 п. 0000093907 00000 п. 0000094251 00000 п. 0000094491 00000 п. 0000094767 00000 п. 0000094944 00000 п. 0000095118 00000 п. 0000095376 00000 п. 0000095680 00000 п. 0000095895 00000 п. 0000003771 00000 н. 0000047961 00000 п. трейлер ] >> startxref 0 %% EOF 3630 0 объект > эндобдж 3793 0 объект > транслировать H̔] lwXPcc {) clP0c_ | eM1b`LǀzGLmJ-R% 8UU: i "ZiPDH, FzFJs;

    (PDF) Восприятие арабской слоговой структуры англоязычным языком

    1

    Англоязычное восприятие арабской слоговой структуры

    Azra000 N.Али1, Майкл Инглби1 и Дэвид Пиблз2

    [email protected] [email protected] [email protected]

    1 Школа вычислений и инженерии и 2 факультет психологии

    University of Хаддерсфилд, Англия.

    Эмпирическим путем структура начала рифмы силлабических составляющих была обнаружена в нескольких типах экспериментов

    : с использованием словесных игр [1], или звуковых стимулов, или визуальных стимулов слуховых стимулов [2,

    3].Эти эксперименты разработаны в предположении, что восприятие слухового прайма и отдельное восприятие

    визуальной цели (текста или изображения) опосредуются одной и той же структурной моделью лексических единиц.

    Чтобы избежать этого предположения, мы искали эмпирический анализ, который задействует только один вид обработки

    для исследования воспринимаемой структуры слога, и остановился на аудиовизуально несовместимых стимулах

    , которые вызывают феномен слияния каналов, известный как слияние Мак-Гурка [4] .Если человеку предъявлено

    неконгруэнтных стимулов, имеющих разные сегменты, выровненные по времени в аудио и визуальных каналах, тогда воспринимаемый звук

    может отличаться от звука, присутствующего в любом канале (см. Рисунок 1).

    Скорости слияния McGurk успешно использовались для исследования слоговой структуры английских слов [5, 6].

    Устойчивый паттерн в этой работе показывает, что скорость слияния, вызванная неконгруэнтными сегментами носителями английского языка

    (англофонами), значительно ниже в начале, чем в позициях кода.Такие различия

    сохраняются в ветвящихся составляющих, многосложных словах и словах, встроенных в естественные контексты фраз.

    Эти количественные различия не наблюдались бы в чистых языках CV, в которых отсутствуют слоговые коды.

    В случае языков, для которых оспаривается структура слогов, можно использовать инконгруэнтные стимулы для

    поиска сегментов, которые демонстрируют слишком большое слияние, чтобы возникло начало, тем самым подвергая лингвистические предположения и гипотезы

    о кодах эмпирической проверке.Такое предприятие было начато для арабского языка [7].

    Арабская традиция Sybawaih, на которой основан (фонетический) арабский алфавит, использует единицы CV

    , которые орфографически символизируются согласным с диакритическим знаком гласного. Слово-медиальные группы согласных

    могут возникать, потому что одна из арабских гласных молчит [8]. Западная традиция ученых-классиков

    трактует арабский язык как латынь и греческий, постулируя, что существуют закрытые слоги CVC, CVVC, CVCC [9].В сегментах

    , классифицируемых как коды в этой традиции, эмпирические исследования слияния показывают, что носители арабского языка

    (арабофоны) объединяют (западные) коды с той же скоростью, что и начала, или даже с меньшей скоростью, если они

    состоят из CC -geminates (например, "khaass" = специальный, "saff" = класс). Кажется, что в ментальных моделях, опосредующих восприятие речи арабофонами, нет

    кодов. Недавно Баотман [10]

    разработал современное представление арабских речевых паттернов с использованием фонологии элементов и менее составной структуры coda-

    .Баотман разработал алгоритм прогнозирования напряжения, который намного проще, чем

    алгоритмов, основанных на силлабификации западной классической традиции, и смог смоделировать хорошо известные

    процессы коартикуляции арабского языка с использованием фонологии элементов на основе CV [ 8].

    Цель данной статьи - уйти от основных различий между ментальными моделями англоязычных

    и арабофонов. Сначала мы подтверждаем более ранние результаты [7] эмпирически с использованием скоростей слияния МакГурка о том, что

    арабофонов не показывают различий в скорости слияния по кодовому началу: их распределение скоростей слияния составляет

    унимодальных (рис. 2), а их средние скорости слияния для (западных) начала и (западная) кодовая

    существенно не различаются (Таблица 1).Во-вторых, мы подвергаем англофонов тем же стимулам арабских слов, что и

    наших арабофонов, и исследуем, демонстрируют ли их реакции слияния кодовые различия слияния

    , предполагаемые силлабификацией в западной традиции. Результаты (таблица 1 и рисунок 2

    на обороте) показывают бимодальную скорость распределения и (западные) начала, которые сливаются значительно менее легко, чем

    (западная) кодировка в арабской речи.

    Эти новые результаты предполагают, что арабофоны используют ментальные модели речи, которые заметно отличаются от

    ментальных моделей англофонов.Это предложение поднимает дополнительные исследовательские вопросы, на которые могут ответить исследования

    МакГурка и, возможно, предварительные исследования: в какой момент кривой обучения для англоязычного

    , изучающего арабский язык, ученик приобретает ментальную модель без кода, которая характеризует арабофонов? Что

    - это привычки к слиянию людей, свободно говорящих на двух языках с раннего возраста Et Cetera….

    Слияние в предложении (особенно хорошее предложение, например, цитата, пословица ...)

    1 Латунь образована сплавом меди и цинка .

    2 Она была слиянием мечтателя и деятеля.

    3 Ядерный синтез - Святой Грааль производства энергии.

    4 Ее работа представляет собой сплав нескольких различных стилей.

    5 Его последней реформой стало объединение регулярных и резервных сил.

    6 Фильм демонстрирует идеальное сочетание изображения и звука.

    7 Ее песни - это возвышенное слияние поп-музыки и бразильской музыки.

    8 Устойчивый ядерный синтез - это Святой Грааль в электроэнергетике.

    9 Этот сплав образован сплавлением двух типов металлов.

    10 Их музыка описывается как «взрывной сплав латиноамериканских и современных джазовых ритмов».

    11 Один из возможных топливных циклов fusion включает реакции D-He 3.

    12 Ядерный синтез в новостях, пока мы пишем.

    13 Споры о холодном слиянии служат яркой иллюстрацией.

    14 Управляемый синтез имеет меньше очевидных отрицательных сторон, чем деление.

    15 Скорость и слияние всасывает сотрясаемый воздух.

    16 В области энергетики победителями стали физика, [www.Sentencedict.com] fusion и реактор-размножитель.

    17 Первые опубликованные данные исследования fusion появились в 1956 году.

    18 Результатом fusion было чувство целостности, более приятное, чем предшествовавшие ему чувства фрагментации.

    19 Это было основано на слиянии приверженности полной занятости и желанию продвигать потребительский выбор.

    20 Возможен внезапный прорыв в ядерном синтезе или уравнении стоимости фотоэлектрической энергии.

    21 Результатом стало идеальное сочетание преемственности и изменений.

    22 Это умный альбом fusion с различным персоналом, и снова игра Брекера потрясающая.

    23 Он исследовал ряд конкурирующих схем синтеза и обнаружил, что синтез гелия-3 / дейтерия является наиболее привлекательным.

    24 Я попытался осмыслить то, что он говорил о ядерном синтезе , но большая часть этого вышла мне через голову.

    25 Теперь, когда есть все основания полагать, что мы можем построить термоядерный реактор , растет внимание к технологиям.

    26 Стили меняются, от трайбл-ритмов и оркестровых маневров до авангардного рока fusion ; но импульс к самовыражению остается постоянным.

    27 При очень быстром темпе эта тонкость теряется, и они выравниваются, как в контексте фанка или fusion .

    28 Ядра железа имеют наибольшую энергию связи на нуклон; следовательно, ни деление, ни синтез не могут высвободить дополнительную энергию.

    29 В течение некоторого времени ведутся переговоры по ряду научных вопросов, включая термоядерный , ядерную безопасность и окружающую среду.

    30 То, что начиналось как поиски металлического водорода, теперь превратилось в серьезную охоту за синтезом .

    извлечение новостей мандаринского вещания с использованием голосовых ...

    ВОССТАНОВЛЕНИЕ МАНДАРИНСКИХ ВЕЩАТЕЛЬНЫХ НОВОСТЕЙ ИСПОЛЬЗОВАНИЕ РАЗГОВОРНЫХ ВОПРОСОВ Берлин Чен 1,2, Синь-мин Ван 1 и Линь-шань Ли 1,21 Институт из Информационные науки, Academia Sinica, 2 Dept. of Компьютерные науки и информационная инженерия, Национальный университет Тайваня, Тайбэй, Тайвань, Республика КитаяABSTRACT Рассматривая односложную структуру китайского языка, весь класс из функций индексирования для получения вещания новостей на мандаринском диалекте с использованием уровня слога были исследованы ранее.В этой статье представлены улучшения, достигнутые по сравнению с предыдущими результатами. Основные различия заключаются в следующем: (1) Многоуровневые индексы на уровне символов и слов интегрированы с информацией на уровне слогов. (2) Информационные подсказки из современного корпуса текстовых сообщений новостей были использованы для создания более точных условий индексации. (3) Автоматическое расширение документа, слепая обратная связь по релевантности и расширение запроса через матрицу ассоциации терминов были применены в поиске .Со всеми этими схемами средняя точность может быть улучшена с 55,46% до 71,29% .1. ВВЕДЕНИЕ В связи с быстрым ростом использования аудио- и мультимедийной информации в Интернете, экспоненциально растет количество устных документов, таких как вещание радио- и телепрограмм, в настоящее время накапливаются и становятся доступными. Таким образом, разработка технологии получения речевой информации становится все более важной и широко изучается в последние годы [1 -3].Использование голосовых запросов для доступа к аудиопотокам остается очень сложной темой исследования, поскольку термины запроса могут содержать ошибки распознавания, и такие ошибки могут привести к тому, что система поиска полностью ошибется в том, что пользователь особенно когда запрос короткий. По этой очень сложной задаче еще не так много отчетов. Однако, поскольку беспроводная связь становится все более популярной, разработка технологии голосового извлечения речевой информации становится все более важной.В последние годы было разработано несколько различных подходов к извлечению устных документов (SDR). Подходы поиска на основе слов были очень популярны и успешны, хотя из-за потенциальных проблем либо необходимость заранее знать слова запроса, либо необходимость в достаточно большом словарном запасе, чтобы охватить растущий динамическое содержание разнообразных широковещательных новостей [6].Некоторые другие исследователи предложили концепцию основанных на подсловах подходов, которые могут ограничивать размер словарного запаса, необходимого для охвата языка, но также приводить к огромному размеру условия индексации [8]. Учитывая односложную структуру китайского языка, целый класс функций индексации для извлечения мандаринского транслируется новости с использованием статистических характеристик на уровне слога ранее исследовались [9].В этом документе представлены улучшения, достигнутые по сравнению с предыдущими результатами: во-первых, из всего, слияние различных терминов индексации было всесторонне оценено, и результаты были сопоставлены с этим из слоговый подход. Затем для создания более точных терминов индексации по слогам использовались информационные подсказки из современного корпуса телеграфных сообщений новостей . Наконец, было применено несколько методов получения информации, чтобы повысить эффективность получения .Со всеми этими схемами средняя точность может быть улучшена с 55,46% (лучший результат, ранее сообщенный в [9]) до 71,29% .2. БАЗЫ ДАННЫХ ВЕЩАТЕЛЬНЫХ НОВОСТЕЙ Вся база данных трансляций новостей , используемая в этой газете, была собрана с декабря 1998 по июль 1999 года. Учебные данные состоят из 453 репортажей (около 4,0 часов). из речевых материалов) и был получен с полицейской радиостанции (PRS), станции НЛО (НЛО), голоса Хана (VOH) и голоса из Тайбэй (VOT), расположенный в Тайбэе.Все записи были вручную расшифрованы и разбиты на рассказы и предложения. В этом исследовании в экспериментах использовались только речевые части якорных динамиков. Полученные данные тестирования состоят из 757 записей (около 10,2 часа речевых материалов), полученных от Broadcasting Corporation of China (BCC). Каждая запись представляла собой короткое аннотацию новостей (около 50 секунд), подготовленное ведущим докладчиком, и содержала несколько новостей .Некоторые записи в данных тестирования содержат фоновую музыку. Данные тестирования также были вручную расшифрованы, но не были разбиты на предложения. Набор из 40 условий запроса и соответствующих записей новостей был вручную создан для поддержки экспериментов по поиску . Каждый запрос содержит примерно только 4 символа (или слога) и имеет в среднем 23,3 релевантных документа из 757 в базе данных, точное число которых находится в диапазоне от 1 до 75.Двух (один мужчина и одна женщина) попросили произнести 40 терминов запроса соответственно. РАСПОЗНАВАНИЕ РЕЧИ 3.1 Акустическая обработка и моделирование языка Каждый кадр речевых данных представлен 39-мерным вектором признаков, который состоит из 12 MFCC и log энергии, а также их первой и второй разностей. . Вычитание среднего смыслового среднего на основе высказываний (CMS) применяется ко всем материалам для обучения и тестирования. Набор 150 внутрислоговых зависимых от правого контекста под-слоговых HMM плюс один HMM молчания использовался для распознавания речи.Кроме того, модели языка N-грамм на основе слогов и слов были обучены с помощью корпуса текстовых сообщений новостей , состоящего из 80 миллионов китайских символов, собранных из Центрального информационного агентства (CNA). в 1999 г. Обратите внимание, что и текстовый корпус новостей , и база данных широковещательных новостей были собраны почти в один и тот же период времени. Сегментация слов и фонетическая маркировка были выполнены для учебных материалов с использованием лексики из 62 тыс. Слов.

    Spectral Centroid - обзор

    5 Обсуждение

    Учитывая растущий интерес в последние десятилетия и из-за прогрессирующего старения населения, произошло значительное увеличение количества вложенных ресурсов и публикаций, написанных о таких заболеваниях, как как AD. AD - одна из самых серьезных проблем нашего общества, и в настоящее время разрабатываются различные направления исследований. В этой работе был проведен систематический поиск, чтобы связать технологии речи и обработки речи, применяемые к обнаружению AD.Тенденция количества публикаций, основанных на деменции в целом и публикациях, основанных на AD и автоматической обработке голоса, представлена ​​на рис. 4.

    Рис. 4. Публикации, выявленные по деменции и автоматической обработке голоса, применяемой для обнаружения AD с 1995 года. основан на публикациях, указанных в этой статье.

    Чтобы обсудить траекторию исследований по обнаружению AD в области автоматического анализа голоса, мы тщательно разделили эти публикации в зависимости от типа используемых характеристик: обычные, без сомнения, наиболее используемые и обширные виды, и нетрадиционные, которые не относятся к таким обширным знаниям и которые еще предстоит изучить.Третья область касается методов глубокого обучения. Хотя они не предоставляют знаний как таковых, они предлагают интересные решения, которые могли бы соответствующим образом обнаружить AD и, в не столь отдаленном будущем, отличить его от других нарушений, деменции и патологий.

    В настоящем обзоре не рассматриваются клинические факторы или подробная классификация популяций. Таким образом, две группы населения, обозначенные как MCI, могут иметь разные нарушения из-за подтипов или прогрессий и, следовательно, различий в их голосовых паттернах.В рамках данного обзора невозможно продолжить изучение этих популяций. Очевидно, что поиск более детального подразделения - очень интересная и необходимая задача, в которой могут быть классифицированы не только различные виды MCI, но также различные патологии и соответствующие им голосовые модели.

    С момента появления первых публикаций, примерно в 2005 году, 78% исследований были сосредоточены на использовании обычных параметров, в основном на продолжительности вокализованных и невокализованных сегментов, высоте тона, амплитуде и периодичности, а также на других характеристиках, полученных из временных параметров. частотный и кепстральный анализ.Эти переменные, как мы видели, предоставили данные о когнитивных процессах, и их значения были напрямую связаны с конкретным состоянием AD. Каждый автор по-разному интерпретировал эти параметры и в этом смысле связал когнитивные дефициты с коммуникативными феноменами и функциями, такими как просодия, фонация, артикуляция, вокальные и паралингвистические особенности, среди прочего.

    Аналогичным образом, посредством комбинации нескольких параметров были определены различные концепции, такие как качество голоса или речи или эмоциональная температура.Эти концепции при правильном применении оказались хорошими индикаторами AD. Более сложные методы, такие как автоматический анализ спонтанной речи (ASSA), представлены как методы, включающие различные комбинированные атрибуты голоса (например, длительность, кратковременная энергия и спектральный центроид), и они доказали, что предлагают чрезвычайно важную информацию.

    Если есть что-то, на что указывают большинство исследований, так это важность количества характеристик, полученных в процессе извлечения признаков.Различные исследования уже работали над этим аспектом, и в свете результатов ясно, что более ограниченный набор функций приводит к лучшим результатам с точки зрения, например, точности. Перед процессом классификации необходим и желателен этап выбора признаков.

    Что касается устных заданий, выполняемых испытуемыми, они в основном состояли из серии образцов спонтанной речи. Согласно нашему исследованию, это наиболее сложная задача и, возможно, та, которая дает наиболее релевантные результаты из-за явно недостаточной производительности пациентов с БА.В других исследованиях, хотя и менее распространенных, среди прочего были разработаны образцы чтения, повторения речи или подсчета (см. Рис. 5).

    Рис. 5. Наиболее популярные задачи, выполняемые для выполнения анализа голоса или речи применительно к обнаружению AD. Это основано на публикациях, содержащихся в этой статье.

    Отдельного внимания заслуживают задания, используемые при записи. Функции, позволяющие измерить нарушение в группе пациентов, и их значение сильно различаются в зависимости от выполняемой задачи.Было бы желательно провести более глубокий анализ, например, чтобы ответить, что означает пауза, сделанная во время задания на беглость речи. Это может указывать на проблемы с семантической памятью, но не обязательно верно для пауз, сделанных во время задачи подсчета. Исследования, представленные в этом обзоре, не классифицируются с учетом этого факта. Чтобы прояснить эту двусмысленность, необходимы дальнейшие исследования.

    Однако после того, как статистический процесс извлечения признаков выполнен, следует реализовать классификацию данных.В большинстве проанализированных нами случаев это осуществляется с помощью классификаторов SVM, kNN, RF или BN, в меньшей степени, и классификаторов LDA (см. Рис. 6). Процессы извлечения и выбора различных признаков, а также ранее упомянутые классификаторы (см. Раздел 4) продемонстрировали достижение объективной оценки состояния AD. Более того, они предлагают возможность применения этих методов к другим нейродегенеративным расстройствам, таким как болезнь Паркинсона.

    Фиг.6. Самые популярные классификаторы голосового анализа применительно к обнаружению AD. Это основано на публикациях, обсуждаемых в этой статье.

    Очевидно, что можно найти несколько языковых различий не только у носителей разных языков, но также и у разных диалектов одного и того же языка. Этот факт может стать проблемой при внедрении крупномасштабного инструмента. Не все выражаются одинаково, говорят с одинаковой скоростью или используют одинаковое количество слов для общения. На этом этапе интересно подумать, можно ли создать действенный инструмент для помощи в диагностике на глобальном уровне.Некоторые исследователи уже нашли ответ в рамках эмоционального анализа. Как показано, различия эмоциональных состояний можно рассматривать как один из важнейших критериев оценки когнитивных способностей. Поскольку эмоции являются универсальными и присущими человеку характеристиками, их распознавание в коммуникативном процессе вызвало большой интерес в научном сообществе.

    Итак, как только это ограничение будет признано, некоторые исследования включают классические особенности, такие как высота тона, интенсивность и вариация частотных компонентов, а в последнее время - эмоциональная температура (комбинация просодических и паралингвистических характеристик) в эмоциональный анализ.В этих исследованиях применяется ERA, который использует различные линейные характеристики и в сочетании с задачами ET и SS позволяет различать пациентов с AD и пациентов с HC с точностью 97%. Точно так же было проведено несколько исследований, в которых ASSA сочетается с этими другими методами, и они также предлагают многообещающие результаты. Эти методы основаны на акустических и стационарных особенностях речевого аудиосигнала. Большинство из них используют стационарные методы в частотной области, такие как спектр мощности Фурье.

    Было также опубликовано несколько исследований с использованием транскрипции и применения VAD. Помимо акустического анализа голоса или речевого сигнала, они также предлагают лексический, семантический, пунктуационный и синтаксический анализ коммуникативного процесса.

    В последние годы, похоже, большой интерес вызвали нелинейные и нестационарные аспекты, связанные с динамическими изменениями речевого сигнала, вызванными когнитивными нарушениями. Примерно с 2012 года все больше исследований в этой области все больше подчеркивают необходимость полагаться на нелинейные характеристики.В настоящее время это около 22% соответствующих публикаций.

    Некоторые исследователи предположили, что тонкие когнитивные изменения в ранних и доклинических состояниях могут быть обнаружены с помощью фракталов. По этой причине такие методы, как ASSA и ERA, уже были включены в набор акустических и стационарных функций, а также в классификаторы нейронных сетей MLP, в частности, фрактальное измерение Хигучи. Полученные таким образом результаты являются многообещающими и еще больше увеличивают перспективы использования только линейных методов.

    Другие недавние исследования этой сложной системы доказали, что невозможно охарактеризовать с помощью одного лишь масштабного отношения те геометрии и события, которые развиваются естественным образом. Эти работники также утверждают, что такую ​​систему, как голос, лучше охарактеризовать с помощью мультифракталов. Среди этих методов анализа MDFA успешно применяется для анализа речи, и его результаты более надежны по сравнению с другими, такими как вейвлет-анализ, дискретное вейвлет-преобразование, максимум модуля вейвлет-преобразования или скользящая средняя с устранением тренда.Это также применялось для анализа таких событий, как динамика частоты сердечных сокращений, импульсов нейронов или экономических временных рядов.

    Развитие искусственного интеллекта и, в частности, машинного обучения произвело революцию в общих перспективах успеха анализа речи и голоса, наделив их более сложными системами. ML предлагает статистический и математический анализ и множество методов извлечения признаков, а также автоматическую классификацию. Казалось бы, он последовательно отвечает на поставленные новые задачи.В настоящее время это месторождение интенсивно изучается и разрабатывается. На рис. 7 представлена ​​сравнительная диаграмма, на которой можно наблюдать тенденцию к росту числа опубликованных статей об использовании технологий DL, применяемых для обнаружения AD по речевому сигналу.

    Рис. 7. Глубокое обучение применительно к автоматическому обнаружению обработки голоса и речи. Это основано на публикациях, найденных в этой статье.

    Согласно нашим исследованиям, это увеличение в основном произошло с 2012 года. Наши данные показывают, что наиболее часто используемыми методами в этом отношении были MLP, примененный к ASSA, ERA, ET и Fractal Dimension, GCNN, применяемый к набору паралингвистических функции и CNN, как в обычные, так и в нетрадиционные (см.рис.8).

    Рис. 8. Наиболее популярные DL-классификаторы по статьям, обнаруживающим AD по речевому сигналу. Это основано на публикациях, найденных в этой статье.

    Новаторские технологии DL, кажется, предлагают драйверы, необходимые для автоматической обработки сигналов. Они поместили обработку сигналов в число наиболее многообещающих методов, наделенных решениями для таких сложных систем, как коммуникативный процесс, голос и воспроизведение речи, а также когнитивные процессы человека.

    .

    Добавить комментарий

    Ваш адрес email не будет опубликован. Обязательные поля помечены *