Классификация внимания: Классификация видов внимания — Студопедия

Классификация видов внимания — КиберПедия

I. По источнику развития:

1. Природное внимание дано человеку с самого его рожде­ния в виде врожденной способности избирательно реаги­ровать на те или иные внешние или внутренние стимулы, несу­щие в себе элементы информационной новизны. Основной ме­ханизм, обеспечивающий работу такого внимания, называется ориентировочным рефлексом.

2. Социально обусловленное внимание складывается при­жизненно в результате обучения и воспитания, связано с воле­вой регуляцией поведения, с сознательным избирательным реа­гированием на объекты.

II. По использованию средств:

1. Непосредственное внимание не управляется ничем, кроме того объекта, на который оно направлено и который соот­ветствует актуальным интересам и потребностям человека.

2. Опосредованное внимание регулируется с помощью спе­циальных средств, например, жестов, слов, указательных знаков, предметов.

III. По форме:

1. Чувственное – связано с эмоциями и избирательной ра­ботой органов чувств, в центре сознания находится какое-либо чувственное впечатление.

2. Интеллектуальное – связано с сосредоточенностью и направленностью мысли, объектом интереса является мысль.

3. Сенсорное – зрительное, слуховое, тактильное и др.

4. Моторное – связано с движениями отдельных частей тела или всего тела.

IV. По направленности:

1. Внешнее – направленность сознания на предметы, явле­ния внешнее среды и свои внешние действия.

2. Внутреннее – направленность внимания на явления и со­стояния внутренней среды организма.

V. По активности в организации внимания:

1. Непроизвольное внимание не связано с участием воли, т.е. не требует усилий для того, чтобы удерживать в течение оп­ределенного времени сосредоточивать на чем-то внимание. Причины, вызывающие непроиз­вольное внимание человека, кроются, в первую очередь, в особен­ностях внешних воздейст­вий – раздражителей. По своему проис­хождению непроизволь­ное внимание ближе всего связано с «ори­ентировочными реф­лексами».

2. Произвольное обязательно включает волевую регуля­цию, требует усилий для того, чтобы удерживать в течение оп­ределенного времени на чем-то внимание. В механизмах суще­ственную роль играют общие навыки и умения к сосредоточен­ности, формирующиеся в процессе обучения. Причиной, вызы­вающей и поддерживающей произвольное внимание, является осознание значения объекта внимания для выполнения данной деятельности, удовлетворения потребностей, тогда как при не­произвольном внимании значение объекта может и не осозна­ваться.

3. Послепроизвольное внимание носит целенаправленный характер и первоначально требует волевых усилий, но затем че­ловеку становятся интересными и значимыми содержание и процесс деятельности, а не только ее результат и внимание ста­новится как бы непроизвольным. Но в отличие от непроизволь­ного внимания остается связанным с сознательными целями, а в отличие от произвольного, здесь нет волевых усилий.

Контрольные вопросы

1. Дайте определение понятию внимание.

2. Физиологические теории внимания.

3. В чем заключается принцип доминанты?

4. Основные свойства внимания.

5. В чем сходство и отличие между непроизвольной переключаемостью и отвлекаемостью?

6. Принципы классификаций внимания.

7. В чем отличие произвольного, непроизвольного и после­произвольного внимания?

Тестовые задания

Выберите один или несколько правильных ответов

20. Непроизвольное перемещение внимания с основной деятельности на незначительные объекты, называется

а) переключение

б) флуктуация

в) отвлечение

г) распределение

д) забывание

21. сосредоточенность внимания на определенных объектах при одновременном отвлечении от других, называется

а) устойчивость

б) объем

в) распределение

г) концентрация

д) отвлекаемость

22. При переходе субъекта от одной деятельности к другой, от одного объекта к другому, внимание проявляет следующее качество

а) колебание

б) неустойчивость

в) переключение

г) концентрация

д) распределение

23. активное направление своей деятельности с помощью усилий воли, называется

а) произвольное внимание;

б) непроизвольное внимание;

в) послепроизвольное внимание;

г) отвлеченное внимание

1.

2.

3.

4.

5.

6.

7.

8.

9.

10.

11.

12.

13.

14.

15.

16.

17.

18.

19.

20.

21.

22.

23.

24. Установите соответствие между свойствами внимания и их характеристиками

Психологическая характеристика памяти

Память – это форма отражения действительности, заклю­чающаяся в запоминании, удерживании, воспроизведении и за­бывании информации. В памяти отражается не то, что присутст­вует в поле сознания в данный момент, а то, что воздействовало на психику в прошлом. Благодаря памяти человек в состоянии накапливать информацию, не теряя прежних знаний и навыков. Память занимает особое место среди познавательных процессов. Так, память тесно связана с процессом сигналы мышц от различных частей тела мышления и лежит в ос­нове способностей человека. В основе памяти лежат ассоциации – связи между отдельными образами. Существование ассоциа­ций связано с тем, что предметы и явления действительно запе­чатлеваются и воспроизводятся не изолированно друг от друга, а в связи друг с другом. Воспроизведение одних влечет за собой воспроизведение других, что обусловливается реальными объ­ективными связями предметов и явлений.

Будучи важнейшей характеристикой всех психических процес­сов, память обеспечивает единство и целостность чело­веческой личности.

В настоящее время в науке нет единой и законченной тео­рии памяти. Большое разнообразие гипотетических концепций и мо­делей обусловлено активизацией поисков, предпринимаемых, особенно в последние годы, представителями различных наук. К двум давним уровням изучения механизмов и закономерностей памяти – психологическому и нейрофизиологическому – сейчас прибавился третий – биохимический. Формируется также кибер­нетический подход к изучению памяти.

Психологические теории памяти.Психологический уро­вень изуче­ния механизмов памяти хронологически старше дру­гих и пред­ставлен в науке наиболее многочисленным рядом различных направлений и теорий. Эти теории можно классифи­цировать и оценивать в зависимости от того, какую роль в фор­мировании процессов памяти отводили они активности субъ­екта и как рас­сматривали природу этой активности. В боль­шинстве психологи­ческих теорий памяти в центре внимания оказывается либо объект («материал») сам по себе, либо субъ­ект («чистая» активность со­знания) безотносительно к содер­жательной стороне взаимодей­ствия субъекта и объекта, т.е. безотносительно к деятельности индивида. Отсюда неизбежная односторонность рассматриваемых концепций.

Первая группа теорий составляет так называемое ассо­циатив­ное направление. Его центральное понятие – понятие ассоциа­ции – обозначает связь, соединение и выступает в каче­стве обяза­тельного принципа всех психических образований. Этот принцип сводится к следующему: если определенные пси­хические образо­вания возникли в сознании одновременно или непосредственно друг за другом, то между ними образуется ас­социативная связь и повторное появление какого-либо из эле­ментов этой связи не­обходимо вызывает в сознании представле­ние всех ее элементов.

Таким образом, необходимым и достаточным основанием для образования связи между двумя впечатлениями ассоциа­циями считает одновременность появления их в сознании. По­этому задача более глубокого изучения механизмов запомина­ния перед ассоцианистами вообще не возникала, и они ограни­чились характеристикой внешних условий, необходимых для возникновения «одновременных впечатлений». Все многообра­зие таких условий было сведено к следующим трем типам: а) пространственно-временная смежность соответствующих объ­ектов; б) их подобие; в) их различие или противоположность.

Соответственно этим трем типам отношений между явле­ниями внешнего мира выделялись 3 типа ассоциаций – ассо­циации по смежности, по сходству и контрасту.

· Ассоциации по смежности возникают по признаку смежности соответствующих объектов во времени или пространстве (море — берег, дым — огонь и т. д.)

· Ассоциации по сходству возникают на основе внешнего сходства соответствующих объектов (самолет — орел)

· Ассоциации по контрасту объясняется наличием у явлений противоположных свойств. В результате этого в дальнейшем один из контрастных раздражителей может вызвать сразу же вслед за собой то, что вызывалось раньше другим (контрастным с ним) раздражителем (например, явление антонимии: горе – радость, белое – черное, холодное – горячее и т. д.)

В основе ука­занных типов ассоциаций лежат сформулированные еще Ари­стотелем (384 – 322 до н.э.) три принципа «сцепления» пред­ставлений. Под эти три принципа ассоцианисты, не без некото­рого насилия, подводили все многообразие связей, в том числе и причинно-следственные связи.

Поэтому выделяют также более сложные ассоциации – смыс­ловые. В них связываются два явления, которые и в действитель­ности постоянно связаны: часть и целое, род и вид, причина и следствие. Таковыми являются, в частности, ассоциации, отражающие родовидовые и причинно-следственные отношения между объектами окружающего мира (например, цветок – роза, болезнь – смерть и т.п.). Эти ассоциации являются основой наших знаний.

Само понятие ассоциации прочно утвердилось в психоло­гии, хотя его содержание в дальнейшем было существенно пе­реосмыслено и углублено. Запоминание – это действительно связывание нового с уже имеющимся в опыте. Операция связы­вания становится вполне очевидной, когда нам удается поэле­ментно развернуть последующий процесс памяти, т.е. воспроиз­вести какой-либо материал. На самом же деле связи образуются избирательно, и на вопрос о том, чем детерминируется этот процесс, ассоцианизм ответа не давал, ограничившись лишь констатацией фактов, которые свое научное обоснование полу­чили гораздо позже. Поскольку активность, сознательность и осмысленность запоминания связывались только с высшими этапами в развитии памяти, то применительно к низшим ее этапам использовалось то же понятие ассоциации по смежности. Так родилась концеп­ция двух видов связей: ассоциативных и смысловых. С ней ока­залась связанной и теория двух видов памяти: механическийи логический.

На основе критики ассоцианизма в психологии возник ряд новых теорий и концепций памяти. Их сущность в значительной степени определяется тем, что именно критиковали они в ассо­циативной психологии, каково их отношение к самому понятию ассоциации.

Наиболее решительная критика ассоциативной теории па­мяти велась с позиции так называемого гештальтизма. Основ­ное понятие этой новой теории – понятие Гештальта – обозна­чает целостную организацию, структуру, не сводимую к сумме составляющих ее частей. Таким образом, эле­ментному подходу ассоцианистов к явлениям сознания гештальтизм противопос­тавляет, прежде всего, принцип синтеза элементов, принцип пер­вичности целого по отношению к его частям. У гештальтистов принцип целостности выступает как изначально данный, законы гештальта (как и законы ассо­циации) действуют вне и помимо деятельности самого субъекта. С этой точки зрения гештальтизм по существу оказывается в одном ряду с теорией ассоцианизма.

В современной науке все большее признание приобретает теория, которая в качестве основного понятия рассматривает деятельность личности как фактор, детерминирующий фор­мирование всех ее психических процессов, в том числе и процес­сов памяти Согласно этой концепции, протекание процессов запоминания, сохранения и воспроизведения определяется тем, какое место занимает данный материал в деятельности субъекта. Основной тезис этой концепции может быть сформулирован так: образование связей между различными представлениями опре­деляется не тем, каков сам по себе запоминаемый материал, а, прежде всего тем, что с ним делает субъект.

Физиологические теории памяти.Физиологические тео­рии ме­ханизмов памяти тесно связаны с важнейшими положе­ниями учения И.П. Павлова о закономерностях высшей нервной деятель­ности. Учение об образовании условных временных свя­зей – это теория механизмов формирования индивидуального опыта субъекта, т.е. собственно теория «запоминания на физио­ло­гическом уровне». В самом деле, условный рефлекс как акт обра­зования связи между новым и уже ранее закрепленным со­держанием составляет физиологическую основу акта запомина­ния.

К физиологическим теориям более или менее непосредст­венно примыкает так называемая физическая теория памяти. Название физической она получила потому, что, согласно пред­ставлениям ее авторов, прохождение любого нервного импульса через опреде­ленную группу нейронов оставляет после себя в собственном смысле слова физический след. Физическая мате­риализация следа выражается в электрических и механических изменениях синапсов (места соприкосновения нервных клеток). Эти изменения облег­чают вторичное прохождение импульса по знакомому пути.

Современные нейрофизиологические исследования харак­те­ризуются все более глубоким проникновением в механизмы укрепления и сохранения следов на нейронном и молекулярном уровне.

Биохимические теории памяти.Нейрофизиологический уровень изучения механизмов памяти на современном этапе все более сближается и нередко прямо смыкается с биохимическим. Это подтверждается многочисленными исследованиями, прово­димыми на стыке указанных уровней. На основе этих исследо­ваний возникла, в частности, гипотеза о двухступенчатом ха­рактере процесса запоминания. Суть ее состоит в следующем. На первой сту­пени (непосредственно после воздействия раздра­жителя) в мозгу происходит кратковременная электрохимиче­ская реакция, вызывающая обратимые физиологические изме­нения в клетках. Вторая стадия, возникающая на основе первой, — это собственно биохимическая реакция, связанная с образо­ванием новых белковых веществ (протеинов). Первая стадия длится секунды или минуты и ее считают физиологическим ме­ханизмом кратковременною запоминания. Вторая стадия, при­водящая к необратимым химическим изменениям в клетках, считается механизмом долговременной памяти.

Известно, что временная потеря сознания у людей также приводит к забыванию того, что происходило в непосредст­венно предшествующий этому событию период.

Можно думать, что стиранию подвержены те следы воз­действия, которые не успели закрепиться вследствие прекраще­ния кратковременных электрохимических реакций еще до на­чала соответствующих биохимических изменений.

Сторонники химических теорий памяти считают, что специфические химические изменения, происходящие в нерв­ных клетках под действием внешних раздражителей, и лежат в основе механизмов процессов закрепления, сохранения и вос­произведения ими следов. Имеются в виду различные перегруп­пировки бел­ковых молекул нейронов, прежде всего молекул так называемых нуклеиновых кислот. Дезоксирибонуклеиновая ки­слота (ДНК) считается носителем генетической, наследствен­ной, памяти, рибонуклеиновая кислота (РНК) – основой онтоге­нетической, инди­видуальной, памяти.

Важно подчеркнуть, что, хотя процессы челове­ческой па­мяти характеризуются очень сложным взаимодействием на всех уровнях, их детерминация идет сверху, от деятельности чело­века. Здесь действует принцип: от целого – к его частям. В соот­ветствии с этим и материализация следов внешних воз­действий осуществляется в направлении: организм – орган – клет­ка, а не наоборот. Таким образом, психологический уровень, уровень деятельности индивида, оказывается определяющим по отноше­нию к функционированию нижележащих уровней.

Характеристики памяти

1. Объем – характеризует возможности запоминания и со­хранения информации. В качестве показателя используют коли­чество запомненных единиц информации.

2. Быстрота воспроизведения – характеризует способ­ность человека использовать в практической деятельности имеющуюся у него информацию с определенной скоростью.

3. Точность воспроизведения – отражает способность чело­века точно сохранять, а также точно воспроизводить запе­чатленную в памяти информацию.

4. Длительность – отражает способность человека удержи­вать определенное время необходимую информацию.

Мнестические функции

1. Запоминание – процесс закрепления новой информации путем связывания ее с приобретенным ранее знанием. Запоминание протекает в трех формах:

1) запечатление — кратковременное и долговременное сохранение материала, предъявлявшегося однократно на несколько секунд;

2) непроизвольное запоминание – непреднамеренное сохранение в памяти неоднократно воспринимаемого материала;

3) преднамеренное запоминание (заучивание) – целенаправленное запоминание с целью сохранения материала в памяти. При заучивании материала существенны рациональное распределение его во времени, активное воспроизведение материала заучивания.

Успех запоминания определяется правильной организацией повторений, которые должны быть осознанными, осмысленными и активными. Лучший вид повторения – это включение усвоенного материала в последующую деятельность, с тем чтобы повторение каждый раз проводилось на новом уровне осознания.

2. Воспроизведение – человек произвольно или непроиз­вольно может восстанавливать в памяти и воспроизводить полу­ченную им ранее информацию.

Формы воспроизведения:

· Узнавание – восстановление запечатленной информации, осуществляется в условиях повторного восприятия информации.

· Воспоминание – осуществляется без повторного воспри­ятия информации.

· Припоминание – наиболее активная форма воспроизведе­ния, зависит от ясности поставленных задач, от степени логической упорядоченности запоминаемой и хранимой информации.

· Реминисценция – отсроченное воспроизведение ранее вос­принятого, казавшегося забытым. Реминисценция чаще всего имеет место при следующих условиях:

1. в случае, когда человек раньше выучил, запомнил и знал соответствующий материал;

2. тогда, когда он его уже неоднократно пытался вспомнить или когда-то вспоминал;

3. при условии, что потребность вспомнить данный материал у человека сохраняется.

С явлением реминисценции, кроме того, связан следующий интересный факт: отсроченное на несколько дней воспроизведение выученного материала дает лучшие результаты, чем его воспроизведение непосредственно сразу после заучивания. Реминисценция, вероятно, объясняется тем, что со временем структурные, логические, смысловые связи между элементами заученного материала упрочиваются, становятся более четкими.

· Эйдетизм – зрительная память, долго сохраняющая яр­кий образ со всеми деталями воспринятого.

3. Хранение– мнестический процесс длительного удержа­ния в памяти информации.

4. Забывание– утрата четкости или уменьшение объема закреплённого в памяти материала в сочетании с невозможно­стью его воспроизвести, а в некоторых случаях узнать извест­ную информацию.

Законы памяти

Из законов памяти выделяют: эффект Зейгарник – неза­вершенные действия запоминаются лучше завершенных; кривую забывания Эббингауза – забывание особенно интенсивно проис­ходит непосредственно после заучивании и не имеет линейной зависимости.

Г.Эббингауз описал также ряд закономерностей запоми­нания:

· Сравнительно простые события в жизни, которые производят на человека особенно сильное впечатление, могут запоминаться сразу и надолго, и по истечении многих лет с момента первой и единственной встречи с ними могут выступать с отчетливостью и ясностью.

· Более сложные и менее интересные события человек может переживать десятки раз, но они в памяти надолго не запечатлеваются.

· При пристальном внимании к событию достаточно бывает его однократного переживания, чтобы в дальнейшем точно и в нужном порядке воспроизвести по памяти его основные моменты.

· Человек может объективно правильно воспроизвести события, но не осознавать этого, и, наоборот, ошибаться, но быть уверенным в том, что воспроизводит их правильно.

· Если увеличить число элементов запоминаемого ряда до количества, превышающего максимальный объем кратковременной памяти, то число правильно воспроизведенных элементов этого ряда после однократного его предъявления уменьшается. Одновременно при увеличении такого ряда возрастает и количество необходимых для его запоминания повторений. Например, если после однократного запоминания в среднем человек воспроизводит 6 бессмысленных слогов, то в случае, когда исходный ряд состоит из 12 таких слогов, воспроизвести 6 из них удается, как правило, лишь после 14 или 16 повторений. В случае если количество слогов в исходном ряду будет равно 26, то понадобится примерно 30 повторений для получения того же самого результата, а в случае ряда из 36 слогов — 55 повторений.

· При запоминании длинного ряда лучше всего по памяти воспроизводятся его начало и конец (“эффект края”).

· Для ассоциативной связи впечатлений и их последующего воспроизводства особо важным представляется то, является ли они разрозненными или составляют логически связное целое.

· Повторение несколько раз подряд заучиваемого материала менее продуктивно для его запоминания, чем распределение таких повторений во времени, например, в течение нескольких часов или дней.

· Новое повторение способствует лучшему запоминанию того, что было выучено раньше.

· С усилением внимания к запоминаемому материалу число повторений, необходимых для его заучивания наизусть, может быть уменьшено, причем отсутствие внимания не может быть возмещено увеличением числа повторений.

· То, чем человек особенно интересуется, запоминается без труда. Наиболее отчетливо эта закономерность проявляется в зрелые годы.

· Редкие, странные, необычные впечатления запоминаются лучше, чем привычные и часто встречающиеся.

· Любое новое впечатление, полученное человеком, не остается в его памяти изолированным и неизменным. Будучи запомнившимся, в одном виде, оно со временем может несколько измениться, вступив в ассоциативную связь с другими впечатлениями, изменившись под их влиянием.

Из законов памяти вытекают три основных способа запоминания.

1. Рациональный – основан на установлении логических, смысловых связей внутри запоминаемого материала, а также между ним и уже накопленными знаниями. Это наиболее эффективный способ.

2. Механический – его мы называем «зубрежкой». Он самый неэффективный, но, бывает, становится необходимым. Ориентируйтесь здесь на законы повторения и усиления первоначального впечатления.

3. Мнемо-технический – способ опосредованного запоминания. То, что необходимо запомнить, по определенным правилам или ассоциативно переводится в другую знаковую систему, в иные образы, которые запоминаются легче.

Классификация видов памяти

I. Генетическая память – наследственная, передает ин­формацию от поколения к поколению. Хранит информацию об анатомическом строении, физиологических особенностях орга­низма, предрасположенность. Вся информация записана на мо­лекулах ДНК, которые устойчивы к внешним раздражителям и могут самостоятельно исправлять некоторые свои повреждения.

II. Прижизненная память – хранилище информации, полу­ченной с момента рождения до смерти.

Существует несколько принятых классификаций при­жизненной памяти:

1. По характеру психической активности:

· Импритинг – одномоментное установление очень устой­чивой специфической связи человека или животного с конкрет­ным объектом внешней среды. Эта связь сохраняется длитель­ное время, что рассматривается как пример научения и долго­временного запоминания с одного предъявления.

· Двигательная память – ранняя форма памяти, обнаружи­вается у ребенка в первые недели жизни. Фиксиру­ются сигналы мышц от различных частей тела; сохраняя сведе­ния об успешных моторных действиях, ребенок постепенно ов­ладевает актами движений. В более старшем возрасте двига­тельная память помогает формированию сложных навыков (профессиональных, спортивных движений). При разучивании упражнений замечено, что легче запоминается направление и амплитуда движений и значительно труднее – интенсивность.

· Эмоциональная память – ответственна за воспроизведе­ние определенных чувственных состояний в случаях, когда по­вторяется вызвавшая их ранее ситуация. Начинает функциони­ровать с момента рождения ребенка, чем больше ребенок полу­чает положительных эмоций, тем благоприятнее общий фон его развития и менее вероятны физическая и социальная дезадапта­ция в будущем.

· Образная память – основана на сохранении образов раз­ных модальностей (зрительных, слуховых, вкусовых и т.д.). Дольше всего хранятся яркие, неожиданные образы.

· Сенсорная память:

1.Последовательные образы – отрицательные (при про­смотре красного квадрата в течение нескольких секунд, а после смотреть на чистый белый лист бумаги выявится отпеча­ток такой же формы, но сине-зеленого цвета), положительные (находясь в темноте положить на руку предмет и на 0,5 секунд осветить предмет ярким светом и погасить, после будет про­должаться видение яркого образа этого предмета в натуральных цветах).

2.Эйдетические образы – след только что закончивше­гося возбуждения в каком-либо анализаторе в виде четкого и яркого образа, сохраняющиеся длительное время.

· Символическая память (память на абстрактный, отвле­ченно-символический материал):

1. Словесная память – подвержена влиянию волевых усилий, более точна, имеет неограниченный объем. Обеспечи­вает передачу социального опыта от поколения к поколению.

2. Логическая память – направлена на сохранение смысла текста, является частью абстрактного мышления.

2. По характеру цели деятельности:

1.Непроизвольная память – основана на сильном мо­тиве, интересе, ярком впечатлении, не требует от человека воле­вых усилий.

2.Произвольная память – основана на наличии сознатель­ной цели на запоминание, требует от человека волевых усилий.

3. По характеру деятельности:

1. Механическая память – запоминаются разнородные, не связанные между собой символы, даты цифры, слова.

2. Смысловая память – запоминаются сведения, имею­щие внутреннюю связь, логическое основание.

4. По времени хранения информации:

· Мгновенная память – основана на действии инерционно­сти различных анализаторов. Время сохранения следа в мгновенной памяти составляет несколько секунд (для зрения: 0,5 – 0,6 сек., для слуха: 2 – 4 сек.)

· Кратковременная память – в нее попадает информа­ция из мгновенной памяти. Время хранения следов в кратковре­менной памяти составляет несколько десятков секунд. Объем кратковременной памяти составляет в среднем 7 структурных единиц (цифры, буквы, слова, предложения).

· Оперативная память – разновидность кратковремен­ной памяти, необходима для выполнения более длительных дей­ствий (для решения задачи), может составлять несколько минут или часов.

· Долговременная память – время хранения информации не ограничено. Но человек не всегда может получить доступ и воспользоваться хранящейся информацией.

· Феноменальная память – выходит за пределы обыч­ных способностей по объему и длительности хранения инфор­мации.

Классификация основных видов внимания – 9psy.ru

Какие же бывают виды внимания? Его классифицируют по нескольким основаниям: по характеру целей деятельности, направленности, форме организации, степени социализации, степени регуляции и ориентации на конкретные психические процессы.

В зависимости от характера целей деятельности разделяют на произвольное, непроизвольное и послепроизвольное.

Содержание статьи

Что такое внимание в психологии?

Самые популярные определения:

Внимание — избирательная направленность восприятия на тот или иной объект.

Изменение внимания выражается в изменении переживания степени ясности и отчётливости содержания, являющегося предметом деятельности человека.

Внимание находит себе выражение в отношении человека к объекту. За вниманием часто стоят интересы и потребности, установки и направленность человека, другие психологические характеристики личности. Это, прежде всего, вызывает изменение отношения к объекту, выражаемое вниманием — его сознаваемостью. На причины внимания к тому или иному объекту указывают его свойства и качества, взятые в их отношении к субъекту.

Внимание обуславливает успешную ориентировку субъекта в окружающем мире и обеспечивает более полное и отчётливое отражение его в психике. Объект внимания оказывается в центре нашего сознания, все остальное воспринимается слабо, неотчётливо, однако направленность нашего внимания может меняться.

Внимание не представляет самостоятельного психического процесса, так как не может проявляться вне других процессов. Мы внимательно или невнимательно слушаем, смотрим, думаем, делаем. Таким образом, внимание является лишь свойством различных психических процессов.

Внимание – это особое состояние сознания, благодаря которому субъект направляет и сосредотачивает познавательные процессы для более полного и четкого отражения действительности. Внимание связано со всеми сенсорными и интеллектуальными процессами. Наиболее заметно эта связь проявляется в ощущениях и восприятиях.

Характеристики внимания:

• Устойчивость – это длительность привлечения внимания к одному и тому же объекту или к одной и той же задаче.
• Концентрация определяется единством двух важных факторов – повышением интенсивности сигнала при ограниченности поля восприятия.
• Под распределением понимают субъективно переживаемую способность человека удерживать в центре внимания определенное число разнородных объектов одновременно.
• Переключаемость определяется скоростью перехода от одного вида деятельности к другому.

Непроизвольное внимание

Внимание непроизвольное (первичное, пассивное) – это такой вид, когда человек не прикладывает усилия воли, чтобы быть сосредоточенным, а также не ставит перед собой цели быть таковым.

Это простой и генетически первичный вид , который дан человеку от рождения. В его основе – ориентировочная деятельность человека. Сосредоточение на предметах или явлениях в этом случае происходит в результате действия внешних или внутренних факторов непроизвольного внимания, к которым относятся:

• интенсивность раздражителя: достаточно сильный любой раздражитель, например, яркий свет, сильный звук, резкий запах и т.д. невольно привлекает человека;
• контрастность раздражителей: объект больше (или меньше) по величине по сравнению с окружающими, прекращение или начало действия раздражителя невольно привлекает;
• новизна раздражителя: пока не исчерпан элемент новизны, сосредоточенность можно поддерживать достаточно долго;
• прерывистость раздражителя: раздражитель, который то появляется, то исчезает, то усиливается, то ослабляется;
• подвижность раздражителя: раздражитель, который движется, больше привлекает нас, чем неподвижный;
• структурированность раздражителя: к объединенным в целостную структуру раздражителям взгляд привлекается быстрее и легче;
• соответствие раздражителя нашем внутреннему состоянию: мы замечаем то или иное явление, когда оно становится созвучным нашим чувствам, потребностям, намерениям и т.п.;
• интерес к деятельности: чем выше интерес, тем больше непроизвольная сосредоточенность;
• субъективная значимость раздражителя: чем больше субъективная значимость влияния, тем сильнее непроизвольная концентрация;
• установка: чем больше готовность к деятельности, тем выше эффект;
• потребности: то, что совпадает с потребностями личности, быстрее привлекает нас;
• эмоциональная окрашенность раздражителя или деятельности: раздражитель, который несет либо положительную, либо отрицательную эмоциональную окрашенность, невольно привлекает;
• влияние прошлого опыта: чем больше знаний, навыков, привычек связано с событием, на котором мы должны сосредоточиться, тем легче поддерживается непроизвольная фокусировка.

Условием возникновения непроизвольного внимания не является:

1. новизна раздражителя
2. неожиданность раздражителя
3. интерес человека
4. усталость человека

Произвольное внимание

Внимание произвольное (вторичное, активное) – это такой вид , когда человек прикладывает усилия воли, чтобы быть внимательным, а также ставит перед собой цель быть внимательным.

Это более высший вид цонцентрации по сравнению с непроизвольным, он формируется в течение жизни человека и является результатом сознательной активности субъекта.

Произвольность связана с волевой регуляцией противоречивых мотивов, побуждений и интересов. Волевые усилия следует прикладывать периодически, иначе произвольное внимание угасает. Волевые усилия на предметах и явлениях помогают поддерживать следующие внешние и внутренние факторы:

• практические действия: если в процесс деятельности включены практические действия, сосредоточенность поддерживать легче. Например, лекцию легче внимательно слушать, если одновременно ее конспектировать;
• понимание задачи: если задача выполняется, человек понимает, на нем легче сконцентрироваться;
• формулировки вопросов: если формулируется вопрос по объекту деятельности;
• интерес к деятельности: чем выше интерес, тем больше сосредоточенность;
• успех в деятельности: не успешно выполненное задание продолжает привлекать;
• завершенность деятельности: незаконченная деятельность способствует поддержанию произвольной фокусировки;
• интеллект человека: легче сосредоточиться тому человеку, который имеет более высокое интеллектуальное развитие;
• словесная регуляция: произвольное внимание поддерживает словесное напоминание самому себе о цели деятельности;
• эмоциональная возбужденность: если объект вызывает умеренное эмоциональное возбуждение, на нем легче сосредоточиться. Если эмоциональное возбуждение не связано с выполняемой работой, например, человека беспокоят его личные проблемы, это ослабляет фокусировку;
• привычка человека: если человек привык работать сосредоточенно в различных условиях, ему будет легче концентрироваться;
• влияние прошлого опыта: чем больше знаний, навыков, привычек связано с событием, тем легче поддерживать произвольную концентрацию;
• состояние психики человека: в конце рабочего дня, а также в конце недели наши возможности ослабляются.

Послепроизвольное внимание

Кроме непроизвольного и произвольного внимания в жизнедеятельности человека встречается еще один вид – послепроизвольное. Это такой вид, для которого характерно снижение волевых усилий при сохранении цели быть внимательным.

На первых этапах деятельности задействовано произвольное внимание, т.е. нужны усилия воли для достижения поставленной цели, а в дальнейшем в результате привлечения факторов для поддержания непроизвольной концентрации волевые усилия ослабляются. На этом этапе произвольная концентрация перерастает в послепроизвольную.

Факторы послепроизвольного внимания являются теми же, что и для непроизвольного и произвольного. Основным из них является интерес к деятельности. Иногда на этом факторе делают чрезмерный акцент.

В результате послепроизвольное сосредоточение сводят к заинтересованности, которая вызвана особенностями объекта или явления. Это суженный взгляд на природу этого внимания, потому что послепроизвольное внимание – это такое проявление личностной направленности, когда сама деятельность переживается как потребность, а ее результат является личностно значимым для человека.

В возникновении послепроизвольного внимания играет также роль привычка человека трудиться. В практической деятельности человека рассмотренные три вида внимания являются взаимосвязанными, и их считают тремя степенями развития внимания.

Зависимость от направления приложения

В зависимости от направленности (особенностей объекта внимания, характера действия) выделяют внутреннее и внешнее приложение.

Внешнее (сенсорное, перцептивное) сосредоточено на объектах и явлениях внешнего мира, например, на определенных предметах, работе и т.п. Этот вид внимания является необходимым для успешного восприятия человеком окружающего мира. Оно усиливает чувствительность органов чувств, ускоряет процесс восприятия, способствуя ясности и четкости отображения. Особенно выразительной внешняя концентрация является в условиях, когда человек не только смотрит, но и присматривается, не только слушает, но и прислушивается. Это сопровождается соответствующей позой организма, движениями головы, глаз и т.д.

В отличие от внешнего, внутреннее сосредоточение сосредоточено не на самих объектах или явлениях внешнего мира, а на их образах. Оно направлено на внутренний мир человека, например, на его мышление, потребности, интересы, переживания и т.д. Оно связано с самосознанием и рефлексией. Интеллектуальное, эмоциональное и волевое развитие человека невозможно без внутреннего внимания. Нередко его сопровождают неосознанные движения губ, жестикуляция, непреднамеренное рисования и т.п. В деятельности человека внутреннее и внешнее чередуются, тормозя друг друга. Это связано с тем, что человеку трудно сосредоточится на своих внутренних проблемах и одновременно внимательно выполнять какую-то сложную деятельность. По происхождению внутреннее внимание возникает позже внешнего.

Форма организации

В зависимости от формы организации внимание разделяют на индивидуальное, групповое и коллективное.

Индивидуальное – это сосредоточенная и направленная деятельность отдельного конкретного лица, например, сосредоточенность студента во время контрольной работы.

Групповое внимание проявляется в сосредоточении внимания нескольких лиц данной группы на совместном задании, например, работа в подгруппах на тренинге. Организация такого внимания дается нелегко, потому что группы могут отвлекать друг друга.

Коллективная концентрация – это сосредоточение всех лиц группы на одном общем задании, например, концентрация студентов во время лекции на преподавателе.

По степени социализации выделяют естественное и социальное внимание. Естественное проявляется как выборочное реагирование на раздражители в виде ориентировочного рефлекса. Оно дано человеку от рождения. Социальное формируется при жизни и связано с приобретением социального опыта и включением свободной регуляции в процессы внимания.

По степени регуляции выделяют опосредованное и непосредственное внимание. Непосредственное регулируется только объектом, который отвечает потребностям и интересам человека и на которого направлена фокусировка человека. Например, нас привлекает яркий свет или громкий звук. Внимание опосредованное регулируется содержанием и пониманием воспринятого. Она поддерживается с помощью специальных средств: слов, жестов, интонации и т.п. Например, нас может привлечь содержание шепота. Этот вид тесно связан с апперцепцией. У человека сначала появляется непосредственное внимание, а уже позже – опосредованное.

В зависимости от ориентации на конкретные психические процессы выделяют чувственное и интеллектуальное сосредоточение. Чувственное связано или с избирательной работой органов чувств, и тогда в центре фокусировки является звук, запах и т.д., или с избирательной работой нашей эмоциональной сферы, и тогда в центре находятся эмоции и чувства человека. Внимание интеллектуальное связано с направленностью и сосредоточенностью мыслительных процессов. Итак, оно ориентировано на мышление. Чувственное по происхождению первичное, интеллектуальное – вторичное.

22. Понятие внимания. Классификация видов внимания.

Внимание
— направленность
и сосредоточенность сознания на
определённых объектах или определённой
деятельности при отвлечения от всего
остального.

Видывнимания.
В зависимости от активности личности
:

а
НЕПРОИЗВОЛЬНОЕ. Возникает без намерения
человека увидеть или услышать что- либо,
без заранее поставленной цели, без
усилия воли.

Интенсивность
раздражителя

Новизна,
необычность обьектов

Резкая
смена, динамичность обьектов

ПРОИЗВОЛЬНОЕ
— активное, целенаправленное сосредоточение
сознания, поддержание уровня с определенно-
волевыми усилиями, необходимо для борьбы
с более сильными воздействиями.

Целенаправленность

Организованность

Повышенная
устойчивость

ПОСЛЕПРОИЗВОЛЬНОЕ
— наступает после произвольного через
вхождение в деятельность и возникает
в связи с эти интерес, в результате чего
сосредотачивается.

23. Свойства внимания.

Сосредоточенность
— удержание
внимания на одном объекте или одних
действиях при отвлечения от всего
остального.

Устойчивость
— длительность сосредоточения
на объекте или явлении, удержание,
требуемой интенсивности внимания в
течение длительного времени.

Объём
— характеризуется количеством объектов
или их элементов.

Распределение
— возможность
выполнения одновременно двух и более
видов деятельности.

Переключаемость
— способность быстро включаться из
одного вида деятельности и включаться
в другой вид деятельности.

24. Понятие памяти. Связь памяти и мышления. Процессы памяти.

Память
— это сложный психический процесс,
состоящий из нескольких частных
процессов, связанных друг с другом.
Память необходима человеку, — она
позволяет ему накапливать, сохранять
и впоследствии использовать личный
жизненный опыт, в ней хранятся знания
и навыки.

Основными
характеристиками памяти являются:
объем, быстрота запечатления, точность
воспроизведения, длительность сохранения,
готовность к использованию сохраненной
информации.
Объем
памяти
—
это важнейшая интегральная характеристика
памяти, которая характеризует возможности
запоминания и сохранения информации.
Говоря об объеме памяти, в качестве
показателя используют количество
запомненных единиц информации.

Такой
параметр, как
быстрота
воспроизведения,
характеризует способность человека
использовать в практической деятельности
имеющуюся у него информацию. Как правило,
встречаясь с необходимостью решить
какую-либо задачу или проблему, человек
обращается к информации, которая хранится
в памяти. При этом одни люди достаточно
легко используют свои «информационные
запасы», а другие, наоборот, испытывают
серьезные затруднения при попытке
воспроизвести информацию, необходимую
для решения даже знакомой задачи.

Другая
характеристика памяти —
точность
воспроизведения.
Эта характеристика отражает способность
человека точно сохранять, а самое
главное, точно воспроизводить запечатленную
в памяти информацию. В процессе сохранения
в памяти часть информации утрачивается,
а часть — искажается, и при воспроизведении
этой информации человек может допускать
ошибки. Поэтому точность воспроизведения
является весьма значимой характеристикой
памяти. Важнейшей характеристикой
памяти является длительность, она
отражает способность человека удерживать
определенное время необходимую
информацию. Очень часто на практике мы
сталкиваемся с тем, что человек запомнил
необходимую информацию, но не может ее
сохранить в течение необходимого
времени. Например, человек готовится к
экзамену. Запоминает одну учебную тему,
а когда начинает учить следующую, то
вдруг обнаруживает, что не помнит то,
что учил перед этим. Иногда бывает
по-другому. Человек запомнил всю
необходимую информацию, но когда
потребовалось ее воспроизвести, то он
не смог этого сделать. Однако спустя
некоторое время он с удивлением отмечает,
что помнит все, что сумел выучить. В
данном случае мы сталкиваемся с другой
характеристикой памяти — готовностью
воспроизвести запечатленную в памяти
информацию.

Процессы
памяти: запоминание, сохранения и
воспроизведение. !!! Но не забывание, тк.
Это обратная сторона сохранения.

Запоминание
— это установление связи нового с тем,
что уже имеется в сознании человека,
«закрепление тех образов и впечатлений,
которые возникают в сознании под
действием предметов и явлений
действительности в процессе ощущения
и восприятия» . Запоминание бывает
произвольным и непроизвольным.

Запоминание
—
это процесс запечатления и последующего
сохранения воспринятой информации. По
степени активности протекания этого
процесса принято выделять два вида
запоминания:

непреднамеренное
(или
непроизвольное)

преднамеренное
(или
произвольное).

Непреднамеренное
запоминание
—
это запоминание без заранее поставленной
цели, без использования каких-либо
приемов и проявления волевых усилий.
Это простое запечатление того, что
воздействовало на нас и сохранило
некоторый след от возбуждения в коре
головного мозга. Например, после прогулки
по лесу или после посещения театра мы
можем вспомнить многое из того, что
увидели, хотя специально не ставили
себе задачу на запоминание. В принципе,
каждый процесс, происходящий в коре
мозга вследствие воздействия внешнего
раздражителя, оставляет после себя
следы, хотя степень их прочности бывает
различна. Лучше всего запоминается то,
что имеет жизненно важное значение для
человека: все, что связано с его интересами
и потребностями, с целями и задачами
его деятельности. Поэтому даже
непроизвольное запоминание, в определенном
смысле, носит избирательный характер
и определяется нашим отношением к
окружающему.

В
отличие от непроизвольного запоминания
произвольное
(или преднамеренное) запоминаниехарактеризуется
тем, что человек ставит перед собой
определенную цель — запомнить некую
информацию — и использует специальные
приемы запоминания. Произвольное
запоминание представляет собой особую
и сложную умственную деятельность,
подчиненную задаче запомнить. Кроме
того, произвольное запоминание включает
в себя разнообразные действия, выполняемые
для того, чтобы лучше достичь поставленной
цели. К таким действиям, или способам
запоминания материала, относится
заучивание, суть которого заключается
в многократном повторении учебного
материала до полного и безошибочного
его запоминания. Например, заучиваются
стихи, определения, законы, формулы,
исторические даты и т. д. Следует отметить,
что при прочих равных условиях произвольное
запоминание заметно продуктивнее
непреднамеренного запоминания.

Другой
характеристикой процесса запоминания
является степень осмысления запоминаемого
материала. Поэтому принято выделять
осмысленное и механическое запоминание.

Механическое
запоминание
—
это запоминание без осознания логической
связи между различными частями
воспринимаемого материала. Примером
такого запоминания является заучивание
статистических данных, исторических
дат и т. д. Основой механического
запоминания являются ассоциации по
смежности. Одна часть материала
связывается с другой только потому, что
следует за ней во времени. Для того чтобы
установилась такая связь, необходимо
многократное повторение материала.

В
отличие от этого осмысленное запоминание
основано на понимании внутренних
логических связей между отдельными
частями материала. Два положения, из
которых одно является выводом из другого,
запоминаются не потому, что следуют во
времени друг за другом, а потому, что
связаны логически. Поэтому осмысленное
запоминание всегда связано с процессами
мышления и опирается главным образом
на обобщенные связи между частями
материала на уровне второй сигнальной
системы.

Суть
этого закона связи памяти с мышлением
заключается в
том, что память человека на высших
уровнях ее развития тесным образом
связана с мышлением человека. Чем больше
человек размышляет над запоминаемым
материалом, тем лучше и быстрее данный
материал запоминает­ся. Иногда вообще
достаточно подумать над материалом,
чтобы запомнить, и не требуется прилагать
каких-либо до­полнительных усилий
для запоминания. Формы мышления над
запоминаемым материалом могут быть
самые разные:

—
просто мысли, которые первыми приходят
в голову по аналогии с запоминаемым
материалом; попытки глубже понять,
осмыслить запоминаемый материал;

—
обращение внимания на какую-либо часть
или аспект запоминаемого материала;

—
попытки представить этот же материал
в более компактном виде, например в виде
схемы, выражающей его содержание, и т.
д.;

—
размышление над тем, какие выводы могут
следовать из данного материала.

Чем
больше и глубже размышляет человек над
материалом, тем лучше он запоминается.
При этом формы мышления сами по себе не
имеют существенного значения: все они
способствуют запоминанию соответствующего
материала.

25.
Основные виды и типы памяти.

Виды
памяти различают по характеру психической
активности — двигательная, эмоциональная,
словесная, наглядно-образная, зрительная,
слуховая, обонятельная, осязательная,
вкусовая, по цели — произвольная и
непроизвольная ( смотреть 24 вопрос), по
времени сохранения ( продолжительность)
— кратковременная, оперативная и
долговременная.

Индивидуальная
особенность памяти человека называется
типом памяти. Различают, например,
образный и словесно-логический типы
памяти. Люди с образной памятью, вспоминая
содержание прочитанной книги, мысленно
видят перед своим умственным взором
действующих лиц, картины природы,
отдельные сцены и т.п. Лица со
словесно-логическим типом прежде всего
воспроизводят основные мысли книги,
вспоминают наиболее интересные
формулировки, выражения и пр. Подобный
же перевес в сторону образности или
отвлеченности имеет место у представителей
обеих групп и при запоминании.

Людей
с образным типом памяти чаще всего можно
найти среди деятелей искусства — в среде
художников, актеров, музыкантов,
писателей. Смысловая память обычно
свойственна ученым.

Физиологической
основой различия между образной и
словесно-лот-ческой памятью являются
особенности соотношений психофизиологических
процессов в головном мозгу: преобладание
при запоминании деятйльности первой
сигнальной системы (по И.П. Павлову) даст
в результате образный тип памяти, второй
— сповесно-лотческий. Учитывая, что
основная масса людей характеризуется
гармоническим сочетанием обеих сигоальных
систем, следует отнести их память к
среднему типу как наиболее распространенному,
который и учитывается при преподавании
в средних и высших учебных заведениях.

Своеобразной
формой образной памяти можно считать
память эмоциональную, т.е весьма развитое
запоминание и в равной же степени
воспроизведение разнообразных чувств,
с которыми человеку приходилось иметь
дело в прошлом.

Среди
других типов памяти можно отметить
зрительную, слуховую (в частности —
музыкальную), двигательную (например,
у балерин, танцовщиков) и пр. Встречаются
иногда случаи весьма развитой памяти
на числа, имена, многочисленные формы
профессиональной памяти. Подсчитано,
например, что отлично развитая зрительная
и слуховая память наблюдается примерно
у 1- 3% людей. Это позволяет им, используя
свои ивдиввдуалытые мнестические
способности, заниматься определенного
вида деятельностью, в процессе которой
природные данные еще более развиваются
и совершенствуются, достигая иногда
высшей степени.

Из
биографии И.И. Левитана известно, что
он летом часто посещал своих товарищей,
живших в одной из волжских деревень.
Работал в эти периоды художник мало,
часто вообще не брал с собой палитру.
Зато через несколько месяцев, уже зимой,
Левитан был способен у себя дома в
мастерской написать картину, которая
являлась точной копией виденного им
летом пейзажа.

В
значительной степени выраженная слуховая
память была с самых ранних лет присуща
В. А. Мощфту. Будучи четырнадцатилетним
мальчиком, он единственный раз прослушал
в Сикстинской капелле большое и слохное
произведение Miseicie d’AUegri и, придя домой,
с точностью записал его в своей нотной
тетради (копии партшур этого произведения
были запрещены папой). Композитор А.К.
Глазунов, прослушав в фортепианном
исполнении увертюру к опере «Князь
Игорь», записал ее на память. Отличной
слуховой памятью обладал писатель С.Т.
Аксаков. Достаточно было в его присутствии
прочитать 2-3 страницы незнакомых до сих
пор стихов, как он мог их тут хв повторить.

Перечисленные
типы памяти в той или иной комбинации
и степени вырахенности есть у каждого
человека. Иццивидуальные особенности
памяти также мотуг проявиться в сочетании
быстрого запоминания с медленным
забыванием, медленного запоминания с
медленным забыванием, быстрого запоминания
с быстрым забыванием. Одни лучше
запоминаются исторические события,
другие — физические формулы и т.д.

Внимание. Функции внимания. Классификация внимания. Свойства внимания

Внимание – это процесс объединения и регулирования
других психических процессов и сознания в целом в рамках какой-либо
деятельности путем организации их направленности и сосредоточения.

Направленность внимания – избирательность психической
деятельности, т.е. выбор (произвольный или непроизвольный) ее объектов.

Сосредоточение –  это во-первых: отвлечение от
постороннего по отношению к данной деятельности и даже торможение
(игнорирование) побочной деятельности; во-вторых: сосредоточение сопровождается
повышением интенсивности, напряженности выбранной психической деятельности, что
субъективно переживается как углубленность в деятельность, поглощенность ею.

Функции внимания:
1. отбор значимых для субъекта воздействий среды. Значимые воздействия –
соответствующие актуализированным потребностям, соответствующие данной
деятельности.

2. торможение (игнорирование, устранение) несущественных,
конкурирующих, побочных для данной деятельности воздействий среды.

3. удержание данной деятельности (сохранение в сознании соответствующих
образов, мыслей, предметного содержания) до достижения цели.

4. регуляция и контроль протекания психических процессов,
включенных в данную деятельности.

Классификация внимания:
I) по виду психической активности (виды внимания):

1. перцептивное (сенсорно-перцептивное) – вид внимания,
   регулирующего сенсорно-перцептивную деятельности человека.
2. интеллектуальное. – вид внимания, регулирующего
   рече-мыслительную деятельность. Для интеллектуального внимания наиболее
   характерна форма произвольного внимания.
3. эмоциональное  — вид внимания, регулирующего эмоциональные
   переживания и чувства человека.
4. волевое – вид внимания, способствующего выполнению волевых
   действий и воспитанию волевых качеств личности.

II) по уровню психической
активности (уровни внимания)

      1. непроизвольное (непреднамеренное) – это
непреднамеренное внимание к объекту, вызванное особенностями данного объекта
как раздражителя.
      2. произвольное (преднамеренное) – это преднамеренное, сознательно
направляемое и регулируемое внимание, определяемое  целью и условиями
деятельности.
      3. послепроизвольное – внимание, преднамеренно вызываемое, но не требующее
заметных волевых усилий для своего поддержания в силу переключения интереса с
цели на предмет или процесс деятельности.

III) по направленности (по
положению объекта внимания) (роды внимания):
      1. внешнее – это внимание, направленное на предметы и явления  внешнего
объективного мира.  Проявляется преимущественно при восприятиях.

      2. внутреннее – это внимание, направленное на объекты
внутреннего субъективного мира. Проявляется преимущественно при работе памяти,
воображения, мышления, переживании чувств.

Свойства внимания:
Объем внимания – пространственная характеристика внимания, определяемая
количеством объектов, одновременно охватываемых вниманием. Объем внимания у
взрослого человека обычно ограничен шестью объектами, в среднем равен 4 – 5. у
детей 2-3 объекта.

Избирательность внимания – способность выбора из
множества воздействующих раздражителей одного или нескольких наиболее
актуальных. Остальные представляются как фон. Это пространственная
характеристика.

Концентрация внимания – энергетическая характеристика
внимания, отражающая степень сосредоточенности на выбранных объектах. Это
объединение и уплотнение психических сил и за счет этого повышение
эффективности психической деятельности.

Устойчивость внимания – временной показатель
внимания, указывающий на длительность этого процесса, на время его сохранения.
Отражает стабильность и направленность, и степень сосредоточения регулируемых
вниманием психических процессов.

Переключаемость внимания – пространственная
характеристика внимания, заключающаяся в намеренном сознательном переносе
внимания с объекта на объект.

Распределение внимания – пространственная
характеристика внимания, заключающаяся в направлении и сосредоточении внимания
одновременно на нескольких объектах.

Интенсивность внимания – энергетическая
характеристика, указывающая на степень напряженности (силу) процесса внимания,
предопределенную свойствами объекта психической активности (для непроизвольного
внимания) или значимостью будущих результатов работы с этим объектом (для
произвольного внимания).

Длительность внимания – временная характеристика
внимания, измеряемая сроком удержания объекта психической активности в поле
внимания. Зависит от свойств объекта (для непроизвольного внимания) и цели
деятельности (для произвольного внимания).

Модальность внимания – качественная (информационная)
характеристика внимания, указывающая непосредственно на доминирующий
психический процесс, регулируемый в данный момент вниманием, и опосредованно –
на природу объекта психической деятельности.

Помехоустойчивость внимания – энергетическая
характеристика внимания, отражающая его неподверженность (сопротивляемость)
посторонним по отношению к избранной психической деятельности воздействиям (как
объективным, так и субъективным).

Скорость внимания – характеристика, отражающая
быстроту выбора объекта внимания и переключения с объекта на объект, а также
быстроту концентрации внимания и сосредоточения на объекте. Адекватность
внимания – интегративное свойство внимания, характеризующее, во-первых,
согласованность и объединение в единую систему всех отдельных пространственных,
временных, энергетических и информационных характеристик процесса и, во-вторых,
соответствие этой системы характеристик актуальности для субъекта выбранного
объекта и психической деятельности с ним.

Список литературы:

1. В.В. Никандров – Психология учебник, 2007 г.
2. С.Л. Рубинштейн — Основы общей психологии, 2004 г.
3. Большая энциклопедия психологических тестов 2005 г.
4. Практическая психодиагностика 2007 г.

Виды внимания. Существуют несколько разных классификаций внимания — Студопедия

Существуют несколько разных классификаций внимания. Класси-фикация по признаку произвольности является наиболее традиционной (рис. 67).

Рис. 67. Классификация внимания

Непроизвольное внимание не требует приложения усилий, оно привлекается либо сильным, либо новым, либо интересным раздра-жителем. Основная функция непроизвольного внимания заключается в быстрой и правильной ориентации в постоянно меняющихся условиях среды, в выделении тех объектов, которые могут иметь в данный момент наибольшее жизненное или личностное значение.

Произвольное вниманиесвойственно только человеку и характеризуется активным, целенаправленным сосредоточением сознания, связанным с волевыми усилиями. Произвольное внимание возникает в случаях, когда человек в своей деятельности ставит перед собой определенную цель, задачу и сознательно вырабатывает программу дейст-вий. Основной функцией произвольного внимания является активное регулирование протекания психических процессов. Именно благодаря наличию произвольного внимания человек способен активно, избирательно «извлекать» из памяти нужные ему сведения, выделять главное, существенное, принимать правильные решения, осуществлять планы, возникающие в деятельности.

Послепроизвольное внимание обнаруживается в тех случаях, когда человек, забыв обо всем, с головой уходит в работу. Этот вид внимания характеризуется сочетанием волевой направленности с благоприятными внешними и внутренними условиями деятельности.

Данные виды внимания взаимосвязаны и не должны искусственно рассматриваться как независимые друг от друга. Преподаватель в своей профессиональной деятельности имеет дело не только с индивидуальной формой внимания, которая у каждого учащегося своя, но и с коллективным вниманием. Коллективное внимание представляет собой одновременную сосредоточенность самостоятельно работающих учащихся, на него нельзя механически переносить особенности индивидуального внимания. К сожалению, психологические закономерности данного вида внимания почти не изучены, и в его организации приходится опираться на приемы и методы, обнаруженные эмпирически.

Таблица 4

Сравнительная характеристика видов внимания[42]

3.2. Классификация видов внимания

По своему
происхождению и способам осуществления
обычно выделяют три основных вида
внимания: непроизвольное, произвольное
и послепроизвольное.

1.
Непроизвольное внимание
(или пассивное,
вынужденное, непреднамеренное) возникает
и поддерживается в силу увлекательности
деятельности, ее занимательности или
неожиданности. Например, как только
человек слышит по радио интересную
новость, он невольно отвлекается от
работы и прислушивается к речи диктора.

Возникновение
непроизвольного внимания связано
с различными физическими, психофизиологическими
и психическими причинами. Эти причины
можно разделить условно на следующие
основные категории. К первой группе
причин относятся характер
и качество
раздражителя.
Всякое
достаточно сильное раздражение: громкие
звуки, яркий свет, сильный толчок, резкий
запах — невольно привлекает наше внимание.
В ту же группу причин следует отнести
и такое качество раздражителя, как его
новизна,
необычность.
Ко второй группе причин, вызывающих
непроизвольное внимание, относятся те
внешние раздражители, которые соответствуют
имеющимся у человека
потребностям.
Так, сытый и голодный человек будут
совершенно по-разному реагировать на
разговор о пище. Третья группа причин
связана с общей
направленностью личности.
Именно
поэтому, идя по одной и той же улице,
дворник обратит внимание на мусор,
полицейский — на неправильно
припаркованную машину, архитектор или
художник — на красоту старинного здания.

2.
Произвольное внимание
(или
волевое,
активное, преднамеренное) управляется
сознательной целью. Так, например, приняв
решение заняться какой-либо деятельностью,
мы, сознательно направляем наше внимание
даже на то, что нам неинтересно в данную
минуту, но необходимо для реализации
решения.

Причины
возникновения произвольного внимания
по своему
происхождению не биологические, а
социальные:
оно не созревает в организме, а формируется
у ребенка при его общении со взрослыми.

3. Послепроизвольное
вниманиетакже связано с сознательными
целями и поддерживается сознательными
интересами, но при этом человек практически
не прилагает волевых усилий. Интересными
и значимыми становятся содержание и
процесс деятельности, а не только ее
результат.

3.3. Свойства внимания

К основным свойствам
внимания относятся: устойчивость,
концентрация, распределение, переключение,
отвлекаемость и объем.

1.
Устойчивость внимания
– это
временная характеристика внимания,
длительность привлечения внимания к
одному и тому же объекту. Экспериментальные
исследования показали, что внимание
подвержено
периодическим непроизвольным колебаниям.
Периоды таких колебаний равны обычно
2–3 с. Например,
если прислушиваться к тиканью часов и
пытаться
сосредоточиться на нем, то человек будет
то слышать, то не слышать их.

Существенным
условием
устойчивости
внимания
является возможность раскрыть в предмете,
на котором оно сосредоточено, новые
стороны и связи. В тех случаях, когда
предмет внимания не обнаруживает перед
нами новые стороны, не дает возможности
для дальнейшего его изучения, мы легко
отвлекаемся, наше внимание колеблется.
Кроме того, устойчивость внимания
зависит от особенностей материала,
степени его трудности, знакомства с
ним, понятности, отношения к нему со
стороны человека, а также индивидуальных
особенностей личности.

2. Концентрация
внимания –
это степень или интенсивность
сосредоточенности внимания. А.А. Ухтомский
считал, что концентрация является
следствием возбуждения в доминантном
очаге при одновременном торможении
остальных зон коры головного мозга.

3. Распределение
внимания
– это
способность
человека удерживать одновременно в
центре внимания определенное число
разнородных объектов.
Хрестоматийным
примером служат феноменальные способности
Юлия Цезаря,
который,
согласно преданию, мог одновременно
делать семь не связанных между
собой дел.
Известно также, что Наполеон мог
одновременно диктовать своим секретарям
семь ответственных дипломатических
документов. Однако, на самом деле, человек
способен выполнять только один вид
сознательной психической деятельности.
Еще
В.Вундтом
было показано, что человек не может
сосредоточиваться на двух одновременно
предъявляемых раздражителях. Внешнее
впечатление одновременности
выполнения
нескольких дел связано с быстрым
последовательным переключением с
одного
дела на другое.
Все же
иногда человек действительно способен
выполнять одновременно два
вида
деятельности. В таких случаях один из
видов выполняемой деятельности должен
быть
полностью автоматизирован и не требовать
внимания. Если же это условие не
соблюдается,
совмещение деятельности невозможно.

3. Переключаемость
– это
сознательное и осмысленное перемещение
внимания с одного объекта на другой.
Это способность быстро ориентироваться
в сложной изменяющейся ситуации. Легкость
переключения внимания в первую очередь
зависит от соотношения между предшествующей
и последующей деятельностью и отношения
субъекта к каждой из них. Переключаемость
внимания принадлежит к числу хорошо
тренируемых качеств.

2. Объем
   – это количество объектов, которые
   можно охватить с достаточной ясностью
   одновременно. Важной и определяющей
   особенностью объема внимания является
   то, что он практически не меняется при
   обучении и тренировке. Это величина
   индивидуально изменяющаяся, но обычно
   его показатель у людей равен 5 ± 2. Объем
   внимания зависит от того, насколько
   связано между собой содержание, на
   котором сосредотачивается внимание,
   и от умения осмысленно связывать и
   структурировать материал.

3. Отвлекаемость
   – это непроизвольное перемещение
   внимания с одного объекта на другой.
   Оно возникает при действии посторонних
   раздражителей на человека, занятого в
   этот момент какой-либо деятельностью.
   Отвлекаемость может быть внешней и
   внутренней. Внешняя отвлекаемость
   возникает под действием внешних
   раздражителей. Наиболее часто отвлекают
   предметы или явления, которые появляются
   внезапно и действуют с меняющейся силой
   и частотой. Внутренняя отвлекаемость
   возникает под влиянием сильных
   переживаний, посторонних эмоций, из-за
   отсутствия интереса и чувства
   ответственности за дело, которым в
   данный момент занят человек.

Расстройства внимания. Классификация внимания.

Внимание — сосредоточенность деятельности субъекта в данный момент времени на каком-либо реальном или идеальном объекте (предмете, событии, образе, рассуждении и т.д.

Внимание характеризуется избирательностью, объемом, устойчивостью, переключаемостью. Нарушения внимания наблюдаются при разных психических и соматических заболеваниях. Возможны также нарушения внимания и при аффективно-эмоциональных реакциях и состояниях у здоровых людей.

1. Апрозексия — пониженная способность фиксировать и направлять внимание (Выпадение внимания).

2. гиперметаморфоз внимания — повышенная отвлекаемость — чрезмерная подвижность внимания, постоянный переход от одного объекта и вида деятельности к другому; уменьшение объема внимания,

3. инертность (малая подвижность) внимания — невозможность своевременной быстрой переключаемости.

4. Застреваемость — патологическая фиксация внимания;

5. Истощаемость — неспособность к длительному сосредоточению внимания.

6. гипопрозексия — невозможность в течение необходимого периода времени сосредоточить на чем-нибудь внимание.

Внимание!

Если вам нужна помощь в написании работы, то рекомендуем обратиться к
профессионалам. Более 70 000 авторов готовы помочь вам прямо сейчас. Бесплатные
корректировки и доработки. Узнайте стоимость своей работы.

7. Слабая распределяемость внимания сосредоточенность только на ситуационно значимом объекте.

ВИДЫ ВНИМАНИЯ:

1. Непроизвольное внимание (пассивное)

Вид внимания, при котором отсутствует сознательный выбор направления и регуляции. Оно устанавливается и поддерживается независимо от сознательного намерения человека. В основе него лежат неосознаваемые установки человека. Как правило, кратковременно, быстро переходящее в произвольное.

2. Произвольное внимание

Возникновение произвольного внимания у человека исторически связано с процессом труда, так как без управления своим вниманием невозможно осуществлять сознательную и планомерную деятельность.

Психологической особенностью произвольного внимания является сопровождение его переживанием большего или меньшего волевого усилия, напряжения, причем длительное поддерживание произвольного внимания вызывает утомление, зачастую даже большее, чем физическое напряжение.

3. Послепроизвольное внимание

Вид внимания, при котором в наличии сознательный выбор объекта внимания, но отсутствует напряжение, характерное для произвольного внимания. Связано с образованием новой установки, связанной в большей мере с актуальной деятельностью, нежели с предшествующим опытом человека (в отличие от непроизвольного).

Задержанное психическое развитие. Характеристика. Методы.

1. Задержка психического развития (ЗПР). Это обратимо, чем раньше обнаружено, тем лучше. После коррекции. При поступлении в школу чаще всего диагностируют. Используют помощь взрослых. Ограниченность представлений выражается: в недостатке общего запаса знаний, незрелость мышления, малоинтеллектуальная направленность, абсолютное преобладание игровых мотивов.

Этиология: хронические заболевания ребенка, остаточное явление после ЦНС, педагогическая запущенность.

4 варианта ЗПР по происхождению:

1. Конституционального происхождения:

• Гармоничный инфантилизм (задержка физического развития соответствует задержке психического развития).
• Дисгармоничный инфантилизм (физическое развитие в норме, Ψ — задержка).

У ребенка. Задержка эмоционально – волевой сферы, непосредственное поведение, преобладают игры, они неутомимы в игре. В игре идет коррекция. Внушаемы, недостаточно самостоятельны.

1. Соматогенного происхождения

• Эмоциональная незрелость на первом плане, т.к. наличие длительных хронических заболеваний (астма, диабет).
• Ограниченная возможность получения, накопления жизненного опыта.
• Маленький круг общения
• Находится в состоянии физической и Ψ астении. (робость, низкая самооценка, замкнутость, неуверенность в своих силах, ипохондрия)

1. Психогенного происхождения. В следствии неблагоприятной социализации, безнадзорность, условие гиперопеки, психологические травмы, может доходить до психопатии.
2. Церебрально –органического происхождения – наиболее тяжелый вариант ЗПР.

Диагностика нарушений детского развития тесно связана с психологическим консультированием родителей, опекунов и т.д. обследуемого ребёнка, в ходе которого выясняются жалобы, замечания со стороны воспитателей, учителей, анамнестические сведения о его рождении, развитии, учёбе, характере, манере поведения дома, в школе, в детском саду. В ходе беседы с самим ребёнком оценивается общее развитие ребёнка, его поведенческие и эмоциональные особенности. Всё это способствует выявлению поведенческих расстройств. Следующим обязательным этапом психологического обследования является диагностика интеллектуального и познавательного развития ребёнка: исследуются процессы внимания, памяти, мышления, речевые функции, навыки письма, счёта, чтения. В качестве основных средств, используемых для данной цели, выступают стандартизованные тестовые процедуры. Хорошим дополнением является нейропсихологическая диагностика, направленная на выявление специфических трудностей в обучении у детей младшего школьного возраста. Также происходит диагностика эмоциональной сферы: применяются проективные методы (тесты и рисунки на различные темы).

Поможем написать любую работу на аналогичную
тему

Получить выполненную работу или консультацию специалиста по вашему
учебному проекту

Узнать стоимость

Серия обучения НЛП: Часть 3

Этот пост является третьим постом в серии классификации текста НЛП. Напомню, что я начал с конкурса по классификации текстов НЛП на Kaggle, который назывался Quora Question неискренностью. Поэтому я решил поделиться своими знаниями с помощью серии сообщений в блоге о классификации текста. В первом сообщении говорилось о различных методах предварительной обработки , которые работают с моделями глубокого обучения и , увеличивая охват встраиваниями .Во втором посте я рассказал о некоторых базовых обычных моделях , таких как TFIDF, Count Vectorizer, Hashing и т. Д., Которые использовались при классификации текста, и попытался получить доступ к их характеристикам, чтобы создать базовый уровень. В этом посте я более подробно рассмотрю модели глубокого обучения и различные архитектуры , которые мы могли бы использовать для решения проблемы текстовой классификации. Чтобы сделать эту почтовую платформу универсальной, я собираюсь писать код как на Keras, так и на Pytorch. Я буду использовать различные другие модели, которые мы не смогли использовать в этом соревновании, например ULMFit Transfer Learning подходов в четвертом посте серии.

В качестве примечания : если вы хотите узнать больше о НЛП, я хотел бы порекомендовать отличный курс по обработке естественного языка в специализации «Продвинутое машинное обучение». Вы можете начать бесплатно с 7-дневной бесплатной пробной версии. Этот курс охватывает широкий круг задач по обработке естественного языка от базового до продвинутого: анализ тональности, обобщение, отслеживание состояния диалога и многие другие. Вы можете начать бесплатно с 7-дневной бесплатной пробной версии.

Итак, позвольте мне попробовать пройтись по некоторым моделям, которые люди используют для классификации текста, и попытаться дать им краткую интуицию, а также некоторый код в Keras и Pytorch.Так что вы можете попробовать их на себе.

1. TextCNN

Идея использования CNN для классификации текста была впервые представлена ​​в статье Юн Кима «Сверточные нейронные сети для классификации предложений».

Представление: Центральная интуиция по поводу этой идеи — это видеть наши документы как изображения . Как? Допустим, у нас есть предложение, maxlen = 70 и размер вложения = 300. Мы можем создать матрицу чисел с формой 70×300, чтобы представить это предложение.Для изображений у нас также есть матрица, в которой отдельные элементы являются значениями пикселей. Вместо пикселей изображения входными данными для задач являются предложения или документы, представленные в виде матрицы. Каждая строка матрицы соответствует вектору из одного слова.

Идея свертки: В то время как для изображения мы перемещаем наш фильтр свертки как по горизонтали, так и по вертикали, для текста мы фиксируем размер ядра до filter_size x embed_size, т.е. три слова сразу, поскольку размер нашего фильтра в данном случае равен 3.Эта идея кажется правильной, поскольку наш фильтр свертки не разбивает встраивание слов. Он должен увидеть полное вложение каждого слова. Также можно рассматривать размеры фильтров как униграммы, биграммы, триграммы и т. Д. Поскольку мы смотрим на контекстное окно из 1,2,3 и 5 слов соответственно.

Вот сеть классификации текста, закодированная в Pytorch:

  импортная горелка
импортировать torch.nn как nn
импортировать torch.nn.functional как F
из torch.autograd import Variable


класс CNN_Text (nn.Модуль):
    
    def __init __ (сам):
        super (CNN_Text, self) .__ init __ ()
        filter_sizes = [1,2,3,5]
        num_filters = 36
        self.embedding = nn.Embedding (max_features, embed_size)
        self.embedding.weight = nn.Parameter (torch.tensor (embedding_matrix, dtype = torch.float32))
        self.embedding.weight.requires_grad = Ложь
        self.convs1 = nn.ModuleList ([nn.Conv2d (1, num_filters, (K, embed_size)) для K в filter_sizes])
        self.dropout = nn.Dropout (0.1)
        самостоятельно.fc1 = nn.Linear (len (Ks) * num_filters, 1)


    def вперед (self, x):
        x = самовложение (x)
        x = x.unsqueeze (1)
        x = [F.relu (conv (x)). squeeze (3) for conv в self.convs1]
        x = [F.max_pool1d (i, i.size (2)). squeeze (2) for i in x]
        x = torch.cat (x, 1)
        x = self.dropout (x)
        logit = self.fc1 (х)
        вернуть логит  

А для энтузиастов Кераса:

  # https://www.kaggle.com/yekenot/2dcnn-textclassifier
def model_cnn (матрица внедрения):
    filter_sizes = [1,2,3,5]
    num_filters = 36

    inp = Вход (shape = (maxlen,))
    x = Встраивание (max_features, embed_size, weights = [embedding_matrix]) (inp)
    x = Изменить форму ((maxlen, embed_size, 1)) (x)

    maxpool_pool = []
    для i в диапазоне (len (filter_sizes)):
        conv = Conv2D (num_filters, kernel_size = (filter_sizes [i], embed_size),
                                     Ядро_инициализатор  

.Классификация текста

с иерархической сетью внимания

Как назначить документы классам или темам

Авторы: Мария Кренкель, Хи-Юн Ли — Система информации о семинарах 18/19

Прочитав это сообщение в блоге, вы узнаете:

• Что такое классификация текста и для чего она используется
• Что такое иерархические сети внимания и как выглядит их архитектура
• Как классифицировать документы с помощью иерархической сети внимания

Введение

Представьте, что вы работаете в компании , которая продает камеры, и хотите узнать, что клиенты думают о последней версии.Оценок может быть недостаточно, поскольку пользователи склонны оценивать товары по-разному. В настоящее время вы сможете найти огромное количество обзоров вашего продукта или общих мнений пользователей на различных платформах, таких как facebook, twitter, instagram или сообщения в блогах.
Как видите, количество платформ, которые необходимо использовать, довольно велико, а следовательно, и количество комментариев или отзывов. Итак, как вы можете справиться со всеми этими текстовыми данными и извлечь из них важную информацию?

Контур

Классификация текста

Оценка всех текстовых данных вручную требует очень много времени и усилий.Более эффективный способ извлечения важной информации — классификация текста.
Классификация текста — фундаментальная задача обработки естественного языка. Цель состоит в том, чтобы отнести неструктурированные документы (например, обзоры, электронные письма, сообщения, содержимое веб-сайтов и т. Д.) К одному или нескольким классам. Такими классами могут быть оценки в обзорах, такие как звездные рейтинги, классификация спама и не спама или обозначение темы.
По сути, классификация текста может использоваться всякий раз, когда есть определенные теги, которые нужно сопоставить с большим объемом текстовых данных.Чтобы научиться классифицировать, нам нужно создать классификаторы, которые получаются из помеченных данных. Таким образом, процесс изучения информации становится автоматизированным и, следовательно, более простым.

Приложения

Классификация текста находит множество возможностей применения из-за большого количества данных, которые можно интерпретировать.

Под обозначением темы подразумевается каждый вид присвоения текста темам или категориям. Это также может включать неструктурированные тексты. Основная цель — извлечь общие теги.Маркировка тем является наиболее важным и широко используемым приложением классификации текста. Имеет несколько подприложений:

• Маркетинг : «Новый» маркетинг переместился из поисковых систем в платформы социальных сетей, где происходит реальное общение между брендами и пользователями. Пользователи не только просматривают продукты, но и обсуждают их с другими пользователями. С помощью классификации текста компании могут отслеживать и классифицировать пользователей на основе их онлайн-мнений о продукте или бренде.На основании этого можно определить тенденции и типы клиентов (например, промоутеры или недоброжелатели).
• Обзоры : С помощью текстовой классификации предприятия могут легко найти аспекты, по которым клиенты не согласны с их услугами или продуктами. Им не нужно самостоятельно проходить обзоры с низким рейтингом, но они могут определять категории, которым их продукт удовлетворял или не удовлетворял.
• Пометка контента : Платформы, например блоги, основаны на публикациях многих людей или объединяют продукты с других веб-сайтов.Таким образом, если они изначально не были полностью помечены, может возникнуть необходимость пометить эти тексты или продукты, чтобы упростить навигацию по веб-сайту. Это приложение также улучшает пользовательский опыт. Кроме того, хорошие классифицированные и помеченные веб-сайты с большей вероятностью появятся в поисковых системах, таких как Google.
  Упоминание Google: если вы используете Gmail, ваши электронные письма уже автоматически фильтруются и маркируются алгоритмами классификации текста Google.

Другое приложение — анализ тональности .Снова представьте, как разные покупатели могут оценить продукт. Кто-то может быть разочарован одной-единственной функцией и, следовательно, дать ей низкий рейтинг, хотя им нравится продукт в целом. Или рейтинги могут быть низкими из-за плохого обслуживания клиентов, в то время как сам продукт удовлетворяет. Классификация текста помогает определить эти критерии.
Анализ тональности предсказывает отношение к определенной характеристике на основе классификации текста. Это находит не только экономическое применение, но также для социальных и политических дебатов.

Классификация текста уже используется для более простых приложений, таких как , фильтрация спама . Кроме того, в 2016 году команда Google изобрела метод под названием Smart Replies. Этот метод принимает электронные письма в качестве входных данных, определяет тональность или тему отправленного текста и автоматически генерирует короткие полные ответы.

Обзор литературы

Для нашей реализации классификации текста мы применили иерархическую сеть внимания, метод классификации Янга и др.с 2016 года. Причина, по которой они разработали его, хотя уже существуют хорошо работающие нейронные сети для классификации текста, заключается в том, что они хотели обратить внимание на определенные характеристики структур документа, которые ранее не рассматривались.
Но прежде чем углубиться в это, давайте посмотрим, что сделали другие:

В основе всех проблем классификации текстов лежат так называемые методы информационного поиска (IR), которые были впервые разработаны в начале 1970-х годов. Эти первые методы были неконтролируемыми, что означает, что они пытаются найти информацию в заданном текстовом документе, не классифицируя его или не присваивая ему какие-либо ярлыки.

Основные алгоритмы для IR :

• Мешок слов (BoW): отображает тексты по частоте встречаемости слов
• Term Frequency / Inverse Document Frequency (TF-IDF): устанавливает частоту термина и обратную частоту документа в соотношении и, таким образом, представляет тексты по релевантности появляющихся слов
• N-граммы: набор совпадающих слов (например, имен)

Здесь вы можете увидеть наиболее важные этапы классификации неконтролируемого текста:

Без надзора

Найдите все перечисленные сокращения в следующей таблице:

С повышением удобства использования и соответствующим расширением использования Интернета, автоматическая классификация растущего числа данных стала важной. Несколько контролируемых или частично контролируемых методов (где информация о классе извлекается из помеченных данных) показаны в следующей таблице.

** (полу) под наблюдением **

.

Внимание для прогнозирования и классификации временных рядов | Исаак Годфрид

Использование самых последних достижений в области НЛП для прогнозирования и классификации временных рядов

* Обратите внимание, что эта статья была опубликована 18.10.19. Я понятия не имею, почему Medium сообщает, что она написана 9.04.19. Статья содержит самые свежие и актуальные результаты, включая статьи, которые появятся на Neurips 2019, и препринты, вышедшие только в августе этого года.

Трансформаторы (особенно самовнимание) привели к значительному прогрессу в НЛП в последнее время.Они позволили таким моделям, как BERT, GPT-2 и XLNet, формировать мощные языковые модели, которые можно использовать для создания текста, перевода текста, ответов на вопросы, классификации документов, обобщения текста и многого другого. С их недавним успехом в НЛП можно было ожидать повсеместной адаптации к таким проблемам, как прогнозирование и классификация временных рядов. В конце концов, оба предполагают обработку последовательных данных. Однако до сих пор исследования по их адаптации к задачам временных рядов оставались ограниченными. Более того, хотя некоторые результаты обнадеживают, другие остаются более неоднозначными.В этой статье я рассмотрю текущую литературу по применению трансформаторов, а также уделю более широкое внимание проблемам временных рядов, обсудю текущие препятствия / ограничения и проведу мозговой штурм, чтобы (надеюсь) позволить этим моделям достичь того же уровня успеха, что и в НЛП. , В этой статье предполагается, что у вас есть базовые представления об архитектуре мягкого внимания, самовнимания и трансформатора. Если вы этого не сделаете, прочтите одну из связанных статей. Вы также можете посмотреть мое видео с вечера презентации PyData Orono.

Внимание к данным временных рядов: обзор

Необходимость точного прогнозирования и классификации данных временных рядов охватывает практически все отрасли и задолго до машинного обучения. Например, в больницах вам может потребоваться ранняя сортировка пациентов с наивысшей смертностью и прогнозирование продолжительности пребывания пациента в больнице; в розничной торговле вы можете спрогнозировать спрос и спрогнозировать продажи; коммунальные компании хотят прогнозировать потребление энергии и т. д.

Несмотря на успехи глубокого обучения в отношении компьютерного зрения, многие модели временных рядов по-прежнему неглубокие.В частности, в промышленности многие специалисты по данным до сих пор используют простые модели авторегрессии вместо глубокого обучения. В некоторых случаях они могут даже использовать такие модели, как XGBoost, с установленными вручную временными интервалами. Обычно основными причинами выбора этих методов являются интерпретируемость, ограниченность данных, простота использования и стоимость обучения. Хотя не существует единого решения для решения всех этих проблем, глубокие модели с вниманием представляют собой убедительный аргумент. Во многих случаях они предлагают общие улучшения производительности (другие стандартные LSTM / RNN) с преимуществом интерпретируемости в виде тепловых карт внимания.Кроме того, во многих случаях они быстрее, чем использование RNN / LSTM (особенно с некоторыми из методов, которые мы обсудим).

В нескольких работах изучались базовые и модифицированные механизмы внимания для данных временных рядов. LSTNet — одна из первых статей, предлагающих использовать механизм внимания LSTM + для многомерного прогнозирования временных рядов. Внимание к временным паттернам для прогнозирования многомерных временных рядов Шун-Яо Ши и др. сосредоточены на применении внимания, специально настроенного на многомерные данные.Этот механизм был нацелен на решение проблем, включая зашумленные переменные в многомерных временных рядах и внедрение лучшего метода, чем простое среднее. В частности,

Веса внимания в строках выбирают те переменные, которые полезны для прогнозирования. Поскольку вектор контекста vt теперь представляет собой взвешенную сумму векторов-строк, содержащих информацию за несколько временных шагов, он фиксирует временную информацию.

Проще говоря, это нацелено на выбор полезной информации из различных данных временных рядов функций для прогнозирования целевого временного ряда.Во-первых, они используют 2dConvolution для векторов-строк скрытых состояний RNN. Затем следует функция подсчета очков. Наконец, они используют сигмовидную активацию вместо softmax, поскольку ожидают, что для прогнозирования будут иметь значение несколько переменных. Остальное следует довольно стандартной практике внимания.

Код для механизма внимания временных паттернов. Обратите внимание, что авторы решили использовать 32 фильтра. Диаграмма из статьи

С точки зрения результатов, модель превосходит (с использованием относительной абсолютной ошибки) другие методы, включая стандартную авторегрессивную модель и LSTNet по прогнозированию солнечной энергии и спроса на электроэнергию, трафика и обменный курс.

Хотя в этой статье не используется самовнимание, я думаю, что это действительно интересный и хорошо продуманный способ использования внимания. Похоже, что многие исследования временных рядов сосредоточены на данных одномерных временных рядов. Более того, те, которые действительно изучают многомерные временные ряды, часто просто расширяют измерения механизма внимания, а не применяют его горизонтально по временным рядам признаков. Возможно, имеет смысл посмотреть, может ли модифицированный механизм самовнимания выбрать соответствующие исходные данные временного ряда для прогнозирования цели.Полный код этой статьи находится в открытом доступе на GitHub.

Что на самом деле происходит с самовниманием?

Давайте сначала кратко рассмотрим некоторые особенности самовнимания, прежде чем мы углубимся в часть временных рядов. Для более подробного изучения, пожалуйста, прочтите эту статью о математике внимания или Illustrated Transformer. Для самовнимания напомним, что обычно у нас есть векторы запросов, ключей и значений, которые формируются путем простого матричного умножения вложения на матрицу весов.Во многих пояснительных статьях не упоминается, что запрос, ключ и значение часто могут поступать из разных источников в зависимости от задачи и варьироваться в зависимости от того, является ли это кодировщиком или уровнем декодера. Так, например, если задачей является машинный перевод, векторы запроса, ключей и значений в кодировщике будут поступать с исходного языка, но векторы запроса, ключа и значения в декодере будут поступать с целевого языка. Однако в случае моделирования языка без учителя все они обычно формируются из исходной последовательности.Позже мы увидим, что многие модели временных рядов с самовниманием изменяют способ формирования этих значений.

Во-вторых, самовнимание обычно требует позиционного кодирования, так как оно не знает порядка следования. Обычно он включает эту позиционную информацию путем добавления слова или временного шага, а не конкатенации. Это несколько странно, поскольку вы могли бы предположить, что добавление позиционных кодировок непосредственно к встраиванию слова может повредить этому. Однако, согласно этому ответу Reddit, из-за высокой размерности слова, встраиваемого в позиционные кодировки, вы получаете приблизительную ортогональность (т.е.е. позиционные кодировки и вложения слов уже занимают разные места). Более того, на плакате утверждается, что синус и косинус помогают придать соседнему слову похожие позиционные вложения.

Но, в конце концов, остается нерешенным вопрос: не будет ли прямая конкатенация работать лучше в этом отношении? Это то, на что у меня пока нет прямого ответа. Однако есть несколько хороших недавних работ по созданию лучших позиционных вложений. Transformer-XL (основа для XLNet) имеет свои собственные специфические реляционные вложения.Также в документе NIPs 2019 года «Самовнимание с обучением функциональному представлению времени» рассматривается создание более эффективных позиционных представлений с помощью функциональной карты функций (хотя этот документ в настоящее время отсутствует в arxiv).

Ряд недавних исследований проанализировали, что на самом деле происходит в таких моделях, как BERT. Хотя эти исследования полностью ориентированы на НЛП, они могут помочь нам понять, как эффективно использовать эти архитектуры для данных временных рядов, а также предвидеть возможные проблемы.

В «На что смотрит BERT?» Анализ внимания BERT »авторы анализируют внимание BERT и исследуют языковые отношения. Эта статья является прекрасной иллюстрацией того, как самовнимание (или любой другой тип внимания) естественным образом поддается интерпретации. Поскольку мы можем использовать веса внимания, чтобы визуализировать соответствующие части фокуса.

Цифра 5 из бумаги. Этот метод иллюстрации весов внимания очень полезен для целей интерпретируемости и взлома «черного ящика» глубокого обучения.Подобные методы анализа конкретных весов внимания могут показать, на какие временные шаги или временные ряды модель ориентируется при прогнозировании.

Также интересно то, что авторы находят следующее:

Мы обнаружили, что большинство руководителей уделяют мало внимания текущему токену. Однако есть головы, которые специализируются на том, чтобы уделять больше внимания следующему или предыдущему токену, особенно на более ранних уровнях сети.

Очевидно, что в данных временных рядов внимание головы, «уделяющее внимание следующему токену», проблематично.Следовательно, при работе с временными рядами нам придется применить какую-то маску. Во-вторых, трудно сказать, является ли это продуктом исключительно языковых данных, на которых обучался BERT, или же это может произойти при многоголовом внимании в более широком смысле. Для формирования языковых представлений очень важно сосредоточить внимание на ближайшем слове. Однако для данных временных рядов это гораздо более вариабельно, в некоторых последовательностях временных рядов причинно-следственная связь может исходить из шагов, намного более отдаленных (например, для некоторых рек проливным дождям может потребоваться более 24 часов, чтобы поднять реку).

Шестнадцать голов действительно лучше, чем одна

В этой статье авторы обнаружили, что обрезка нескольких головок внимания оказывает ограниченное влияние на производительность. Как правило, производительность значительно снижалась только тогда, когда было обрезано более 20% кочанов. Это особенно актуально для данных временных рядов, поскольку часто мы имеем дело с длинными зависимостями. В частности, удаление только одной сосредоточенной головы, кажется, почти не влияет на оценку, а в некоторых случаях приводит к лучшей производительности.

Со стр. 6 статьи. Использование меньшего количества головок внимания может служить эффективной стратегией для снижения вычислительной нагрузки самовнимания для данных временных рядов. Похоже, что некоторые главы в значительной степени пересекаются. В общем, может иметь смысл тренироваться на большем количестве данных (когда они доступны), чем иметь больше голов.

Визуализация геометрии BERT

Визуализация Umap различных семантических подпространств слова «бег». Визуализация выполнена с использованием контекстного атласа https: // хранилище.googleapis.com/bert-wsd-vis/demo/index.html?#word=run. Было бы интересно создать Umap-визуализацию различных представлений временных рядов из крупномасштабной модели обученного преобразователя.

В этой статье исследуются геометрические структуры, обнаруженные в модели BERT. Они пришли к выводу, что BERT, похоже, внутренне имеет геометрические представления деревьев синтаксического анализа. Они также обнаруживают, что внутри большего пространства вложения есть семантически значимые подпространства. Хотя это исследование явно лингвистически ориентировано, главный вопрос, который он поднимает, заключается в том, изучает ли BERT эти лингвистически значимые шаблоны, а затем изучает ли он аналогичные шаблоны, релевантные во времени.Например, если бы мы в большом масштабе обучили временной ряд преобразователя, что бы мы обнаружили в пространстве встраивания? Например, увидим ли мы похожие траектории пациентов, сгруппированных вместе, или, если бы мы тренировались на многих разных потоках для прогнозирования наводнений, сгруппировали бы потоки, питаемые плотиной, вместе с аналогичными циклами сброса и т.д … Крупномасштабное обучение трансформатора на тысячах различных временных рядов может оказаться полезным а также улучшить наше понимание данных. Авторы включают две классные страницы GitHub с интерактивными визуализациями, которые вы можете использовать для дальнейшего изучения.

Еще одна интересная исследовательская работа, вышедшая на конференции ICLR 2019, касалась «Меньше внимания с помощью легких и динамических сверток». Эта работа исследует, почему работает самовнимание, и предлагает в качестве альтернативы динамические свертки. Основное преимущество динамических сверток состоит в том, что они проще в вычислительном отношении и более распараллеливаемы, чем самовнимание. Авторы считают, что эти динамические извилины примерно эквивалентны самовниманию. Авторы также применяют распределение веса, что еще больше снижает требуемые параметры в целом.Интересно, что, несмотря на потенциальное улучшение скорости, я не видел, чтобы в исследованиях прогнозирования временных рядов использовалась эта методология (по крайней мере, пока).

Самовнимание для временных рядов

Было всего несколько исследовательских работ, в которых с разной степенью успеха самовнимание на данных временных рядов используется. Если вы знаете о каких-либо дополнительных, дайте мне знать. Кроме того, huseinzol05 на GitHub реализовал ванильную версию внимания — это все, что вам нужно для прогнозирования запасов.

Attend and Diagnose использует самовнимание на медицинских данных временных рядов. Эти данные временного ряда являются многомерными и содержат такую ​​информацию, как частота сердечных сокращений пациента, SO2, артериальное давление и т. Д.

Архитектура для наблюдения и диагностики

Их архитектура начинается с одномерной свертки по каждому клиническому фактору, которую они используют для достижения предварительного внедрения , Напомним, что 1D Conv будет использовать ядро ​​определенной длины и обрабатывать его заданное количество раз. Важно отметить, что здесь одномерная свертка не применяется к шагам временного ряда, как это обычно бывает.Следовательно, если исходный временной ряд содержит 100 шагов, он все равно будет содержать 100 шагов. Вместо этого он применяется для создания многомерного представления каждого временного шага. Для получения дополнительной информации об одномерных свертках для данных временных рядов обратитесь к этой замечательной статье. После шага одномерной свертки авторы затем используют позиционное кодирование:

Кодирование выполняется путем сопоставления временного шага t с одной и той же рандомизированной поисковой таблицей во время обучения и прогнозирования.

Это отличается от стандартного самовнимания, которое использует функции косинуса и синуса для определения положения слов.Позиционные кодировки присоединяются (вероятно, добавлены, хотя… авторы не указывают точно, как именно) к каждому соответствующему выходу из уровня 1D Conv.

Далее идет операция самовнимания. Это в основном то же самое, что и стандартный тип операции многоглавого внимания, однако у него есть несколько тонких отличий. Во-первых, как упоминалось выше, поскольку это данные временного ряда, механизм самовнимания не может включать всю последовательность. Он может включать временные шаги только до рассматриваемого временного шага.Для этого авторы, похоже, используют механизм маскировки, который также маскирует отметки времени слишком далеко в прошлом. К сожалению, авторы очень не уточняют фактическую формулу для этого, однако, если бы мне пришлось угадывать, я бы предположил, что это примерно аналогично операции маскирования, показанной авторами при преодолении узкого места трансформатора.

После многогранного внимания к преобразованным вложениям все еще нужно предпринять дополнительные шаги, прежде чем они станут полезными. Обычно в стандартном самовнушении у нас есть компонент добавления и нормализации уровня.Нормализация слоя нормализует результат самовнимания и исходного внедрения (см. Здесь для получения дополнительной информации об этом), однако авторы вместо этого выбирают плотную интерполяцию. Это означает, что вложения, выведенные из модуля многоголового внимания, используются и используются способом, который полезен для сбора синтаксической и структурной информации.

После алгоритма плотной интерполяции идет линейный слой, за которым следует слой softmax, сигмоид или relu (в зависимости от задачи).Сама модель многозадачна, поэтому она нацелена на прогнозирование продолжительности пребывания в стационаре, кода диагноза, риска декомпенсации, продолжительности пребывания в стационаре и уровня смертности.

В целом я подумал, что эта статья была хорошей демонстрацией использования самовнимания к многомерным данным временных рядов. На момент публикации результаты были самыми современными, а теперь их превзошла TimeNet. Однако это в первую очередь связано с эффективностью предварительного обучения на основе трансферного обучения, а не с архитектурой.Если бы мне пришлось предположить, что подобное предварительное обучение с SAND привело бы к лучшей производительности.

Моя основная критика этой статьи — в первую очередь с точки зрения воспроизводимости, поскольку код не предоставляется, а различные гиперпараметры, такие как размер ядра, либо не включены, либо лишь смутно намекаются. Другие концепции, такие как механизм маскировки, не обсуждаются достаточно четко. В настоящее время я работаю над повторной реализацией в PyTorch и опубликую здесь код, когда я буду более уверен в его надежности.

Еще одна недавняя довольно интересная статья — «CDSA: кросс-размерное самовнимание для многомерного импутации временных рядов с геотегами» Цзявэй Ма и др. Эта статья посвящена вменению (оценке) отсутствующих значений временного ряда. Эффективное вменение данных важно для многих реальных приложений, поскольку датчики часто имеют периоды, когда они перестают работать, что приводит к потере данных. Это создает проблемы при попытке спрогнозировать или классифицировать данные, поскольку отсутствующие или нулевые значения будут влиять на прогноз.Авторы настраивают свою модель на использование механизма перекрестного внимания, который работает за счет использования данных в разных измерениях, таких как временное местоположение и измерение.

Это еще один увлекательный пример модификации стандартного механизма самовнимания для работы с многомерными данными. В частности, как указано выше, вектор значений предназначен для захвата контекстной информации. Как ни странно, это контрастирует с тем, что мы увидим позже, когда векторы запроса и ключей используют контекстную информацию, но не вектор значений.

Авторы оценивают свои результаты на нескольких наборах данных по прогнозированию движения и качеству воздуха. Они оценивают как с точки зрения прогнозирования, так и с точки зрения условного исчисления. Для проверки вменения они отбрасывают определенный процент значений и пытаются вменять их, используя модель. Они сравнивают их с фактическими значениями. Их модель превосходит другие методы RNN и статистического вменения по всем скоростям пропущенных данных. С точки зрения прогнозирования модель также демонстрирует наилучшие характеристики.

Улучшение локальности и устранение узких мест в памяти преобразователя при прогнозировании временных рядов Шиянг Ли и др.

Это недавняя статья, которая появится на NIPS в 2019 году. Она фокусируется на нескольких проблемах, связанных с применением преобразователя к данным временных рядов. Авторы в основном утверждают, что классическое внимание к себе действительно полностью использует контекстные данные. Они утверждают, что это, в частности, вызывает проблемы с данными динамических временных рядов, которые варьируются в зависимости от сезона (например, прогнозирование продаж в праздничные дни по сравнению с остальной частью года или прогнозирование экстремальных погодных условий). Чтобы исправить это, они вводят новый метод генерации векторов запросов и значений.

Мы предлагаем [механизм] сверточного самовнимания , используя каузальные свертки для создания запросов и ключей на уровне самовнимания. Соответствие ключа запроса с учетом локального контекста, например shape, может помочь модели снизить ошибку обучения и еще больше повысить точность прогнозов.

Со стр. 3 статьи. По существу, с другими версиями многоголового запроса внимания, значения и ключевые векторы создаются за один временной шаг, тогда как больший размер ядра позволяет ему создавать ключевые и запрашивающие векторы из нескольких временных шагов.Это позволяет модели лучше понимать контекст.

Вторая часть статьи посвящена решениям, связанным с использованием памяти в модели трансформатора. Самовнимание требует больших затрат памяти, особенно в отношении очень длинных последовательностей (в частности, O (L²)). Авторы предлагают новый механизм внимания — O (L (log L) ²). Благодаря этому механизму самовнимания клетки могут обслуживать только предыдущие клетки с экспоненциальным размером шага. Так, например, пятая ячейка будет заниматься ячейкой четыре и ячейкой два.Они также вводят два варианта этого журнала внимания: локальное внимание и повторное внимание. См. Их схему ниже для получения дополнительной информации.

Со страницы 5 статьи. Все эти варианты имеют одинаковую общую временную сложность O (L (log L) ²), однако фактическое время выполнения Local Attention + Logsparse, вероятно, будет самым продолжительным из-за того, что он касается большинства ячеек.

Авторы оценивают свой подход на нескольких различных наборах данных, включая потребление электроэнергии (записанное с 15-минутными интервалами), трафик в Сан-Франциско (20-минутные интервалы), ежечасное получение данных о солнечной энергии (от 137 различных электростанций) и данных о ветре (суточные оценки). ветроэнергетического потенциала 28 округов как процент от общего производства электроэнергии).Их выбор ρ-квантильных потерь в качестве метрики оценки немного странен, поскольку обычно я ожидал MAE, MAP, RMSE или чего-то подобного для задачи прогнозирования временных рядов.

Уравнение для квантильных потерь регрессии p.

Я все еще пытаюсь понять, что именно представляет собой эта метрика, однако, по крайней мере, по результатам кажется, что чем меньше балл, тем лучше. Используя эту метрику, их сверточный преобразователь самовнимания превосходит DeepAR, DeepState, ARIMA и другие модели. Они также проводят исследование абляции, в котором изучают влияние размера ядра при вычислении семидневного прогноза.Они обнаружили, что размер ядра 5 или 6 обычно дает лучший результат.

Я думаю, что это хорошая исследовательская статья, в которой рассматриваются некоторые недостатки преобразователя применительно к данным временных рядов. Я особенно думаю, что использование сверточного ядра (размером больше единицы) действительно полезно в задачах временных рядов, когда вы хотите захватить окружающий контекст для векторов ключей и запросов. В настоящее время кода нет, но до NeurIPs еще больше месяца, поэтому, надеюсь, авторы выпустят его до сих пор.

Заключение и направления на будущее

В заключение, самовнимание и связанные с ним архитектуры привели к улучшениям в нескольких сценариях использования прогнозирования временных рядов, однако в целом они не получили широкой адаптации. Вероятно, это связано с несколькими факторами, такими как узкое место в памяти, сложность кодирования позиционной информации, сосредоточенность на точечных значениях и отсутствие исследований в области обработки многомерных последовательностей. Кроме того, за пределами НЛП многие исследователи, вероятно, не знакомы с самовниманием и его потенциалом.Хотя простые модели, такие как ARIMA, во многих случаях имеют смысл для решения проблем отрасли, я считаю, что трансформаторы также могут многое предложить.

Надеюсь, что подходы, описанные в этой статье, проливают свет на эффективное применение преобразователей к задачам временных рядов. В следующей статье я планирую дать практический пошаговый пример прогнозирования и классификации данных временных рядов с помощью преобразователя в PyTorch. Любые отзывы и / или критика приветствуются в комментариях. Пожалуйста, дайте мне знать, если у меня что-то не так (что вполне возможно, учитывая сложность темы), и я обновлю статью.

.

Использование контекстных предложений для классификации текста с помощью нейронной модели внимания

Мы исследовали несколько подходов для включения контекстной информации в структуру глубокого обучения для классификации текста, включая разработку различных механизмов внимания на основе разных нейронных сетей и извлечение некоторых дополнительных функций из текста с помощью традиционные методы как часть представительства. Мы предлагаем два типа алгоритмов классификации: один основан на сверточной нейронной сети, объединяющей контекстную информацию, а другой — на двунаправленной сети с длинной и короткой памятью.Мы интегрируем контекстную информацию в окончательное представление признаков, создавая структуры внимания на уровне предложений и слов, что увеличивает разнообразие информации об особенностях. Наши экспериментальные результаты на двух наборах данных подтверждают преимущества этих двух моделей с точки зрения эффективности времени и точности по сравнению с различными моделями с фундаментальной архитектурой AM.

1. Введение

Классификация текстов должна быть наиболее распространенным приложением в обработке естественного языка (NLP), например, автоматическая классификация статей, автоматическая классификация почты, распознавание спама и классификация эмоций пользователей [1, 2].Поэтому он привлек значительное внимание многих исследователей. После 1990-х годов количество онлайн-текстов в Интернете и рост числа дисциплин машинного обучения постепенно сформировали набор классических решений для решения крупномасштабных задач классификации текстов. Основными процедурами на этом этапе были создание искусственных признаков + неглубокая классификационная модель.

Разработка функций делится на три части: предварительная обработка текста, извлечение функций и представление текста, и ее конечная цель — преобразовать текст в понятный для компьютера формат и инкапсулировать информацию, достаточную для классификации.Среди них представление текста является наиболее важной частью определения качества классификации текста. Традиционными методами обычно используется мешок слов (BOW) [3]. Однако этот метод страдает высокой широтой и большой разреженностью [4, 5]. Модель BOW обычно уменьшает размерность путем выбора элемента функции, то есть исходные элементы (термины) ранжируются согласно индексу оценки независимо [6].

Кроме того, плотность увеличивается за счет вычисления веса признака, который в основном основан на классическом термине «метод обратной частоты документа» (TF-IDF) и его метод расширения [7].Основная идея заключается в том, что важность слова пропорциональна частоте встречаемости слов в категории и обратно пропорциональна количеству вхождений всех категорий. После получения текстового представления необходимо указать классификатор текста, такой как логистическая регрессия и вспомогательные векторные машины для обучения модели [8, 9]. Пренебрежение контекстом и невозможность выразить семантическую информацию и независимость между словами — это его самые большие недостатки традиционного метода.

Глубокое обучение добилось большого успеха в обработке изображений и речи.Одна из важных причин заключается в том, что необработанные данные изображения и речи не только непрерывны, но и имеют локальную корреляцию. На данный момент наиболее важным в области текстового представления является применение глубокого обучения для решения крупномасштабной проблемы классификации текста. Способ заключается в использовании сверточной нейронной сети (CNN) или рекуррентной нейронной сети (RNN) и других сетевых структур для автоматического получения возможностей выражения признаков, удаления сложной искусственной инженерии признаков и последующего решения проблем от начала до конца [10, 11].Кроме того, как наиболее успешная концепция, основная идея распределенного представления состоит в том, чтобы выразить каждое слово как n-мерный плотный непрерывный действительный вектор, и это помогает обучающимся алгоритмам достичь более высокой производительности.

CNN недавно добилась очень успешных результатов во многих областях. В NLP CNN использует одномерную свертку для выполнения отображения признаков, а затем применяет одномерную операцию объединения max в измерении временного шага для получения выходных данных фиксированной длины в качестве представления предложения [10, 12].RNN может извлечь выгоду из распределенных представлений слов, сначала преобразовав токены, составляющие каждый текст, в векторы, которые могут формировать матрицу [13]. Эта матрица включает два измерения: time-s

.