Приложение 2 оценка установок и их компонентов
В ходе лабораторных и полевых исследований производится оценка реакций людей. В этой книге мы проанализировали много исследований и вкратце описали, как в них проводилось измерение зависимой переменной. В данном приложении мы дадим более подробное описание некоторых основных методов психологических измерений. Эти методы часто служат основой для разработки специфических оценок, удовлетворяющих потребностям конкретного исследования. Мы сосредоточим основное внимание на оценке установок, которые являются центральным понятием этой книги. Мы также коротко расскажем о том, как можно оценивать другие компоненты систем установок.
Если вы задумаетесь над этим вопросом, то поймете, что оценка установки — далеко не простая задача. Как измерить нечто, находящееся в человеческом сознании? Можно догадаться, что единственный способ решения этой проблемы — заставить человека сделать внутренние установки внешними, чтобы их можно было оценить. Иными словами, надо добиться, чтобы внутренние установки человека выразились в его внешнемповедении. Элементом этого поведения может быть прохождение письменного тестирования или заполнение анкеты.
Шкалы установок
Для оценки установок разработано несколько различных письменных тестов. Четыре теста после тщательной разработки достигли довольно высокого уровня совершенства. В число этих основных методов тестирования установок входят метод равных интервалов Терстоуна, метод суммируемых оценок Ликерта, шкалограмм-ный анализ Гуттмана и метод семантического дифференциала Осгуда. Надеемся, что, ознакомившись с краткими обзорами каждого из этих методов, вы получите ясное представление о том, как социальные психологи получают данные, на основе которых они потом делают столь красивые обобщения.
418
В основе каждого из обсуждаемых методов лежат различные предположения о характере пунктов теста и характере информации об установках человека, которую можно получить в результате тестирования. Тем не менее есть некоторые основные предположения, которые являются общими для всех этих методов. В первую очередь предполагается, что субъективные установки поддаются количественному измерению, т. е. мнение каждого человека можно охарактеризовать с помощью какого-либо числового показателя. Во-вторых, во всех этих методах предполагается, что каждый конкретный пункт теста имеет одинаковый смысл для всех респондентов, и поэтому данный ответ будет оцениваться одинаково, кто бы его ни дал. Эти предположения могут быть не всегда оправданными, но до сих пор еще не разработана такая методика измерений, чтобы можно было обойтись без этих предположений.
Метод равных интервалов Терстоуна. Первый из основных методов оценки установок был разработан в 1929 году Терстоуном в работе, посвященной исследованию установок по отношению к религии. Создав шкалу оценки установок, он впервые предложил методику точных измерений для области исследований, в которой они прежде никогда не использовались. Терстоун предположил, что можно отобрать высказывания, содержащие мнения по какому-нибудь конкретному вопросу, и ранжировать эти высказывания по показателю, отражающему благоприятное или неблагоприятное отношение к данному вопросу, выраженное в высказываниях. Кроме того, можно ранжировать эти высказывания таким образом, чтобы разность показателей соседних высказываний континуума оказалась одинаковой. Последнее предположение позволяет дать количественную оценку расхождений между установками разных людей. Терстоун также предположил, что между высказываниями нет корреляционной связи и что в каждом высказывании выражена точка зрения, которая не зависит от других высказываний. Это означает, что из принятия одного высказывания не следует, что надо обязательно принять еще и какое-либо другое.
Шкала Терстоуна состоит примерно из 20 независимых высказываний, содержащих мнения по определенному вопросу. Каждому высказыванию соответствует значение показателя на числовой шкале, которое определяется его положением в континууме, а это положение в свою очередь определяется в соответствии с усредненными судейскими оценками.
Чтобы оценить установки людей по данному вопросу, их просят отметить те высказывания, с которыми они согласны. Общаяоценка установок каждого человека определяется как среднее значение показателей тех высказываний, которые он отметил. Ниже приводится в качестве примера сокращенный вариант такой шкалы (табл. 2).
Отличительной особенностью шкалы Терстоуна является то, что интервалы между показателями соседних высказываний примерно одинаковы. Такое свойство шкалы достигается за счет метода ее построения. Первый шаг — это сбор большого количества высказываний по какому-нибудь конкретному вопросу. Все неясные, туманные или двусмысленные высказывания, а также высказывания, которые могли бы одобрить индивидуумы с противоположными установками, сразу же исключа-
419
Таблица 2
Свойство: отношение к десегрегации в области жилищной политики | |||
Значение показателя |
|
| Высказывание |
Наименее благоприятное | 1,5 | А. | Хозяин должен отказаться сдать жилье любому съемщику, который ему не понравился. |
| 3,0 | Б. | Федеральные законы, запрещающие сегрегацию жилых районов, должны относиться только к му ниципальному жилью и не касаться районов с частными домами. |
| 4,5 | В. | Местные власти должны пропагандировать спра ведливую жилищную политику. |
| 6,0 | Г. | Вмешательство закона в какой-либо форме до пустимо лишь в крайних случаях дискрими нации при предоставлении жилья. |
Наиболее благоприятное | 7,5 | Д. | Человек должен сдать жилье первому приемле мому съемщику, который к нему обратился, не зависимо от расы, цвета кожи или вероисповеда ния. |
ются из рассмотрения. Затем группа судей сортирует все оставшиеся высказывания, разбивая их на 11 категорий в соответствии с тем, насколько выраженное в высказывании мнение благоприятно или неблагоприятно по отношению к рассматриваемой проблеме, независимо от собственных установок судей. Таким образом, эти классы образуют шкалу с диапазоном от наиболее благоприятных до крайне неблагоприятных мнений по отношению к данной проблеме, включая нейтральные. Протабулировав оценки всех судей, можно рассчитать положение каждого высказывания на числовой шкале (его среднее значение на шкале) и то, насколько судьи единодушны в мнениях об этом положении (разброс оценок). Для включения в окончательную шкалу отбирают высказывания, по которым мнение судей было примерно одинаковым и которые попадают в примерно одинаковые интервалы на континууме. После этого можно оценить установки человека по отношению к данной проблеме по его ответам на набор пунктов окончательно сформированной шкалы.
Метод суммируемых оценок Ликерта. Один из практических недостатков шкалы Терстоуна состоит в том, что ее построение чрезвычайно трудоемко и занимает много времени. Чтобы решить эту проблему, Ликерт разработал другую методику, с помощью которой сравнительно просто можно получить столь же надежную шкалу установок. Шкала Ликерта состоит из ряда высказываний, выражающих мнения по определенной проблеме. Однако в отличие от шкалы Терстоуна для оценки установки человека его просят указатьстепень своего согласия или несогласия с каждым пунктом. Для этого человек оценивает каждый пункт по пятибалльной шкале реакций (полностью согласен, согласен, не могу решить, не согласен, решительно не согласен). Оценкой установки человека служит сумма выставлен-
420
ных им оценок по всем пунктам. Ниже приводится пример одного пункта такой шкалы.
А. «Смертный приговор — это правильное наказание за преднамеренное убийство».
Значение |
|
|
оценки |
|
|
1 | А. | Полностью согласен |
2 | Б. | Согласен |
3 | В. | Не могу решить |
4 | Г. | Не согласен |
5 | д. | Решительно не согласен |
Ликерт предполагает, что каждое высказывание, включенное в шкалу, является линейной функцией одного и того же параметра установки. На основе этого предположения для получения итоговой оценки установки производится операция суммирования оценок, выставленных человеком по отдельным пунктам шкалы. Отсюда следует, что должна существовать тесная корреляция между пунктами шкалы и некоторой общей характеристикой, а значит, в отличие от четко разграниченных и независимых пунктов шкалы Терстоуна пункты шкалы Ликерта коррелируют между собой. Важно отметить, что Ликерт ни в коем случае не предполагает, что интервалы между значениями шкалы равны. Например, вполне возможно, что разница между «согласен» и «полностью согласен» значительно больше, чем разница между «согласен» и «не могу решить». Это означает, что шкала Ликерта позволяет получить информацию о порядковом распределении установок людей на континууме, но с ее помощью нельзя точно указать, насколько близки или далеки друг от друга различные установки.
Построение шкалы Ликерта на начальном этапе аналогично построению шкалы Терстоуна: производится сбор и редактирование различных высказываний, выражающих определенные мнения по какой-нибудь проблеме. Затем испытуемые из выборки оценивают оставшиеся после отбора высказывания по пятибалльной шкале реакций, основываясь на своем собственном мнении об этих высказываниях. Этим процедура построения шкалы Ликерта отличается от процедуры построения шкалы Терстоуна, где оценки выставляют подготовленные судьи, которые основывают их не на личном мнении, а на некоторой относительно объективной оценке положения каждого высказывания на континууме. В шкалу Ликерта включают те пункты, по которым сильнее всего расходятся в оценках испытуемые с самыми низкими и самыми высокими итоговыми оценками из всей выборки.
Шкалограмма Гуттмана. Третий метод шкалирования основан на предположении, что степень выраженности единственного одномерного свойства можно измерить с помощью набора высказываний, которые упорядочены вдоль континуума «трудности принятия». Это означает, что высказывания находятся в диапазоне от тех, которые большинству людей легко принять, до тех, которые поддержали бы
421
Таблица 3
Свойство: отношение к десегрегации в области жилищной политики | ||
Степень приемлемости |
| Высказывание |
Наименее трудное для принятия | А. | Вообще говоря, люди должны иметь возможность жить там, где они хотят. |
| Б. | Агентства по недвижимости не должны дискриминировать представителей меньшинств. |
| В. | Городские власти должны активно поддерживать идею десегрегации жилых районов. |
| Г. | Следует организовать местные контрольные комиссии, которые будут рассматривать случаи крайней дискриминации при получении жилья. |
Самое трудное для принятия | Д. | Следует принять федеральные законы в защиту десегрегации в области жилищной политики. |
лишь немногие люди. Пункты такой шкалы кумулятивны, поскольку из принятия одного пункта следует, что человек принимает все пункты, соответствующие меньшим значениям шкалы (эти пункты принять легче). Таким образом, можно предсказать отношение человека к другим высказываниям, зная, с каким наиболее трудным для принятия пунктом согласен этот человек. Примером шкалы Гуттмана может послужить следующая шкала: табл. 3.
Чтобы построить шкалу, отражающую единственный показатель, Гуттман предлагает испытуемым из выборки начальный набор пунктов и регистрирует их реакции на пункты шкалы, в которых приведены готовые образцы ответов. Эти образцы, которые называются классами шкалы, выстроены в определенном ступенчатом порядке. Испытуемый может не принять ни одного из пунктов этого набора (оценка 0), может принять только пункт А (оценка 1), может принять только пункты А и Б (оценка 2), может принять А, БиВ (оценка 3) и так далее. Если ответы испытуемого не укладываются в схему шкалы (например, он принимает только пункт Вине принимает пункты с меньшими значениями по шкале), то предполагается, что он сделал не менее одной ошибки в ответах. Анализируя количество сделанных в ответах ошибок, можно определить, до какой степени первоначальный набор пунктов отражает одномерное свойство (т. е. насколько эти пункты поддаются шкалированию). Окончательная шкала получается путем исключения непригодных пунктов и повторного тестирования испытуемых из выборки, пока не будет разработан набор пунктов, пригодных для шкалирования.
Чтобы оценить установки человека, его просят отметить на шкале те высказывания, которые для него приемлемы. Варианты шкалы Гуттмана используются в исследованиях актуальности установок для определения сфер принятия и отвержения (см. главу 6). Итоговой оценкой является оценка соответствующего класса шкалы или (если ответы испытуемого не укладываются в схему шкалы) оценка класса шкалы, ближайшего к этим ответам. Из описания процедуры получения оценки следует, что почти невозможно разработать идеальную одномерную шка-
422
лу. Возможно, дело в том, что люди в действительности реагируют не на единственный гипотетический параметр, а на какой-то другой или сразу на несколько параметров.
Метод семантического дифференциала Осгуда. В трех вышеописанных методах предпринимается попытка оценивать установки, заставив людей указать степень своего согласия с различными высказываниями, выражающими мнения. В отличие от такого подхода Осгуд при изучении установок обращал основное внимание насмысл, который люди придают слову или понятию. В основе этой методики лежит главное предположение о существовании гипотетического семантического пространства, обладающего неопределенным количеством измерений, в котором смысл любого слова или понятия можно представить в виде конкретной точки. Следуя процедуре Осгуда, надо попросить людей оценить конкретное понятие с помощью набора семантических шкал. На концах этих шкал находятся слова противоположного значения, а в середине — точка нейтральности; обычно шкалы состоят из семи, отличных друг от друга шагов. Например, можно оценить, что понимает конкретный человек под понятием «атомная энергия», зная его оценки этого понятия по ряду семантических шкал, составляющих набор:
Хорошо_____ _____ _____ _____ _____ _____ _____ _____ _____ _____ Плохо
Сильно _____ _____ _____ _____ _____ _____ _____ _____ _____ _____ Слабо
Быстро _____ _____ _____ _____ _____ _____ _____ _____ _____ _____ Медленно
Активно_____ _____ _____ _____ _____ _____ _____ _____ _____ _____ Пассивно
и так далее.
Анализируя собранные таким образом оценки, можно выявить конкретные параметры, которыми люди пользуются для определения своих ощущений, классы понятий, которые рассматриваются как сходные или различные по смыслу, и интенсивность смысла, вкладываемого в конкретное понятие. Собственные исследования Осгуда показали, что существуют три доминантных, независимых параметра, которыми люди пользуются для оценки понятий (Osgoodetal., 1957). Он называет эти параметры оценочным фактором (например, хороший—плохой), фактором мощности (например, сильный—слабый) и фактором активности (например, активный— пассивный). Хотя этот метод может дать массу информации о понятии, не вполне ясно, каким образомсмысл понятия для данного человека связан с установками этого человека.
Использование шкал с одним и несколькими пунктами в экспериментах. В большинстве исследований установок или изменения установок, особенно в лабораторных экспериментах, используемая для оценки установки шкала состоит только из одного или нескольких пунктов. Как правило, используется формат шкалы Ликерта, а не систематично разработанный вопросник со многими пунктами. Например, при исследовании убеждения в первом пункте, предлагаемом сразу же после убеждающего сообщения, может быть снова сформулирован вывод из этого сообщения, и испытуемого попросят оценить степень своего согласия с ним по шкале Ликерта. В шкале может быть пять, десять или даже тридцать и более
423
пунктов, а подгруппам пунктов могут быть присвоены описательные ярлыки. Например:
Следует ввести для студентов плату за парковку автомашин на территории университета в размере 50 долларов за семестр:
1 2 3 | 4 5 6 | 7 8 9 | 10 11 12 | 13 14 15 |
Резкие возражения | Умеренные возражения | Не могу решить | Умеренное согласие | Полное согласие |
Можно также применять шкалу семантических дифференциалов в модифицированной форме. Часто семантические шкалы выбирают для того, чтобы подчеркнуть параметр «хороший—плохой», который лучше всего соответствует определению установки как итогового оценочного мнения. Например, после того как испытуемые прослушали сообщение, в котором поддерживается идея введения платы за автостоянку, их можно попросить оценить концепцию введения для студентов платы за парковку по четырем параметрам: «хорошо—плохо», «умно—глупо», «благоприятно—неблагоприятно» и «полезно—вредно». В некоторых случаях оценки каждого испытуемого по всем параметрам можно просуммировать и принять эту сумму за общую оценку установки испытуемого.
Кроме этих распространенных подходов используются также специфические шкалы самоотчета. Например, можно попросить испытуемых оценить свое отношение к объекту установки по шкале «нравится — не нравится».
- Электронное оглавление
- Глава 1 мир влияния 20
- Глава 2 влияние и поведение 54
- Глава 3 влияние на установки через поведение: действия становятся убеждениями 89
- Глава 4 изменение установок посредством убеждения: поверьте мне на слово 122
- Глава 5 убедить надолго: настойчивость и поведенческие последствия изменения установок 156
- Глава 6. Сопротивление и подчинение влиянию: инь и ян убеждения 184
- Глава 7 влияние, включенность сознания и бессознательное: когда вас может изменить то, чего вы не знаете 219
- Глава 8 влияние в правовой системе: правосудие по... 257
- Глава 9 социальное влияние на службе у здоровья и счастья 291
- Электронный список иллюстраций
- Социальное влияние
- 953000 - Книги н брошюры.
- 197110, Санкт-Петербург. Чкаловский пр., 15. Содержание
- Глава 1. Мир влияния 14
- Глава 2. Влияние и поведение 58
- Глава 3. Влияние на установки через поведение: действия
- Глава 4. Изменение установок посредством убеждения:
- Глава 5. Убедить надолго: настойчивость и поведенческие
- Глава 6. Сопротивление и подчинение влиянию: инь и ян
- Глава 7. Влияние, включенность сознания и бессознательное:
- Глава 8. Влияние в правовой системе: правосудие по 315
- Глава 9. Социальное влияние на службе у здоровья и счастья. 358
- Предисловие
- Введение
- Благодарности
- Глава 1 мир влияния
- Социальное влияние: процессы и среда
- Зал славы (и позора) влияния Межличностное влияние: обращение в новую веру и личный контакт
- Коммуникация и убеждение: «Повтори-ка еще разок, Сэм!»
- Влияние средств массовой информации: нет дыма без огня (и без рекламы)
- Три кита влияния: установка, поведение, когниция
- Установочная система
- Основной тезис: перемены порождают перемены
- Прочие тезисы, основанные на ведущей роли установок
- Подходы социальной психологии
- Что впереди?
- Подведем итоги...
- Вопросы и упражнения
- Глава 2 влияние и поведение
- Изменение поведения в результате социального научения
- Инструментальное научение и подкрепление
- Теория социального научения
- Подражание агрессии
- Инь и Ян подражания
- Одобрение и неодобрение: сила социальных наград
- Конформизм: спасаем лицо, соблюдаем приличия, обретаем — знания
- Причины конформности
- Конформность: хорошо это или плохо?
- Подчинение: поведение, основанное на чужом авторитете
- Сценарий Милграма: стали бы вы мучить человека электротоком, если бы вас попросил об этом Гитлер?
- Объяснение необычного поведения с помощью обычного
- Нажимая кнопку «Выход неподчинением»
- Психология «коленного рефлекса»: влияние через эвристику
- Правило взаимности
- Правило чувства долга
- Шесть контекстов и принципов согласия по Чалдини
- Точка расхождения: когда внешнее влияние становится источником внутренних перемен
- Подведем итоги...
- Вопросы и упражнения
- Глава 3 влияние на установки через поведение: действия становятся убеждениями
- Атрибуция и самоатрибуция
- Теория атрибуции
- Самоубеждение и исполнение роли
- Весь мир — театр… и мы попросту играем роли
- Психология самооправдания: теория диссонанса
- Факторы, влияющие на силу диссонанса
- Диссонанс и недостаточная оправданность: чем меньше, тем больше
- От противоречия в действиях к диссонансу — необходимые условия.
- Способы снижения диссонанса
- Диссонанс и неэтичное деловое решение
- Диссонанс, самоатрибуция и самоутверждение: сходство и различия
- В помощь самоутверждению
- Заключительное замечание
- Подведем итоги...
- Вопросы и упражнения
- Глава 4 изменение установок посредством убеждения: поверьте мне на слово
- «А вам понравилось?» процессы социального сравнения
- Сходное мнение о частных свойствах
- Сходство мнений
- Различие как основа для сравнения
- Убеждающее сообщение. «целься!.. Пли!..»
- Этапы процесса убеждения
- Начальный и заключительный этапы
- Представление и предъявление
- Фильтрация идей
- Управление общественным мнением с помощью средств массовой информации
- Внимание
- Настройка на определенную волну
- Точная настройка и борьба с помехами
- Понимание
- Принятие: самое трудное
- Когнитивные реакции: «о! Это хорошая мысль»
- Кратчайшие пути к принятию: использование эвристик вместо систематического анализа
- Имидж и телевидение
- Объективность и пристрастность в систематической обработке сообщений
- Краткий привал на пути к устойчивому убеждению
- Подведем итоги...
- Вопросы и упражнения
- Глава 5 убедить надолго: настойчивость и поведенческие последствия изменения установок
- Создание четких, ясных и категоричных установок
- Показать, да как следует...
- Повтор комплексных сообщений
- Закрепление результата: убедить на все времена
- Еще разок, да посильнее, а потом еще и еще раз
- Систематический анализ: активное мышление порождает прочные установки
- Установки: независимые зависимости
- Что сильней: первое впечатление или последнее слово?
- Установки переходят в поведение: у последней черты
- Когда ситуация оказывается сильнее установок
- Когда установки порождают действие: условия постоянства
- Установки, основанные на чувствах, и установки, основанные на знании.
- Награда за труды, или плоды убеждения
- Подведем итоги...
- Вопросы и упражнения
- Глава 6. Сопротивление и подчинение влиянию: инь и ян убеждения
- Упрямый ум: сопротивление и избирательное подчинение
- Сила в структуре: когнитивные основы стойкости установок
- Можете сколько угодно дискредитировать мои данные (у меня есть еще).
- Виды актуальности: мотивационные основы сопротивления и податливости убеждению
- Преодоление сопротивления: освобождение тоталитарного эго
- В ожидании суда (необходимость отчитываться)
- Играть роль «адвоката дьявола» не грешно
- Нажать на нужную клавишу
- Другая крайность: излишняя податливость
- Слабое сопротивление: возможные случаи
- Повышение сопротивляемости
- Мобилизация сил для противостояния
- Предрассудок: установка, которая может убивать
- В наше время
- В былые времена
- Интерес социальной психологии к предрассудкам
- Некоторые источники предвзятых установок
- Заключительное замечание: как быть восприимчивым, но не мягкотелым
- Подведем итоги…
- Вопросы и упражнения
- Глава 7 влияние, включенность сознания и бессознательное: когда вас может изменить то, чего вы не знаете
- Включенность сознания и осознание влияния
- Осознание, ассоциации и эмоции
- Осознание и психические процессы высшего порядка
- Переход на автоматический режим
- Невербальные (и не обязательно осознаваемые) сообщения
- Как разбираться в людях: формирование впечатлений по голосу и лицу
- Видимые и слышимые признаки эмоций и лжи
- Убеждение и невербальная коммуникация
- Самовосприятие невербальных действий: я киваю, поэтому я соглашаюсь
- Подпороговые стимулы: незаметное влияние
- Возможности подпорогового «визуального ряда»: изменение мнения
- Если сообщение передается на уровне ниже слухового порога или включено в печатные материалы, то влияние менее вероятно
- Этика влияния — осознаваемого и неосознаваемого
- Включенность сознания и осознание: заключение
- Подведем итоги...
- Вопросы и упражнения
- Глава 8 влияние в правовой системе: правосудие по...
- Состязательный подход: можно ли найти справедливость, соревнуясь в умении убеждать?
- Справедливость и тенденциозность: все дело в равновесии
- Трудноуловимое влияние социально-психологических особенностей состязательной системы
- В полицейском участке: сбор фактов
- Показания свидетелей: но я видел это собственными глазами
- Маленькое дружеское признание
- В зале суда: битва за умы
- Маленькие хитрости адвокатов
- Свидетели, опознавшие преступника
- В совещательной комнате присяжных
- Редкое явление— власть немногих
- Когда влияет то, что не должно влиять
- Слушается дело: психология против закона. Заключительное слово
- Подведем итоги...
- Вопросы и упражнения
- Глава 9 социальное влияние на службе у здоровья и счастья
- Процессы оказания влияния на защите окружающей среды: можно ли сохранить нашу планету с помощью убеждения?
- Усиление мотивации: когда игра стоит свеч
- Повышение заметности экологических проблем: как сделать, чтобы люди всегда помнили о необходимости экологически грамотного поведения
- От личных привычек к глобальному загрязнению: «с миру по нитке»
- Сохранение и укрепление здоровья
- Массовое убеждение: становится ли информированный народ здоровее?
- Предписания врача: почему пациенты их не выполняют?
- Социально-психологические пути к психическому здоровью
- Как ни назови психотерапию... Все равно это влияние
- Психотерапия как убеждающая коммуникация
- Когнитивно-бихевиориальная терапия и атрибуционная терапия: подумай и помоги себе сам
- Диссонанс и психотерапия: обязательства, выбор и усилия
- Социальное влияние, благоденствие и ваше будущее
- Подведем итоги...
- Вопросы и упражнения
- Приложение 1 экспериментальные методы исследований
- Корреляционные методы в полевых исследованиях
- Эксперимент является источником информации о причинной обусловленности
- Обобщение результатов экспериментов: статистические выводы
- Применение результатов лабораторных исследований на практике
- Приложение 2 оценка установок и их компонентов
- Оценка установок: каждый исследователь выбирает метод на свой вкус.
- Измерение других компонентов систем установок
- Литература
- Книга-почтой
- Заказать книги издательского дома «питер» можно любым удобным для вас способом:
- Книга-почтой
- Вы можете заказать бесплатный альманах профессиональной литературы Издательского дома «Питер».
- Внимание специалистам книжного бизнеса!
- Каждое из этих представительств работает с клиентами по единому стандарту издательского дома .(питер».
- Уважаемые господа! книги издательского дома «питер» вы можете приобрести оптом и в розницу у наших региональных партнеров.