Национальная оценка образовательного прогресса - National Assessment of Educational Progress

Логотип NAEP
Логотип табеля успеваемости нации

В Национальная оценка образовательного прогресса (NAEP) является крупнейшей продолжающейся и репрезентативной на национальном уровне оценкой того, что студенты США знают и могут делать по различным предметам. NAEP - это проект, утвержденный Конгрессом, которым руководит Национальный центр статистики образования (NCES) в рамках Институт педагогических наук (IES) из Департамент образования США. Первое национальное управление NAEP произошло в 1969 году. Национальный совет управления оценкой (NAGB) - это независимый двухпартийный совет, который устанавливает политику NAEP и отвечает за разработку структуры и спецификаций тестов. Национальный совет управления оценкой, члены которого назначаются посредством Министр образования США, включает губернаторов, законодателей штата, местных и государственных школьных чиновников, преподавателей, представителей бизнеса и представителей широкой общественности. В 1988 году Конгресс создал Управляющий совет из 26 членов.

Результаты NAEP предназначены для предоставления данных на уровне группы об успеваемости учащихся по различным предметам и публикуются в виде табеля успеваемости нации.[1] Нет результатов для отдельных учащихся, классов или школ. NAEP сообщает результаты для различных демографических групп, включая пол, социально-экономический статус и расу / этническую принадлежность. Чаще всего оценки даются в математика, чтение, наука и письмо. Другие предметы, такие как искусство, гражданственность, экономика, география, технологическая и инженерная грамотность (TEL) и История США оцениваются периодически.

Помимо оценки достижений учащихся по различным предметам, NAEP также проводит опросы учащихся, учителей и школьных администраторов, чтобы помочь предоставить контекстную информацию. Вопросы, касающиеся расы или этнической принадлежности участников, посещаемости школы и академических ожиданий, помогают разработчикам политики, исследователям и широкой общественности лучше понять результаты оценки.

Учителя, директора школ, родители, политики и исследователи - все используют результаты NAEP для оценки успеваемости учащихся по всей стране и разработки способов улучшения образования в Соединенных Штатах. NAEP предоставляет достоверные и надежные данные об успеваемости студентов с 1969 года.

NAEP использует тщательно разработанный отбор проб процедура, которая позволяет оценивать географическое, расовое, этническое и социально-экономическое разнообразие школ и учащихся в Соединенных Штатах. Также предоставляются данные об учащихся с ограниченными возможностями и изучающих английский язык. Поскольку оценки NAEP проводятся единообразно для всех участвующих студентов с использованием одних и тех же тестовых буклетов и идентичных процедур по всей стране, результаты NAEP служат общим показателем для штатов и отдельных городских округов, которые участвуют в оценке.

Существует два веб-сайта NAEP: Веб-сайт NCES NAEP и Веб-сайт табеля успеваемости нации. На первом сайте программа NAEP подробно описана, а на втором основное внимание уделяется отдельным выпускам данных.

История

Образование в США
Диплом icon.png Образовательный портал
Флаг США.svg Портал США

НАЭП началось в 1964 году при гранте Корпорация Карнеги создать Исследовательский комитет по оценке прогресса в образовании (ESCAPE). Первые общенациональные оценки были проведены в 1969 году. Добровольные оценки для штатов начались в 1990 году на экспериментальной основе, а в 1996 году они стали постоянным элементом NAEP и проводились каждые два года. В 2002 году выбранные городские округа участвовали в оценках на уровне штата на экспериментальной основе и продолжаются в качестве пробной оценки городских округов (TUDA).

В разработке успешной программы NAEP приняли участие многие, в том числе исследователи, государственные служащие системы образования, подрядчики, политики, студенты и учителя.[2]

Оценки

Существует два типа оценок NAEP: основной НАЭП и долгосрочный тренд NAEP. Такое разделение позволяет достичь двух целей:

  1. По мере изменения образовательных приоритетов разрабатывать новые инструменты оценки, отражающие текущее содержание образования и методологию оценивания.
  2. Измеряйте прогресс учащихся с течением времени.

Главный

Основные оценки NAEP проводятся по ряду предметов с участием учеников четвертого, восьмого и двенадцатого классов по всей стране. Чаще всего оценки даются по математике, чтению, естественным наукам и письму. Периодически оцениваются другие предметы, такие как искусство, обществоведение, экономика, география, технологии и инженерная грамотность (TEL), а также история США.

Эти оценки соответствуют рамкам предметных областей, разработанным NAGB, и используют последние достижения в методологии оценки.[3] В рамках основного NAEP результаты сообщаются на национальном уровне, а в некоторых случаях - на уровне штата и округа.

Национальный

Национальный NAEP сообщает статистическую информацию об успеваемости учащихся и факторах, связанных с успеваемостью, для страны и конкретных демографических групп населения (например, раса / этническая принадлежность, пол). В него входят учащиеся как государственных, так и негосударственных (частных) школ и, в зависимости от предмета, сообщаются результаты для 4, 8 и 12 классов.

Состояние

Штатные результаты NAEP доступны по некоторым предметам для 4 и 8 классов. Это позволяет государствам-участникам отслеживать свои собственные успехи в математике, чтении, естественных науках и письме с течением времени. Затем они могут сравнить знания и навыки своих студентов со студентами из других штатов и страны.

Оценки, даваемые в штатах, точно такие же, как и на национальном уровне. Традиционно государственная NAEP оценивалась только в 4 и 8 классах. Однако в 2009 г. [4] Пилотная программа позволила 11 штатам (Арканзас, Коннектикут, Флорида, Айдахо, Иллинойс, Айова, Массачусетс, Нью-Гэмпшир, Нью-Джерси, Южная Дакота и Западная Вирджиния) получить баллы на уровне двенадцатого класса.

До 1988 года NAEP сообщал только об академических достижениях нации в целом и по демографическим группам населения. В 1988 году Конгресс принял закон, разрешающий добровольную оценку состояния дел. Отдельные репрезентативные выборки студентов были отобраны из каждого штата или юрисдикции, которые согласились участвовать в программе NAEP штата. Оценка состояния судебного разбирательства проводилась в 1990, 1992 и 1994 годах. Начиная с оценки 1996 года, санкционирующий статут больше не рассматривал государственный компонент как «судебное разбирательство».

Существенное изменение состояния NAEP произошло в 2001 году с повторным разрешением Закон о начальном и среднем образовании, также называемый «Ни один ребенок не останется позади» законодательство. Этот закон требует, чтобы штаты, получающие финансирование по Разделу I, каждые два года участвовали в оценках NAEP по математике и чтению в 4 и 8 классах. Государственное участие в других предметах, оцениваемых государственной NAEP (наука и письмо), остается добровольным.

Как и все оценки NAEP, NAEP штата не дает индивидуальных оценок учащимся или оцениваемым школам.

Пробная оценка городского округа

В Пробная оценка городского округа (Туда) - это проект, разработанный для определения возможности использования NAEP для составления отчетов об успеваемости учащихся государственных школ на районном уровне. С разрешения конгресса NAEP провела тесты по математике, чтению, естествознанию и письму для выборок студентов в отдельных городских округах.

Туда начался с шести городских округов в 2002 году, а с тех пор расширился до 27 округов для цикла оценки 2017 года.

Округ200220032005200720092011201320152017
Государственные школы АльбукеркеИксИксИксИкс
Государственные школы АтлантыИксИксИксИксИксИксИксИксИкс
Независимый школьный округ ОстинаИксИксИксИксИксИксИкс
Государственные школы БалтимораИксИксИксИксИкс
Бостонские государственные школыИксИксИксИксИксИксИксИкс
Школы Шарлотты-МекленбургИксИксИксИксИксИксИксИкс
Государственные школы ЧикагоИксИксИксИксИксИксИксИксИкс
Школьный округ округа Кларк (Невада)Икс
Кливлендский столичный школьный округИксИксИксИксИксИксИксИкс
Независимый школьный округ ДалласаИксИксИксИкс
Государственные школы ДенвераИкс
Государственные школы ДетройтаИксИксИксИксИкс
Государственные школы округа КолумбияИксИксИксИксИксИксИксИксИкс
Государственные школы округа Дюваль (Флорида)ИксИкс
Независимый школьный округ Форт-Уэрта (Техас)Икс
Объединенный школьный округ ФресноИксИксИксИксИкс
Школы округа Гилфорд (Северная Каролина)Икс
Государственные школы округа Хиллсборо (Флорида)ИксИксИксИкс
Хьюстонский независимый школьный округИксИксИксИксИксИксИксИксИкс
Государственные школы округа Джефферсон (Кентукки)ИксИксИксИксИкс
Объединенный школьный округ Лос-АнджелесаИксИксИксИксИксИксИксИксИкс
Государственные школы округа Майами-ДейдИксИксИксИксИкс
Государственные школы МилуокиИксИксИксИкс
Департамент образования г. Нью-ЙоркаИксИксИксИксИксИксИксИксИкс
Школьный округ ФиладельфииИксИксИксИксИкс
Объединенный школьный округ Сан-ДиегоИксИксИксИксИксИксИксИкс
Школы округа Шелби (Теннесси)Икс

Долгосрочная тенденция

Долгосрочная тенденция Программа NAEP предоставляется подросткам 9, 13 и 17 лет периодически на национальном уровне. Оценка долгосрочных тенденций позволяет измерять успеваемость учащихся по математике и чтению и позволяет сравнивать успеваемость сегодняшних учащихся со студентами с начала 1970-х годов.

Хотя долгосрочная тенденция и основной NAEP оценивают и математику, и чтение, между ними есть несколько различий. В частности, оценки различаются оцениваемым содержанием, частотой проведения оценки и способом представления результатов. Эти и другие различия означают, что результаты долгосрочной тенденции и основного NAEP нельзя сравнивать напрямую.[5]

График оценки

NAGB устанавливает календарь оценок NAEP. Пожалуйста, обратитесь ко всей график оценки для всех оценок NAEP с 1968 г. и запланированных до 2017 г.

Основные оценки NAEP обычно проводятся примерно в течение шести недель с конца января до начала марта каждого года. Оценка долгосрочных тенденций обычно проводится каждые четыре года по возрастным группам с октября по май. Все оценки проводятся нанятыми NAEP полевыми сотрудниками по всей стране.

Государственные координаторы НАЭП (НСК)

NAEP проводится в партнерстве с государствами. Программа NAEP обеспечивает финансирование штатных НСК в каждом штате. Он или она служит связующим звеном между NAEP, государственным образовательным агентством и школами, выбранными для участия.

НСК предоставляют множество важных услуг для программы NAEP и несут ответственность за:

  • координирует управление НАЭП в государстве,
  • помощь в анализе и представлении данных NAEP, и
  • продвижение общественного понимания NAEP и его ресурсов

Новые цифровые оценки (DBA)

В то время как большинство оценок NAEP проводится в формате, основанном на бумаге и карандаше, NAEP развивается с учетом меняющегося образовательного ландшафта за счет перехода к цифровым оценкам. NAEP использует новейшие доступные технологии для проведения оценок для студентов, и по мере развития технологий будет меняться и характер предоставления администраторов баз данных. Цель состоит в том, чтобы к концу десятилетия все оценки NAEP были безбумажными. Письменная оценка 2011 года была первой, полностью компьютеризированной.

Интерактивные компьютерные задачи (ИКТ)

В 2009 году ИКТ применялись как часть естественной научной оценки. Компьютерная доставка позволяет измерять научные знания, процессы и навыки, которые невозможно оценить в других режимах. В задачи входило проведение исследований, включающих наблюдения за явлениями, которые в противном случае потребовали бы много времени, моделирование явлений в очень большом масштабе или невидимых невооруженным глазом, а также изучение обширных справочных документов.

Математика Компьютерное обучение

В этом специальном исследовании многоэтапного тестирования, проведенном в 2011 году, изучалось использование принципов адаптивного тестирования в контексте NAEP. Некоторым учащимся была предложена онлайн-оценка по математике, которая адаптируется к их уровню способностей. Все предметы в исследовании являются существующими предметами NAEP.

Оценка технологической и инженерной грамотности (TEL)

Система оценки TEL описывает технологическую и инженерную грамотность как способность использовать, понимать и оценивать технологии, а также понимать технологические принципы и стратегии, необходимые для разработки решений и достижения целей. Три области оценки:

  • Технологии и общество - рассматривает влияние технологий на общество и мир природы, а также этические вопросы, возникающие в результате этих воздействий.
  • Дизайн и системы - охватывает сущность технологий; процесс инженерного проектирования, посредством которого разрабатываются технологии; и основные принципы работы с повседневными технологиями, включая обслуживание и устранение неисправностей.
  • Информационные и коммуникационные технологии - включает компьютеры и средства обучения программному обеспечению; сетевые системы и протоколы; портативные цифровые устройства; и другие технологии для доступа, создания и передачи информации, а также для облегчения творческого самовыражения.

Зимой 2014 года учащиеся восьмиклассников по всей стране сдали экзамен. Результаты этого экзамена были опубликованы в мае 2016 года.

Написание компьютерной оценки

В 2011 году NAEP перевел свою оценку письма (в 8 и 12 классах) с бумаги и карандаша на компьютерное администрирование, чтобы измерить способность учащихся писать с помощью компьютера. В экзамене используются многие особенности современных цифровых технологий, а задания предоставляются в мультимедийных форматах, таких как короткие видео и аудио. Кроме того, чтобы охватить как можно больше студентов, компьютерная система оценивания по письму встроила в нее несколько универсальный дизайн такие функции, как преобразование текста в речь, регулируемый размер шрифта и электронная проверка орфографии. В 2012 году NAEP опробовал компьютерное оценивание для учащихся 4-х классов.

Исследования с использованием данных NAEP

Помимо оценок, NAEP координирует ряд связанных специальных исследований, которые часто включают специальные процессы сбора данных, вторичный анализ результатов NAEP и оценку технических процедур.

Пробелы в достижениях

Пробелы в достижениях возникают, когда одна группа студентов превосходит другую группу, и разница в средних баллах для двух групп статистически значима (то есть больше, чем предел погрешности). В первоначальных выпусках отчетов NAEP подчеркивает пробелы в успеваемости в студенческих группах. Однако NAEP также выпускает ряд отчетов и сводок данных, в которых подчеркивается разрыв в достижениях. - Некоторые примеры включают школьную композицию и разницу в успеваемости между черными и белыми, а также показатели разницы в успеваемости между испаноязычными и белыми и черными и белыми.[6] В этих публикациях используются оценки NAEP по математике и / или чтению для этих групп, чтобы либо предоставить сводку данных, либо выявить закономерности и изменения в этих пробелах с течением времени. Отчеты об исследованиях, такие как "Состав школы" и "Разрыв в достижениях черно-белых", также содержат предостережения и предостережения при интерпретации данных.

Выписка из средней школы (HSTS)

В HSTS исследует взаимосвязь между успеваемостью 12-го класса NAEP и академической карьерой в средней школе, исследуя учебные программы, которым следуют в средних школах нашей страны, и модели прохождения курсов старшеклассниками с помощью коллекции стенограмм. Недавние исследования сделали акцент на КОРЕНЬ образование и как оно соотносится с успеваемостью учащихся по математическим и естественным оценкам NAEP.

Исследование связи NAEP-TIMSS

В Тенденции в международных исследованиях математики и естествознания (TIMSS) - это международная оценка Международной ассоциации по оценке образовательных достижений (IEA), которая измеряет уровень знаний учащихся по математике и естественным наукам. NCES инициировал связующее исследование NAEP-TIMSS, чтобы штаты и отдельные округа могли сравнить успеваемость своих студентов с международными эталонными показателями. Исследование связывания было проведено в 2011 году в 8 классе по математике и естественным наукам. NCES будет «проецировать» баллы на уровне штата и округа по TIMSS по обоим предметам, используя данные NAEP.

Национальное исследование образования Индии (NIES)

В NIES представляет собой исследование, состоящее из двух частей, предназначенное для описания условий образования студентов из числа американских индейцев / коренных жителей Аляски в Соединенных Штатах. Первая часть исследования состоит из результатов оценки по математике и чтению в 4 и 8 классах. Во второй части представлены результаты опроса, проведенного среди учащихся из числа американских индейцев / коренных жителей Аляски, их учителей и школьных администраторов. Опросы сосредоточены на культурном опыте учащихся в школе и за ее пределами.

Отображение государственных стандартов квалификации

В соответствии с повторным утверждением в 2001 году Закона о начальном и среднем образовании (ESEA) 1965 года, штаты разрабатывают свои собственные оценки и устанавливают свои собственные стандарты квалификации для измерения успеваемости учащихся. Каждый штат контролирует свои собственные программы оценивания, включая разработку собственных стандартов, что приводит к большим различиям между штатами в практике оценивания учащихся в масштабах штата. Этот разброс создает проблему в понимании уровней успеваемости учащихся в Соединенных Штатах. С 2003 года NCES поддерживает исследования, в которых сравниваются стандарты квалификации NAEP со стандартами отдельных штатов. Оценки штатов помещаются в общую шкалу, определяемую оценками NAEP, что позволяет сравнивать стандарты квалификации штатов не только с NAEP, но и друг с другом. NCES выпустил отчет по стандартам штата по картированию с использованием государственных данных по математике и чтению в 2003, 2005, 2007, 2009 годах и совсем недавно в 2013 году.[7]

Прошлые исследования

За прошедшие годы NCES провела ряд других исследований, связанных с различными аспектами программы NAEP. Ниже перечислены некоторые исследования недавнего прошлого:

  • В Исследование устного чтения Была предпринята попытка выяснить, насколько хорошо четвероклассники страны могут читать вслух типичный рассказ для четвертого класса. Оценка предоставила информацию о беглости чтения вслух учащимися и изучила взаимосвязь между устным чтением, точностью, скоростью, беглостью и пониманием прочитанного.
  • Чартерные школы Америки было пилотным исследованием, проведенным как часть оценок NAEP по математике и чтению в четвертом классе в 2003 году. Пока чартерные школы во многом схожи с другими государственными школами, они различаются по нескольким важным параметрам, включая состав учащихся и их местонахождение.
  • Частные школы дают образование около 10% студентов страны. В первом отчете результаты оценивания всех частных школ и крупнейших категорий частных школ - католических, лютеранских и консервативных христиан - сравнивались с результатами оценки государственных школ (если применимо). Во втором отчете рассматривались различия между государственными и частными школами в 2003 году NAEP по средней математике и баллам по чтению, когда были приняты во внимание отдельные характеристики учащихся и / или школ.
  • Проект оценки на основе технологий был разработан для изучения использования технологий, особенно использования компьютера в качестве инструмента для повышения качества и эффективности образовательных оценок.

Критика

Интенсивное использование NAEP статистическая проверка гипотез вызвала некоторую критику, связанную с интерпретацией результатов. Например, в табеле успеваемости нации сообщается, что «в 2005 году мальчики превосходят девочек во всех трех классах» по результатам тестов по естествознанию 100 000 учащихся в каждом классе.[8] Хайд и Линн раскритиковали это утверждение, потому что средняя разница составила всего 4 из 300 пунктов, что означает небольшую размер эффекта и сильно перекрывающиеся распределения. Они утверждают, что «небольшие различия в показателях NAEP и других исследований получают широкую огласку, усиливая тонкие, стойкие предубеждения».[9]

Критике подвергался и выбор NAEP того, какие ответы отмечать правильные или неправильные. Например, исторический вопрос о 1954 г. Браун против Совета по образованию постановление, и прямо ссылались на решение 1954 года, которое выявило проблему, а не на решение 1955 года, предписывающее десегрегацию. NAEP попросил студентов «описать условия, которые было призвано исправить это решение 1954 года». Они неправильно отметили студентов, которые упомянули сегрегацию, не упомянув десегрегацию. Фактически вопрос задавался только о существующих условиях, а не о средствах правовой защиты, и в любом случае решение 1954 года не предписывало десегрегацию.[10][11] Страна ждала до 1955 г. Браун II решение услышать про "целенаправленную скорость". Другой исторический вопрос указал на то, что студенты ошибались, которые знали, что США воевали с русскими, а также с китайцами и северокорейцами Корейская война. Другие опубликованные вопросы по математике и письму подверглись аналогичной критике. Ответы по математике наказывают студентов, которые понимают отрицательные квадратные корни, проценты по кредитам и ошибки в экстраполяция график за пределами данных.[12][13]

Заявление NAEP об измерении критического мышления также подвергалось критике. Исследователи UCLA обнаружили, что студенты могут выбирать правильные ответы без критического мышления.[14]

NAEP оценивает каждый тест статистическим методом, устанавливает пороговые значения для «базовых» и «профессиональных» стандартов и приводит примеры того, что учащиеся на каждом уровне достигли на тесте. Процесс разработки тестов и стандартов подвергся критике со стороны Университет Западного Мичигана (1991), Национальная Академия Образования (1993), Счетная палата правительства (1993), Национальная Академия Наук (1999),[15][16] в Американские институты исследований и RTI International (2007),[17] Институт Брукингса (2007[18] и 2016[17]), Buros Центр тестирования (2009),[15] и Национальные академии наук, инженерии и медицины (2016).[17]

Интерпретация результатов NAEP была сложной: категория NAEP «опытный» в тесте по чтению для четвероклассников отражает учащихся, которые хорошо справились с тестом и находятся на уровне седьмого класса.[17] Категория NAEP "опытный" на тесте по математике для восьмиклассников отражает учащихся, которые хорошо сдали тест и находятся на уровне двенадцатого класса.[18] Тот факт, что немногие восьмиклассники владеют этим стандартом и достигают уровня двенадцатого класса, был неверно истолкован как утверждение о том, что немногие восьмиклассники достигают даже восьмого класса.[19] NAEP говорит: «Студенты, которые могут хорошо владеть предметом, учитывая обычное использование этого термина, могут не соответствовать требованиям для успеваемости на уровне достижений NAEP»[17] Джеймс Харви, главный автор Нация в опасности, говорит: «Трудно не прийти к выводу, что это слово было выбрано сознательно, чтобы сбить с толку политиков и общественность».[17]

Рекомендации

  1. ^ «Табель успеваемости нации».
  2. ^ «Измерение успеваемости студентов с 1964 года». Национальный центр статистики образования. Получено 2011-09-29.
  3. ^ «Рамки и спецификации». Национальный центр статистики образования. Получено 2011-09-29.
  4. ^ «Впервые доступны результаты для учащихся государственных школ в 11 штатах». Национальный центр статистики образования. Получено 2011-09-29.
  5. ^ «Каковы основные различия между NAEP по долгосрочному тренду и основным NAEP?». Национальный центр статистики образования. Получено 2011-09-29.
  6. ^ Пробелы в достижениях NAEP (сайт на дому), получено 13 апреля 2013 г.
  7. ^ Отображение государственных стандартов квалификации Национальный центр статистики образования, дата обращения 13 апреля 2013
  8. ^ «С 2000 года учащиеся мужского и женского пола добиваются успехов в 4-м классе; в 2005 году мальчики превосходят девочек во всех трех классах». Табель успеваемости нации. Департамент образования США. Получено 16 сентября 2012.
  9. ^ Хайд, Джанет Шибли; Марсия К. Линн (27 октября 2006 г.). «Гендерное сходство в математике и естественных науках». Наука. 314 (5799): 599–600. Дои:10.1126 / наука.1132154. PMID  17068246. Получено 16 сентября 2012.
  10. ^ Либерман, Марк (22.06.2011). «Языковой журнал» Тест на понимание прочитанного ». Университет Пенсильвании. Получено 2020-09-07.
  11. ^ Вайнбург, Сэм (2011-10-24). «Проверка знаний студентов о движении за гражданские права». Лос-Анджелес Таймс. Получено 2020-09-07.
  12. ^ Берк, Пол. «Неправильные» правильные «ответы: бич НАЭП». History News Network - Университет Джорджа Вашингтона. Получено 2020-09-07.
  13. ^ Берк, Пол (1990-08-28). "СТУДЕНТЫ США МИФ О МАССИВНОЙ НЕУДАЧЕ". Вашингтон Пост. ISSN  0190-8286. Получено 2020-09-07.
  14. ^ Вайнберг, Сэм, Марк Смит и Джоэл Брейкстон (19.09.2017). «В« табеле успеваемости страны »говорится, что он оценивает критическое мышление в истории, но NAEP получает по этому поводу пятерку». Вашингтон Пост. ISSN  0190-8286. Получено 2020-09-07.
  15. ^ а б Харви, Джеймс (2011-11-04). «NAEP: ошибочный тест, создающий ту же старую историю». Вашингтон Пост. Получено 2020-09-07.
  16. ^ "Уровни NAEP признаны некорректными". www.fairtest.org. Получено 2020-09-07.
  17. ^ а б c d е ж Харви, Джеймс (февраль 2018 г.). "Проблема с" Знаток"". Образовательное лидерство.
  18. ^ а б Без любви, Том (2016-06-13). «Миф о профессионализме NAEP». Brookings. Получено 2020-09-07.
  19. ^ Штраус, Валери (23 мая 2016 г.). «Почему важна борьба в социальных сетях между Кэмпбелл Браун и ее критиками». Вашингтон Пост. ISSN  0190-8286. Получено 2020-09-07.

дальнейшее чтение

внешняя ссылка