Недавно начала разбираться в анализе текстов. Один из самых популярных датасетов – речи американских президентов. Наверное еще и потому, что он легкодоступный: есть несколько ресурсов, откуда можно спарсить ежегодные послания.

Первая визуализация - анализ от NYT. Они изобразили, как часто президенты говорили термины, причем иногда весьма специфичные, вроде terror (понятно, когда был пик) и innovative (только Обама активно использовал слово innovation, даже начал выпускать Стратегию инновации).

Данные заканчиваются 2011 годом и чешутся руки их обновить, но даже так есть о чем подумать. Самое интересное, что я там нашла, это:
1) в выборке самый топ по частоте - основа Америки - tax;
2) cooperate вышло из употребления, как и bipartisan, чей пик пришелся на Рейгана и Клинтона, все время прорывавшихся через враждебный Конгресс (хотя это скорее норма для американской политики);
3) small business практически не произносилось до Клинтона, что странно, его всегда было много, backbone of US economy, все дела.

Умные и красивые

Недавно начала разбираться в анализе текстов. Один из самых популярных датасетов – речи американских президентов. Наверное еще и потому, что он легкодоступный: есть несколько ресурсов, откуда можно спарсить ежегодные послания.

Первая визуализация - анализ от NYT. Они изобразили, как часто президенты говорили термины, причем иногда весьма специфичные, вроде terror (понятно, когда был пик) и innovative (только Обама активно использовал слово innovation, даже начал выпускать Стратегию инновации).

Данные заканчиваются 2011 годом и чешутся руки их обновить, но даже так есть о чем подумать. Самое интересное, что я там нашла, это:
1) в выборке самый топ по частоте - основа Америки - tax;
2) cooperate вышло из употребления, как и bipartisan, чей пик пришелся на Рейгана и Клинтона, все время прорывавшихся через враждебный Конгресс (хотя это скорее норма для американской политики);
3) small business практически не произносилось до Клинтона, что странно, его всегда было много, backbone of US economy, все дела.

hottg.com/smartandbeautiful/43

792 viewsedited  Jul 31, 2021 at 07:05