Анализ данных

Системный анализ

Компаративистика

34 страницы

8 месяцев назад

68 просмотров

Сравнение текстов на основе энтропии

Содержание

Глава 1. Введение
1.1. Актуальность темы
1.2. Цели и задачи исследования

Введение

Данная работа посвящена исследованию метода сравнения текстов с использованием концепции энтропии, которая широко применяется в разных областях науки и техники. Энтропия, как мера неопределенности или хаоса в системе, может быть использована для анализа текстов с целью определения их схожести или различий. В ходе работы будет произведено изучение теоретических основ энтропии, включая формулы и алгоритмы, позволяющие вычислять эту величину для различных текстовых данных. Практическая часть работы будет включать в себя реализацию программы, способной анализировать тексты, вычислять их энтропию и проводить сопоставление. В результате работы будут приведены примеры использования предложенного метода на реальных данных, что позволит для лучшего понимания его эффективности и методов применения. Также в работе будет рассмотрен вопрос о возможных ограничениях такого подхода, что сделает исследование более полным и объективным.

Актуальность темыАктуальность исследования энтропии в текстах обусловлена растущим объемом информации в разных областях, таких как литература, наука и искусственный интеллект. В условиях информационной перегрузки становится важным не только владеть библиотекой текстов, но и уметь быстро и эффективно проводить их анализ.
ПроблематикаПроблема, которую мы исследуем, заключается в том, что существующие методы сравнения текстов часто недостаточно точны и не учитывают всех факторов, которые могут влиять на единичный текст или его структуру. Использование энтропии может предоставить более глубокий анализ.
Цели работыЦелью данной работы является разработка и тестирование метода сравнения текстов на основе вычисления их энтропии, а также оценка его эффективности в различных сценариях.
Задачи работыВ рамках достижения поставленной цели необходимо решить следующие задачи: изучить теоретические основы энтропии, разработать алгоритм и программу для анализа текстов, провести сравнение различных текстов и проанализировать результаты.

Список источников

1. Лариса Евгеньевна Ильина, Ольга Евгеньевна Павловская. Энтропия текста как рассеивание смысла // Вестник Северного (Арктического) федерального университета. Серия: Гуманитарные и социальные науки. 2023. URL: https://cyberleninka.ru/article/n/entropiya-teksta-kak-rasseivanie-smysla (дата обращения: 19.01.2026).

2. Шелестюк Елена Владимировна, Щетинкина Екатерина Алексеевна. СТОХАСТИЧНОСТЬ И ЭНТРОПИЯ В ЛИНГВИСТИКЕ // Вестник Челябинского государственного университета. 2023. URL: https://cyberleninka.ru/article/n/stohastichnost-i-entropiya-v-lingvistike (дата обращения: 19.01.2026).

3. Малашина А. Г., Лось А. Б.. ПОСТРОЕНИЕ И АНАЛИЗ МОДЕЛЕЙ РУССКОГО ЯЗЫКА В СВЯЗИС ИССЛЕДОВАНИЯМИ КРИПТОГРАФИЧЕСКИХ АЛГОРИТМОВ // Чебышевский сборник. 2022. URL: https://cyberleninka.ru/article/n/postroenie-i-analiz-modeley-russkogo-yazyka-v-svyazis-issledovaniyami-kriptograficheskih-algoritmov (дата обращения: 19.01.2026).

4. Радбиль Тимур Беньюминович, Красса Сергей Иванович. ОБФУСКАЦИЯ КАК АНОМАЛЬНОЕ ИСПОЛЬЗОВАНИЕ ЯЗЫКА: ПРИНЦИПЫ ПРАГМАЛИНГВИСТИЧЕСКОГО И ЛИНГВОСЕМИОТИЧЕСКОГО АНАЛИЗА // Вестник Нижегородского университета им. Н. И. Лобачевского. 2024. URL: https://cyberleninka.ru/article/n/obfuskatsiya-kak-anomalnoe-ispolzovanie-yazyka-printsipy-pragmalingvisticheskogo-i-lingvosemioticheskogo-analiza (дата обращения: 19.01.2026).

5. Дюгаева Ирина Дмитриевна. ФУНКЦИОНАЛЬНЫЕ ХАРАКТЕРИСТИКИ АЛЛЮЗИВНОЙ ЯЗЫКОВОЙ ИГРЫ (НА МАТЕРИАЛЕ РОМАНА В. НАБОКОВА «PALE FIRE») // Время науки – The Times of Science. 2021. URL: https://cyberleninka.ru/article/n/funktsionalnye-harakteristiki-allyuzivnoy-yazykovoy-igry-na-materiale-romana-v-nabokova-pale-fire (дата обращения: 19.01.2026).

6. Соловьева Юлия Олеговна. СОВРЕМЕННЫЕ МЕТОДЫ АТРИБУЦИИ ТЕКСТА В АНГЛОСАКСОНСКОЙ ПРАКТИКЕ АВТОРОВЕДЧЕСКОЙ ЭКСПЕРТИЗЫ // Вестник Московского университета. Серия 19. Лингвистика и межкультурная коммуникация. 2020. URL: https://cyberleninka.ru/article/n/sovremennye-metody-atributsii-teksta-v-anglosaksonskoy-praktike-avtorovedcheskoy-ekspertizy (дата обращения: 19.01.2026).

7. Гречко Михаил Викторович, Стасев Михаил Александрович. ОЦЕНКА УРОВНЯ ЭНТРОПИИ В КРЕАТИВНЫХ СИСТЕМАХ: МЕТОДОЛОГИЧЕСКИЙ АСПЕКТ // Journal of Economic Regulation (Вопросы регулирования экономики). 2025. URL: https://cyberleninka.ru/article/n/otsenka-urovnya-entropii-v-kreativnyh-sistemah-metodologicheskiy-aspekt (дата обращения: 19.01.2026).

8. Корниенко Светлана Юрьевна. СИБИРСКАЯ СТЕПЬ В ЭСТЕТИЧЕСКИХ ПРАКТИКАХ МОДЕРНА (КОНСТАНТИН БАЛЬМОНТ - МАРИНА ЦВЕТАЕВА) // Сибирский филологический форум. 2021. URL: https://cyberleninka.ru/article/n/sibirskaya-step-v-esteticheskih-praktikah-moderna-konstantin-balmont-marina-tsvetaeva (дата обращения: 19.01.2026).

9. Полева Елена Александровна. АНДРОГИННЫЕ МОТИВЫ В РОМАНЕ ЛЕНЫ ЭЛТАНГ "ПОБЕГ КУМАНИКИ" // Сибирский филологический журнал. 2021. URL: https://cyberleninka.ru/article/n/androginnye-motivy-v-romane-leny-eltang-pobeg-kumaniki (дата обращения: 19.01.2026).

10. Ковтуненко Инна Викторовна, Кудряшов Игорь Александрович, Соболева Юлия Сергеевна. ХРОНОТОП АНТИУТОПИЧЕСКОГО ГОРОДА: ЭНТРОПИЯ МЫСЛИ, СОЦИАЛЬНОЙ АКТИВНОСТИ И ИСТОРИЧЕСКОГО ВРЕМЕНИ // Гуманитарий Юга России. 2023. URL: https://cyberleninka.ru/article/n/hronotop-antiutopicheskogo-goroda-entropiya-mysli-sotsialnoy-aktivnosti-i-istoricheskogo-vremeni (дата обращения: 19.01.2026).

11. Цукерман П.И.. Грехопадение и актуализация зла. // Scientific and Theological Bulletin of the Perm…. 2022. URL: https://permseminaria.ru/wp-content/uploads/2022/10/%D0%9D-%D0%91.-%D0%92%D0%B5%D1%81%D1%82%D0%BD%D0%B8%D0%BA-%D0%9F%D0%B5%D1%80%D0%BC%D1%81%D0%BA%D0%BE%D0%B9-%D0%94%D0%A1.-%E2%84%962-5-2021.pdf (дата обращения: 19.01.2026). DOI: 10.48622/permds.2021.88.24.011

12. Илья Станиславович Мухин,Е.Ю. Авксентьева. Оценка эмоциональной тональности текста: анализ проблем и путей решения // Вестник ВГУ. Серия: Системный анализ и информацион��ые технологии. 2025. URL: https://journals.vsu.ru/sait/article/view/13193 (дата обращения: 19.01.2026). DOI: 10.17308/sait%2F1995-5499%2F2025%2F2%2F157-179

13. Ильясова Н.А.,Юсупова А.Ш.,Молдагали Б.. Анализ текста в метапредметной системе и пути личностного роста учащихся // Modern Humanities Success. 2024. URL: https://mhs-journal.ru/wp-content/uploads/2024/11/mhs-9_2024.pdf#page=244 (дата обращения: 19.01.2026). DOI: 10.58224/2618-7175-2024-9-244-253

14. Геза Ш. Хорват. Ангелика Молнар: Рецепция и анализ текста. Избранные работы. Москва, Азбуковник, 2023, 447 с. ISBN 978-5-91172-236-4 // Slavica. 2024. URL: https://ojs.lib.unideb.hu/slavica/article/view/14454 (дата обращения: 19.01.2026). DOI: 10.31034/053.2024.23

15. Анна Владимировна Чижик. Сравнение моделей векторизации текстов для задачи анализа тональности коротких сообщений из социальных сетей // Компьютерная лингвистика и вычислительные онтологии. 2024. URL: https://ojs.itmo.ru/index.php/CLCO/article/view/1342 (дата обращения: 19.01.2026). DOI: 10.17586/2541-9781-2024-7-81-89

16. Ф.М. Адилова,Р.Р. Давронов,Самариддин Кушмуратов. Эффективность Lora в задачах обобщения текстов: сравнение моделей T5 и uzT5 // Международный Журнал Теоретических и Прикладных Вопросов Цифровых Технологий. 2024. URL: https://ijdt.uz/index.php/ijdt/article/view/204 (дата обращения: 19.01.2026). DOI: 10.62132/ijdt.v7i3.204

17. Александр Александрович Махин. Энтропия экспертных оценок качества по многим критериям // Современная экономика проблемы и решения. 2025. URL: https://journals.vsu.ru/meps/article/view/13323 (дата обращения: 19.01.2026). DOI: 10.17308/meps%2F2078-9017%2F2025%2F10%2F33-44

18. Daurenbek Bolysbekovich Bazarkhanov,Sholpan Albanovna Balgimbayeva. Оптимальное восстановление по выборке и $varepsilon$-энтропия
классов Лизоркина-Трибеля $F^s_{infty q}(mathbb T^m)$ в пространстве
$L_r(mathbb T^m)$ // Математические заметки. 2025. URL: https://www.mathnet.ru/php/archive.phtml?wshow=paper&jrnid=mzm&paperid=14633&option_lang=rus (дата обращения: 19.01.2026). DOI: 10.4213/mzm14633

19. Ольга Юрьевна Николаева,Галина Ивановна Модина,Инна Анатольевна Ситникова. Хроника II Международной научной конференции «Гармония и алгебра текста: филология, семиотика, аналитика» // Дальневосточный филологический журнал. 2025. URL: https://journals.dvfu.ru/dvphilology/article/view/1670 (дата обращения: 19.01.2026). DOI: 10.24866/2949-2580%2F2025-1%2F152-159

20. Элеонора Федоровна Шафранская,Гульчира Талгатовна Гарипова,Надежда Андреевна Токарев. Роман Сенчин: поэтика тувинского текста // The New Research of Tuva. 2023. URL: https://nit.tuva.asia/nit/ru/article/view/1268 (дата обращения: 19.01.2026). DOI: 10.25178/nit.2023.4.1

Еще 18 источников

Предпросмотр документа

Наименование образовательного учреждения

реферат на тему

Сравнение текстов на основе энтропии

Выполнил: ФИО

Руководитель: ФИО

2025

Глава 1. Введение

1.1. Актуальность темы

Изучение текстов на основе энтропии становится всё более важным в условиях современного информационного общества. Важно понимать, как информация может быть измерена и сравнима.

1.2. Цели и задачи исследования

Цель исследования состоит в сравнении текстов с использованием методов измерения их энтропии. Задачи включают определение подходящих методов и их применение к различным текстам.

Заключение

В результате проведенного исследования можно сделать вывод о значимости применения энтропии для анализа текстов. Методы, основанные на энтропии, позволяют глубже понять структурные особенности и уровень сложности текстов.

Продолжи писать реферат с нейросетью

Продолжить генерацию

Похожие рефераты

Системный анализ

Машинное обучение

Анализ данных

Контент-анализ как метод исследования: от ручного подсчета к компьютерному анализу Big Data

Содержание