Что изучить

[iprst]

Здесь собирался открыть дискуссию в духе «что изучить», в которой можно было бы набрасывать вопросы и ответы.

[iprst]

Например первый вопрос, с которого планировал начать — надо бы мне освоить Go хотя бы в минимальной степени, чтобы хотя бы уметь делать минимальные форки в ту же программу геоматрицы, например меня который месяц теребит желание чтобы в выводных файлах kml у линейной геометрии было описание, в котором бы указывались родительские параметры, их породившие. Описание удобно тем, что во-первых не нужно открывать папку и искать конкретный элемент чтобы вычислить его название (для резонансов актуально), а во-вторых саму геометрию можно схватить мышкой, что не всегда возможно для азимутов, особенно когда их много — с какого-то количества геометрии на гуглобусе отрисовываются какие-то слои, через которые мышка не может пробиться, если у объекта нет описания, глаза видят, а руки не дотягиваются.

1. Как освоить Go непрограммисту, с чего начать «задом наперёд», чтобы «уже вчера» можно было успешно редактировать код на примере приведённой задачи?

[iprst]

Добавлю некоторые найденные материалы
https://proglib.io/p/samouchitel-po-go-dlya-nachinayushchih-chast-2-resursy-dlya-izucheniya-go-s-nulya-2023-11-28

The Art of Development. Автор канала записал полноценный курс из 20 видео по основам программирования на Go, в котором на понятных примерах объяснил концепции языка и показал, как разработать go приложение с развертыванием в docker.

Документация + Блог. Документация языка – самый авторитетный и исчерпывающий источник информации, к которому нужно обращаться в первую очередь. Здесь можно найти практические уроки по разработке веб-сервиса, рекомендации по эффективному написанию кода на Go, исходный код языка и многое другое.

Введение в программирование на Go. На этом сайте с первого урока делается упор на разбор и написание кода, что позволяет увидеть, как теория работает на практических примерах. Помимо стандартных тем, рассматриваются особенности стандартной библиотеки, тестирование кода и рекомендации по дальнейшему изучению языка.

Go в примерах. Сайт содержит конкретные примеры применения синтаксиса языка и затрагивает как базовые, так и продвинутые темы, такие как процессы, сигналы и хеширование.

The Golang Handbook. Структурированное пособие на английском языке, которое сопровождается короткими видео с доступным объяснением основных концепций. Отлично подойдет тем, кто хочет в кратчайшие сроки разобраться с синтаксисом языка и начать писать собственные программы.

[audetv]

Вполне нормальный список, просмотрел , увидел много ссылок, с которыми знакомился сам в разное время и изучал материалы.

Понял, что ни прочитал ни одной книги по GO. В первой ссылке есть цитата:
«Традиционно новичкам рекомендуют начать изучение Go с этой монументальной книги «Язык программирования Go», Алан Донован, Брайан Керниган.» Надо будет посмотреть. Но потом полез в свою читалку посмотреть, что же я читал из книг по go и все таки нашел одну: Daniel Whitenack — Machine Learning With Go https://github.com/PacktPublishing/Machine-Learning-With-Go-Second-Edition

Сначала надо знакомиться с основными операторами языка, основные операции во всех языках это — переменная, присвоение значения, математические операции, условия и циклы. Для простых задач этого достаточно. Даже так почти для всех задач этого может быть достаточно) Каждый язык позволяет решать определенные задачи боле эффективно, предоставляет абстракции и функции, которые под капотом делают простые операции. Пропускает сигал, нули, единицы по регистрам процессора. Далее надо разобраться, как в языке создаются функции, и как организуются структуры и типы данных. В go например, есть только структуры данных, которые могут обладать методами. Метод — это какое то действие над данными в структуре/просто данными. Функция — это какое-то действие на данными. Каждый отдельный блок кода полагается оформлять в пакет(package) который должен быть в своей папке, главное, что бы пакеты не создавали циклической зависимости, не должны циклично импортироваться друг в друга. Импорт — это когда код из одного файла можно использовать в коде другого файла. (функции, переменные методы) На разных уровня абстракций. Если будет циклическая зависимость об этом напишет компилятор при сборке. Так что мимо не пройти. Пакет А импортировал, Пакет Б, Пакет Б импортирует пакет А. Критическая ошибка.

Вообще вопрос достаточно сложный и у меня пока нет ответа. Кроме одного, который следует из методологии работы с информацией — нужно брать и писать, и можно представить это как написание комментария в тему, чем больше пишешь, тем больше опыта и понимания. И потом начинаешь читать и понимать код на любом языке, но все же писать пока ещё на этом языке не получится, пока не начнёшь писать, наделаешь ошибок, исправишь, повторишь, решишь простые задачи, которые до тебя решали 1000 раз, или ты сам уже решал эти задачи на другом языке до этого, начиная с банального hello word! :).

Основная проблема в таких задачах состоит в том, что надо не только знать язык, а надо ещё и понимать, разобраться, что же там накодил автор. И как показывает практика, разные авторы по-разному пишут код, несмотря на то, что в сообществах существуют различные патенры-шаблоны написания кода и практики, фреймворки, для того чтобы упрощать поддержку и понимание, но несмотря на это сотни и тысячи строк чужого кода почти никогда не загрузить моментально в голову, нужно время чтобы изучить код, и вот уже от уровня понимания программиста будет зависеть, сколько ему потребуется ресурсов мозга и времени, чтобы понять выраженные в коде алгоритмы. Более того, через некоторое время, даже сам автор кода возвращаясь к написанному ранее, может получить внезапное озарение, что он вот так сходу, без подключения повышенного внимания ничего не понимает из того, что написано им ранее в этом коде.

http://golang-book.ru/ — хорошо, можно попробовать, понятно.
https://www.freecodecamp.org/news/learn-golang-handbook/ — тоже хорошо.
В первую очередь надо разобраться, как настраивать, устанавливать рабочее окружение у себя на компьютере, сделать необходимые настройки. Выбрать редактор кода, IDE (VS code). Рекомендую устанавливать go внутри wsl и работать внутри wsl, подключаться через vs code, а не ставить язык в windows. Но можно успешно работать и писать код и чисто под windows. Дело привычки и опыта. В wsl кажется, что меньше проблем с разыми дополнительными библиотеками и настройками. Но я начинал на чистом windows). Можно написать пару простых программ, типа напечатать что-нибудь в консоли, посчитать.

Для решения поставленного вопроса, потребуется указать на те файлы, где происходит формирования kml файла. Это я подскажу и укажу. Нужно почитать про пакет kml, который формирует структуру файла, про его методы (api) и можно попытаться сделать изменения.
https://github.com/twpayne/go-kml?tab=readme-ov-file
https://pkg.go.dev/github.com/twpayne/go-kml/v3@v3.2.1
Дальше видимо потребуется подробное описание того, что делает код в 4 файлах для kml. Возможно, что потребуется вносить изменения и в другие пакеты, если исходных/текущих данных, из которых формируется файл, будет не достаточно. На вход в пакет приходят структуры данных, из этих данных формируется kml файл.

И ещё, автору кода почти всегда проще и быстрее внести правки в свой код. Но если задача в том, чтобы научиться, то будем грызть.

Пока так. Обязательно ещё посмотрю, какие материалы у меня есть, чем я пользовался при обучении. Но факт, большинство задач которые я решал на языке go, это задачи по svodd, terratensor и библиотекам, началось это с парсера fct. В профессии я go не использую. Наращиваю понимание с постепенным усложнением задач.

Кстати у меня была мысль, идея. Что можно сделать ещё и версию геоматрицы, расчетов на Typescript (надстройка javascript), чтобы использовать прямо в браузере. Тайпскрипт очередной язык, который грызу потихоньку, показывал в наработках по вики и локальной библиотеке. Это не отменяет текущих наработок, скорее позволяет учиться и делать сложные задачи на новом языке, задачи которые смог решить ранее.

[iprst]

пока ты напишешь и объяснишь глупой сети, что ты от нее хочешь

Картинка

is dis magic

[iprst]

Картинка

[audetv]

Это же классическая задача! В корень зрит.

[iprst]

Я ждал «это понятно и моему коту!»

[iprst]

В общем, всё круто. По недоумству сначала скачал 42 Гб llama3.3 — она не лезе в видеокарту, кэп. Скачал указанную версию и всё нормально работает.

[audetv]

Ассистент для разработчика от сбергрефа, устанавливается в vs code и другие редакторы/IDE.
В целом вполне неплохо, пока тестирую
https://gigacode.ru/

Так же интересный проект, бесплатный, но с регистрацией, китайский чат гп
Это если лень возиться с локальной оламой и прочее, или на компьютере нет видеокарты.
https://chat.deepseek.com/

[iprst]

Добавил результаты допроса про NLP в поиске топонимов. В целом вразумительно бухтит, веришь ему.
NLP.toponym.from.news.go

[iprst]

такие статьи стараюсь просматривать, в поисках крупиц золотых идей. Геокодер в яндекс.
https://habr.com/ru/companies/yandex/articles/877086/

Если этот метод отдают в форме API и его можно «массово использовать хотя бы один раз» — было бы славно пробежать по нему с помощью вышеописанных «утилит» по всей библиотеке и собрать все упоминания в ней адресов → координат → геохэшей. Будет сразу физическая польза — по подходящим геохэшам можно будет осуществлять поиск порождаемых геодезическим калькулятором сущностей и выводить их список или делать другие действия.

[iprst]

У нас есть «достаточно общий список всех населённых пунктов», можно использовать этот список в качестве начальной точки для «перебора» запросов в базу, или что-то в таком духе.

[iprst]

Вежливый китайский ИИ:

Извините за путаницу! Ошибка возникла потому, что я забыл импортировать пакет net/url, 
который необходим для работы с URL-адресами. Давайте исправим этот момент.

[audetv]

Ага, этот товарищ замечен ни раз, я бы сказал почти через раз, за тем, что часто забывает про импорты пакетов, копируешь код, а там половину импортов пропало. Но это ладно, но странно. Если программист немного с опытом, то таки вещи быстро различает, типа само собой, должно работать, что даже забыли боту инструкции написать)

Вежливость у меня проявил один раз, было такое. Когда, с третьей попытки он меня не понимает, я ему закидываю код на bash, как в консоли команды выполняются, а он мне в ответ мой же код возвращает, типа на, пофиксил, когда я ему напомнил, что вообще то у нас проект на питоне, он извинился и продолжил тупить, но все же сдвинулись с места после примеров кода,

Заметил, бывает что начинает тупить и не пробить его, пока сам не напишешь код и не предложишь ему вариант решения, кажется в такие моменты и проявляется человеческий интеллект «виз» ИИ. тогда ощущаешь себя интеллектом)

[iprst]

Первый результат изучения go (на самом деле второй).

eventmap — конвертер топонимов в KML

https://github.com/terratensor/eventmap

Утилита для захвата из текста новости топонима и генерации kml файла, который будет содержать название топонима, координаты места события и фрейм с оригинальной статьёй. Значительно ускоряет разметку новостей в ручном режиме, не нужно искать координаты топонима вручную на картах и вбивать их в гуглобус, затем оформлять. Теперь это можно сделать в пару кликов.

Используется API яндекс карт, требуется получить API key, очень простая операция. Получаем ключ — он позволяет обработать 1000 запросов в сутки, чего должно хватить с лихвой для ручного добавления.

Использование

Скачиваем eventmap.exe

Копируем ключ и помещаем в файл apikey.txt рядом с исполняемым файлом eventmap.exe в той же папке, где расположена программа.

На странице интересующей новости в хромоподобных браузерах выделяем топоним и в контекстном меню выбираем «копировать ссылку на выделенный текст» (copy link to highlight).

В командной строке из папки, куда скачана программа, запускаем её:

C:\путь\где\программа\eventmap.exe

В результате без лишних вопросов будет создан kml документ в папке по умолчанию — C:\Projects\eventmap, содержащий маркер с координатами, топонимом и текстом новости.

Протестировано на новостях ТАСС, РИА-новости и RT, первые два сайта нормально попадают во фрейм, RT слегка ругается сертификатом, но тоже работает. Другие сайты пока не проверял, но в целом если сам домен не запретил встраивание во фреймы, текст будет виден для любого сайта. Даже если фрейм не работает, kml всё равно будет успешно создан.

В консоли отражается процесс геокодинга, можно сразу угадать, распознал ли яндекс топоним, или мелет чушь (редко, но бывает) — это позволяет попробовать схватить другое упоминание топонима, например в другом падеже, или в крайнем случае найти ту же новость на другом сайте с другим вариантом оформления текста. Например, может попасться форма типа «село Ивановка Оренбургской области» — выделив в хайлайт все четыре слова, скорее всего будет успешный результат работы геокодера яндекса.

Пока как-то так.

В дальнейшем, если потребуется, к этой логике можно будет прикрутить геоматрицу — на выделенный в хайлайт топоним сразу набросить резонансы, а потом и посчитать для них все связи из базы данных.

[audetv]

Fire Огонь! Поздравляю!
Изучу, посмотрю. Бегло глянул, все вроде понятно даже мне) простые вызовы.
Конечно можно будет встроить в геоматрицу или как модуль или взять логику, это вообще не особо проблема. т.к. go c go легко совмещается.
Я тоже с помощью «синего» делал пакет для токенизации, почти сделал. пока объяснял что к чему, разобрался во всем и к как только смог ему подробно расписать алгоритм, он сделал мне нормальный код. почти. там есть БАГ) 2 чата закончилось в процессе.

https://github.com/terratensor/segment

[iprst]

Я сегмент видел, в общих чертах понял что это за прибор.

Сначала я сделал парсер сохранённых давно в избранном страниц википедии типа авиакатастроф, индустриальных происшествий и тому подобных списков. Там получился код с четырьмя модулями, катастрофы вырубает на раз, но долго бодался с невозможностью выдернуть из общего списка то одной то другой ссылки — не обрабатываются хоть тресни. Часть ссылок никак не выдают координаты. То есть я получил готовые kml с большим количеством полезного, порядка 500-600 маркеров в одной и другой сборке, однако пока это не работает однозначным образом, то одно не видит, то другое не может распознать.

Ссылку из хайлайта придумал позже, но удачно. Сначала этот скрипт парсил страницу ТАСС, это оказалось не очень удобно и достаточно бесполезно, пока API геокодеров не умеют токенизировать естественный язык сразу в единственно верный топоним, вечно выбирают что-то не то и результаты совсем ниже среднего по качеству. А вот с хайлайтом очень чётко получилось, почти не подводит, а когда обманул, сразу видно и можно исправить.

[audetv]

пока API геокодеров не умеют токенизировать естественный язык сразу в единственно верный топоним, вечно выбирают что-то не то и результаты совсем ниже среднего по качеству.

Ага. Да много чего ещё надо делать руками и не надеется на машину) А то некоторые объявили эру ИИ. У меня была идея попробовать распознавать топонимы из текста новостей с помощью сети, пробовал на разных, но получаеется фигня. Не умеет.

Я пока в общих чертах прочитал, не запускал, вроде понятно, надо потестировать на выходных. Выделяешь текст, экзешник читает из клипборда и выдает результат. Хорошо.

Я сегмент видел, в общих чертах понял что это за прибор.

Планирую запустить его на наших 170к+ файлах и сделать общий словарь корпуса.
И можно будет работать со словарем дальше. Например, мутороно, но можно выделить там мусор и обучить сетку распознавать мусор на этих данных, и вырезать потом этот мусор из других текстов. Так же планировал сделать векторизацию GloVe и обучить сетку на векторах 300 параметров. И можно будет попробовать добавить семантический поиск, в каком то виде. Пока не знаю что получиться. Возможно ничего) Для GloVe хватает мощности, это технология 10летней давности.
https://nlp.stanford.edu/projects/glove/

[iprst]

У меня была идея попробовать распознавать топонимы из текста новостей с помощью сети, пробовал на разных, но получаеется фигня. Не умеет.

Логика правильная, нужно ручное обучение. Надоумил дипсик и он научился в коде go указывать на правильный топоним в 80% случаев без всяких нейросетей, просто написав ВОООООООТ такой список стоп-слов, после которых «должен быть топоним зуб даю» и в целом эта схема как ни странно работает.. Просто вручную с хайлайтом оказалось удобнее.

Примерно так, из какой-то итерации:

var (
    stopWords = map[string]bool{
        // Предлоги и направления
        "возле": true, "около": true, "рядом": true, "неподалёку": true, "близ": true, "вблизи": true,
        "к западу от": true, "к востоку от": true, "к северу от": true, "к югу от": true,
        "в направлении": true, "в стороне": true, "со стороны": true, "выше": true, "ниже": true,
        "вдоль": true, "поперёк": true, "через": true, "напротив": true, "позади": true, "между": true,

        // Указание расстояния
        "в км": true, "в метрах": true, "в шагах": true, "в часах": true, "в минутах": true,
        "на расстоянии": true, "в радиусе": true, "в получасе": true,

        // Географические объекты (без названий)
        "у реки": true, "озера": true, "моря": true, "океана": true, "горы": true, "леса": true,
        "поля": true, "на берегу": true, "под горой": true, "за холмом": true, "в долине": true,
        "на равнине": true, "в ущелье": true,

        // Административные указатели
        "в пределах": true, "за пределами": true, "вне": true, "в пригороде": true, "на окраине": true,
        "в черте города": true, "в районе": true, "в окрестностях": true, "в местности": true,

        // Транспортные объекты
        "у станции": true, "вокзала": true, "аэропорта": true, "остановки": true, "на перекрёстке": true,
        "у моста": true, "возле тоннеля": true, "у площади": true, "улицы": true, "проспекта": true,

        // Прочие
        "по пути к": true, "на подъезде к": true, "у дома": true, "здания": true, "сооружения": true,
        "памятника": true, "рядом с парком": true, "стадионом": true, "рынком": true, "за углом": true,
    }

    geoMarkers = []string{
        "город", "район", "штат", "деревня", "аэропорт", "провинция", "область",
        "озеро", "река", "гора", "море", "остров", "пустыня", "канал",
    }
)

Там вполне видно, что можно улучшить.

Выделяешь текст, экзешник читает из клипборда и выдает результат.

Иконку берёт с нашего сайта ещё! И сделал проверку канонической формы топонима, а то в тексте они всегда просклонялись и чёрти чё в маркерах — «Ставропольского kml». Забирает из яндекса JSON с названием локации.

По segment я так и понял, что в библиотеку прибор. Ну и в другие части, после того как на материале обкатается и если потребуется где-то ещё.

[audetv]

Работает. Взял первую новость в тасс, на которую кликнул «не глядя» tass.ru/proisshestviya/23146619
Сначала выделил «станице Благовещенской под Анапой», но это оказалось слишком для геокодера, получил файл с координатами рядом с Анапой. Посмотрел json ответ геокодера, накидал ссылок, это был первый элемент, он и попал в файл.

AddressDetails: {
	Country: {
		AddressLine: "Россия, Краснодарский край, 03К-581",
		CountryNameCode: "RU",
		CountryName: "Россия",
		AdministrativeArea: {
			AdministrativeAreaName: "Краснодарский край",
			Locality: {
				Thoroughfare: {
						ThoroughfareName: "03К-581"
					}
				}
			}
		}
	}
}

Вторая попытка и попадание — станице Благовещенской.

Получил kml файл, там ссылка на новость. Работает. Сразу можно открыть новость во фрейме.

[iprst]

Сервер в будущем должен ответить «такая новость уже добавлена в матрицу» [пару часов назад] ))

…
Статус ответа: 200 OK
[7/8] Обработка ответа...
Найдено результатов: 1
Координаты: долгота=37.131763, широта=45.055792
[8/8] Создание KML...
[9/8] Запись в 'C:\Projects\eventmap\станица_Благовещенская.kml'...
Готово! KML-файл успешно создан в целевой директории.

[iprst]

Долго среди прочих проектов мурыжился с GUI для go скриптов и приложений. В целом, многообещающие фреймворки только отняли время у китайских дипсиков, которые в процессе разработки стали материться на меня нехорошими словами. Ничего то у них не работает.

Однако оказалось, что если использовать прямо виндовские dll и брать ресурсы для отображения GUI и его работы непосредственно напрямую — о чудо, оно работает.

Сейчас так:

rW4T6hv04C.mp4

Логика преследуется такая — чтобы не искать постоянно командную строку, адреса папок и прочее, в углу рабочего стола висит запущенное приложение в оболочке без виндовс-интерфейса, тратящее пару мегабайт оперативки, при нажатии на которое выполняется go скрипт. Как версию выкладывать не буду, но наверное позже укпомлектую побочный бранч, чтобы если нужно запустить какую-то корягу с интерфейсом, под рукой был рабочий код, не требующий разворачивания фреймворков и прослоек между go и виндой.

[audetv]

Интересно.
Одна из существенных проблем с дипсиками в том, что сети имеют знания по состоянию дату, например дипсик на 2021 г.
Если разрабатываешь свой модуль на чистом языке программирования, то существует большая вероятность, что сеть почти всегда будет давать рабочие куски кода. Т.к. языки меняются не так стремительно, как библиотеки и фреймворки. другое дело подключить фреймворк или попросить настройку библиотеки, которые за 3 года могли сменить несколько версий и знаний об этом у сети нет. А хваленые, заявленные способности думать, размышлять и т.д. по опыту использования, выглядят как маркетинговые объявления. Я например скидывал актуальные конфиги в чат и просил произвести настройку, не умеет. Т.е. делает какую-то фигню, которая почти всегда не работает. И польза в таком диалоге почти нулевая, даже иногда мешает, потому как сеть как заведенный болванчик выдает нерабочие куски. И в итоге проще настроить самому, чем вводиться в заблуждение неверной информацией от сети. Надо уметь вылавливать эти состояния , различать их и тогда можно пользоваться инструментом более эффективно.

[audetv]

Однако оказалось, что если использовать прямо виндовские dll и брать ресурсы для отображения GUI и его работы непосредственно напрямую — о чудо, оно работает.

Это как раз похоже на подход, который исключает фреймворки и библиотеки, а апи винды, скорее всего довольно стабильно и можно написать свой код, т.е. прямо вот так: пишем свою библиотеку с нуля. не используем сторонние и т.д. И вот тут сильно помогают знания алгоритмов, структур данных, паттернов проектирования, и устройства компьютеров и т.д., т.к. эти знания известны сети и если ее направить в нужно русло, начинает выдавать вполне интересные решения.

[iprst]

языки меняются не так стремительно, как библиотеки и фреймворки. другое дело подключить фреймворк или попросить настройку библиотеки, которые за 3 года могли сменить несколько версий и знаний об этом у сети нет

Логично. Кроме того, более общее решение, в духе «использовать такой-то фреймворк или репозиторий» часто оказываются устаревшими, например автор закрыл разработку или её кто-то приобрёл и распространяет уже от своей компании, и тд. Дипсики настойчиво пытаются отправить по старым адресам, где уже нет библиотеки или проекта.

Протестировал приложение. Сейчас пока три функции — ЛКМ выполнить скрипт поиска топонима из хайлайт-ссылки, ПКМ открывает папку, куда сохраняется kml, и ESC закрывает программу. Весь день окошко висит в углу, за три обращения к программе всё выполнялось без нареканий, не зависло, никаких проблем, kml создаётся, папка открывается, память не утекла. То есть в целом работает нормально. Для задач нашего уровня, если нужно будет GUI для разных скриптов, например это будет 3-4 разных кнопки для разных сценариев, нормально, как минимум в форме тестовой повозки это точно будет работать без танцев с бубном.

Единственное, чего пока не поборол, это подцепление ресурсов при компиляции — иконка приложения никак не хочет работать как ожидается, но это я решу, Process Hacker по подсказке дипсика, вручную позволяет встроить файл иконки и всё летает, и даже видно, где может скрываться проблема. Как решу, выложу, пусть будет.

[iprst]

Ссылки на ТАСС со вчерашнего дня перестали открываться во внутреннем браузере Google Earth.

[iprst]

Надо бы к нашим делам попробовать прикрутить инструменты теории катастроф и теории обработки сигналов. Тексты это всё отлично, но без суровой математики суровая реальность никак не вычисляется (с)

Пока в поисках.

[iprst]

Некоторые книги

Вот список русскоязычных источников, где пересекаются теория обработки сигналов и теория информации, включая влияние работ А.Н. Колмогорова:

1. Тихонов В.И., Харисов В.Н. — «Статистический анализ и синтез радиотехнических устройств и систем»
   Рассматривает статистические методы обработки сигналов, включая критерии оптимальности, связанные с теорией информации (энтропия, информация по Фишеру).

Упоминаются задачи оценки параметров сигналов, где используются подходы, близкие к колмогоровской сложности (минимизация избыточности).

2. Колмогоров А.Н. — «Теория информации и теория алгоритмов»
   Сборник работ самого Колмогорова, где вводятся понятия алгоритмической сложности и энтропии.

Эти концепции применяются в обработке сигналов для оценки информационной ёмкости сигналов, сжатия данных и подавления шумов.

3. Гуляев Ю.В., Тихонов В.И. — «Статистическая радиофизика»
   Анализ сигналов в контексте их информационной структуры.

Рассматривается связь между теорией информации (Шеннон, Колмогоров) и методами фильтрации, обнаружения сигналов на фоне шумов.

4. Фомин Я.А. — «Теория информации в радиотехнике»
   Прямое пересечение двух дисциплин: теория информации Шеннона и её приложения к передаче и обработке сигналов.

Обсуждаются пропускная способность каналов, кодирование, минимизация потерь информации при обработке.

5. Васин В.В., Еремин Л.В. — «Адаптивная обработка сигналов»
   Адаптивные алгоритмы (например, LMS, RLS) анализируются через призму информационной эффективности.

Упоминаются критерии оптимизации, связанные с энтропией и теорией принятия решений.

6. Дьяконов В.П. — «Вейвлеты. От теории к практике»
   Применение вейвлет-преобразований для сжатия сигналов — задача, тесно связанная с теорией информации (устранение избыточности).

Использование энтропийных метрик для оценки качества сжатия.

7. Пинскер М.С. — «Информация и информационная устойчивость систем»
   Классическая работа по теории информации, включая приложения к устойчивости систем обработки сигналов к шумам и искажениям.

Рассматриваются пределы передачи информации через каналы с помехами.

8. Ширяев А.Н. — «Вероятность»
   Учебник по теории вероятностей, включающий разделы по энтропии и информации Колмогорова.

Основы применяются в задачах статистической обработки сигналов (например, байесовские методы).

Связь с Колмогоровым
Колмогоровская сложность (алгоритмическая теория информации) используется в задачах:

Сжатия данных — оценка минимальной длины описания сигнала.

Классификации сигналов — анализ их структурной сложности.

Подавления шумов — разделение информационной и шумовой компонент.

В работах русских авторов (например, Тихонов, Гуляев) эти идеи не всегда явно упоминаются, но лежат в основе методов оптимизации и анализа сигналов.

Совет
Для углубленного изучения пересечения этих областей ищите:

Монографии по статистической радиофизике и оптимальной фильтрации.

Работы школы Колмогорова, связанные с алгоритмической теорией информации.

Статьи в журналах «Радиотехника и электроника», «Автометрия» (разделы по обработке сигналов).

Если нужны конкретные примеры алгоритмов или задач, уточните направление (сжатие, фильтрация, классификация)!

[iprst]

Более-менее внятный наброс по существу

Пересечения теории обработки сигналов с теорией информации (Клод Шеннон, Андрей Колмогоров) и теорией катастроф (Владимир Арнольд, Рене Том) лежат в области математического моделирования, анализа сложных систем и описания критических изменений. Вот ключевые точки соприкосновения:

1. Теория информации и обработка сигналов
   Колмогоров внес фундаментальный вклад в обе области:

Энтропия и сложность сигналов:
Колмогоровская энтропия (метрическая энтропия динамических систем) используется для анализа хаотических сигналов и оценки их информационной сложности.
Пример: анализ шумов, сжатие данных (алгоритмы, основанные на энтропийных оценках).

Алгоритмическая теория информации (Колмогоровская сложность):
Минимальный размер описания сигнала — ключевая идея для сжатия без потерь и оценки информационной ёмкости каналов связи.
Пример: оптимальное кодирование речевых или видео-сигналов.

Теория передачи информации:
Пересечение с задачами фильтрации сигналов (например, выделение полезного сигнала из шума при заданной пропускной способности канала).

2. Теория катастроф и обработка сигналов
   Арнольд развивал теорию особенностей (катастроф) — раздел математики, изучающий скачкообразные изменения в системах:

Бифуркации в нелинейных системах:
Моделирование резких изменений в сигналах (например, переход от периодических колебаний к хаосу в нелинейных цепях).
Пример: анализ переходных процессов в радиотехнических системах, нейросетях.

Особенности сигналов:
Теория катастроф описывает точки, где малые изменения параметров приводят к качественным скачкам.
Пример: распознавание "переломов" в сигналах (разрывы, всплески), обработка изображений (детекция границ как особенностей).

Фазовые переходы в системах связи:
Моделирование критических режимов, например, коллапс синхронизации в сетях связи или переход от устойчивости к неустойчивости.

3. Общие концепции
   Оптимальные решения в условиях неопределенности:
   Теория информации (пределы Шеннона) задает границы возможного при передаче сигналов, а теория катастроф помогает моделировать критические точки, где эти пределы нарушаются.

Синтез методов:

Использование энтропийных критериев (из теории информации) для проектирования фильтров.

Применение бифуркационного анализа (теория катастроф) для прогнозирования сбоев в системах обработки сигналов.

Примеры работ и приложений
Колмогоров и Арнольд:

Колмогоровские спектры турбулентности (моделирование случайных процессов) применяются в анализе шумов.

Арнольдовская классификация особенностей гладких отображений используется в алгоритмах распознавания образов (например, классификация сигналов ЭКГ).

Теория катастроф в обработке изображений:
Моделирование "катастроф" как резких изменений яркости или текстуры (распознавание аномалий).

Информация и шум:
Теорема Шеннона-Котельникова о дискретизации связывает частоту Найквиста с информационной ёмкостью сигнала — прямое пересечение с ЦОС.

Заключение
Эти теории дополняют друг друга:

Теория информации дает инструменты для работы с данными (сжатие, передача).

Теория катастроф помогает описывать критические состояния систем, что важно для прогнозирования и управления.

Колмогоров и Арнольд заложили математическую базу, без которой современная обработка сигналов (особенно в нелинейных и хаотических системах) была бы невозможна.

Для углубленного изучения:

Колмогоров А.Н., «Теория информации и теория алгоритмов».

Арнольд В.И., «Теория катастроф».

Статьи по применению особенностей в обработке сигналов (напр., S. Mallat, «Wavelet Tour of Signal Processing»).

[iprst]

Из текущих анекдотов.

Докер отказался запускаться и отдал ошибку, после рестарта сказал «нужно обновить wsl до более новой версии». Перезапустил wsl, она перестала откликаться на команды wsl с формулировкой:

Доступ к этому файлу из системы отсутствует

Ну, обновляю wsl, хорошо. Обновление скачивается, установщик крутит проценты, далее нет ответа. Обновлённый вариант установлен, но на команды в шелле не отвечает. Хелп микрософта утверждает, что нужно просто удалить старый wsl и всё должно заработать. Удалил, обновление всё равно не отвечает на команды. Затем я захожу на диск, где хранится образ библиотеки — а образа нет.

(с) в журнале ералаш.

[audetv]

Да, уж. Неприятность. Эти инструкции, они почти всегда непонятны. За это и не люблю wsl, сложно данные перносить, по сути всегда надо делать копию всей wsl на диск по интсрукции, а отом после покючать заного. импортирвоать. Я так перносил на другой коипьютер и на другую ситему полсе преустановки, но всегда возня долгая.

Мы как то раньше проводили тесты с дисками, которые в wsl, замеряли скорость и т.д. Внутри и проброшены из обычной системы. Вот похоже надо всегда данные разны БД держать в таких папках, не внутри wsl, а снаружи, тогда проще восстанавливать, грохнул весь wsl, контейнеры скачаются заного, а данные остались на дисках.

Данные БД тоже потерлись или были проброшены на диск?

[iprst]

Все данные были на диске, но копия файлов сохранена на стареньком не подключенном hdd. Пока wsl не восстанавливается в принципе, ухищрения не помогают. Возможно новая версия библиотеки появится раньше восстановления wsl.

[audetv]

Потестировать наработки можно здесь: https://gmtx.ru

[iprst]

Пересутановил wsl. Поиском было установлено, что аналогичная моей проблема не единичная, в сети крайне много таких запросов, при этом во многих случаях кто-то врывается в дискуссию, диктует решение, которое работает для 10-20% случаев, ему ставят лайки, и далее начинается всё сначала — проблему большинства не решает. Таких «решений» мне встретилось около десятка, но окончательное закрытие вопроса пришлось искать самостотельно вручную. В общих проблемах MS писать не буду, здесь отмечу для наших. Если при попытке воспользоваться из какого-либо терминала приходит сообщение «Доступ к этому файлу из системы отсутствует», особенно при попытке, например, вызвать --help или --install , а то и просто посмотреть какие убунты установлены или ещё чего (в общем — не работают вообще никакие программы wsl и кажется невозможно из терминала понять, оно вообще установлено или нет), а также после переустановки вручную подсистемы линукс из распространяемого официального msi и даже после установки файла убунты из образа appbundle микрософта — в общем, если «вообще ничего не работает», делать нужно следующее.

Найти системный файл hosts, очистить его от всего (на время, например сделать копию), и запустить стандартную установку из командной строки, повершелла или другого терминала. Всё должно заработать как по маслу. Насколько я понял, новый установщик wsl более основательно перепривязали к msstore и требуется весь доступ к серверам MS, даже если устанавливается версия wsl вне магазина. При этом докер отказывался запускаться без обновления wsl.