subject: Привет в новом семестре
13.02.2020 05:16
vit01 (mira, 1)
Небольшой информативный пост на начало учёбы.
## Картинка для привлечения внимания
Верхняя набережная в Иркутске
https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/FTnNNM63GHUPrRo…
## Начало учёбы
Проблема с зачёткой решилась, на кафедре теорфиза меня спасли, и ничего переписывать не надо =)
А вот какие у нас новые предметы
Особо сложные:
+ Термодинамика и статистическая физика
+ Физика сплошных сред
+ Теория рассеяния
+ Введение в квантовую теорию поля
Остальные предметы:
+ Физика ядра и элементарных частиц
+ Физика плазмы
+ Основы сетевых технологий и методы обработки сигналов
+ Функциональный анализ
+ Теория групп (продолжается с прошлого семестра)
+ Ещё парочка практикумов и лабораторных работ
## Лабораторные работы
Ой, что у нас тут? А это установка для получения и измерения вакуума. Говорят, где-то здесь есть установка, где можно получить высокоионизированную плазму на короткое время.
https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/AbBAclDJ2KkQxqF…
## Данные и их скачивание
С проблемой скачивания из JSOC (см. предыдущий пост) мне помогли разобраться. Оказалось, что в каждый запрос нужно добавлять условие на "quality > 0". Тем самым фильтруются битые данные. Хорошие люди уже подготовили патчи и сделали Pull Request. То есть уже можно обойти проблему и что-то скачать.
Для VSO проблема со скачиванием так пока и не разрешилась, хотя разработчики попытались чё-то накодить и разрыть суть проблемы. Но это не страшно, потому что картинки для SOHO MDI, оказывается, есть не только в хранилище VSO, но и в JSOC, а оттуда скачивание теперь хорошо работает.
Большую часть картинок для MDI я уже скачал, как для событий с 100 000 кельвин, так и для 29 событий 150 000 кельвин.
Из планов на будущее:
1. Построить видео на основе картинок Нобеямы для 80 событий от 100 000 до 150 000 кельвин
- Для тех событий, где данные с Нобеямы не скачались, докачать и досинтезировать вручную
2. Докачать магнитограммы MDI, особо обратить внимание на 2003 год из списка 29 событий
3. Скачать магнитограммы Hinode для событий 100 000 кельвин
4. Записать в классификацию данные с MDI, для событий 100 000 кельвин сделать отдельную таблицу и начать заполнять
## Проверка на солнечную активность
Когда я делал фильтрацию по 100 000 кельвин, то заметил, что для некоторых годов событий очень много, а для некоторых, наоборот, мало или совсем нет. Решил, что имеет смысл сделать проверку на вшивость, усомниться в работе алгоритма. Вдруг он работает неадекватно, или в датасете для корреляционных кривых отсутствуют некоторые важные фрагменты данных.
Нанёс на график то, что найдено моей программкой, и нашёл на Википедии данные [по солнечной цикличности]( https://ru.wikipedia.org/wiki/%D0%A1%D0%BE%D0%BB%D0%BD%D0%B5%D1%87%D0… ), основанные на количестве солнечных пятен. Судя по данным с Вики, минимум активности как раз приходится на период, когда у меня ничего не найдено, но я всё равно решил сделать график, на котором видно полную картину.
https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/sP2b22eFFe6S9W8…
**И чему здесь удивляться?** Конечно, люди, кто хоть сколько-нибудь читали про Солнце, знают, что чем больше солнечных пятен, тем больше вспышек, и в периоды высокой солнечной активности будет больше активных областей. А значит - больше высокоэнергетических событий. Здравый смысл нам прямо говорит, что всё должно быть именно так.
Мораль здесь в том, что **не надо стесняться делать защиту от дурака** и проверять очевидные факты. Ведь вдруг ваша программа насчитала хрень, такое тоже может быть. Зато теперь можно продолжать высчитывать то, что нужно, и меньше переживать.
Этот пост в блоге: https://blog.alicorn.tk/posts/new-semester.html
--------------------------------------------------------------------------------
subject: Re: Привет в новом семестре
17.02.2020 07:54
Andrew Lobanov (tavern,1) => nLPRn4kXzGlMU80Dszkz
Вот, кстати, вопрос. Что-то по анализу изображений и поиску аномалий можешь подсказать? Для самых маленьких, поверхностно. Можно с примерами на питонах.
--------------------------------------------------------------------------------
subject: Re: Привет в новом семестре
17.02.2020 18:20
vit01 (mira, 1) => LCiVJSRL5xWgTjLttrYC
AL> Вот, кстати, вопрос. Что-то по анализу изображений и поиску аномалий можешь подсказать? Для самых маленьких, поверхностно. Можно с примерами на питонах
Тут всё зависит от того, какая практическая задача перед тобой стоит. Как из моих постов видишь, я ограничиваюсь лишь самыми простенькими методами вроде фильтрации по порогу и начального уровня статистикой.
Если нужно искать какие-то конкретные объекты на изображениях вроде номеров машин или котиков, то тут OpenCV и нейросети (сам в этом не спец).
Если искать изменения по яркостям, смотреть шумы или помехи, то тут будет достаточно опять же обычной статистики: построить гистограмму яркостей компонент, сделать преобразование Фурье и глянуть уже пространственные частоты. Можно попутно сделать свёртку и фильтрацию какую-нибудь (в своих постах упоминал медианный фильтр).
Вот мой научрук использует вейвлет-анализ для видеозаписей, чтобы находить на корональных петлях на Солнце колебания, не заметные невооружённому глазу. И по частотам этих колебаний можно выяснить величину магнитного поля. Надо будет как-нибудь найти или попросить у него демку, это очень красиво и увлекательно выглядит
Когда сам толком не шарю, то трудно что-то посоветовать годного :)
+++ Отправлено через IDEC Mobile
+++ GNU/Linux, Android, physics, MLP:FIM
--------------------------------------------------------------------------------