что то тут затихло.
дядьки тетьки, настолько проход класный на 28 МГц, решил запечатлить.

I/Q http://doris.kiev.ua/RS/FREQ/IQ/27500_16112011.wav

Ну и то же самое только в вещественном http://doris.kiev.ua/RS/FREQ/IQ/27500_16112011.wav.con.wav

Кстати интересно кто же переворачивает спектр?, железки или конвертер, может что я забыл нажать в конвертере IQ.exe..

RadioKoteg
что то тут затихло.
Да, затихло, я с масштабом и линейками завис, без них это просто красивая картинка. С Вашего файла получаются вот такие: http://files.mail.ru/D9FP9T (64 метра jpg).
Красиво, настолько, что мешает работать :) Исходник был 512 метров. Все идет очень медленно, файлы огромные, а терять ничего нельзя.

255 МБ http://doris.kiev.ua/RS/FREQ/IQ/17112011_topol_000_con.wav Центр на 27500 кГц. В сигнале присутствует сигнал с большим уровнем, уровень шума эфира около 1.6 мкВ на дБ, уровень шума приемника -9 дБ на мкВ. Это на вопрос чего так слабы по уровню записано. Макс уровень 105 дБ на мкВ. А вот это максимальный уровень который держит ЦАП http://doris.kiev.ua/RS/FREQ/IQ/123_000.wav.con.wav , разница между тем и этим динамический диапазон девайса.

RadioKoteg
Сигнал-то с большим уровнем есть, но на записи все равно, это не более 8-ми бит.
Второй (с максимальным уровнем) не скачивается. Возможно, что реальное разрешение АЦП-ля 8 бит.
В конце у всех записей есть "хвост", с уровнем, близким к максимальному для 16-ти бит. Перед обработкой, хвост надо отрезать, а амплитуду поднимать, раз в 100.
Если не этот хвост, можно сделать АРУ, ничего не портящее, а так только смотреть сигнал и резать вручную.
Без "хвоста" сигнал можно совершенно спокойно сохранять, как 8 бит (после нормализации). Объем данных уменьшится в 2 раза, а информация не потеряется, все останется на своих местах.

з.ы.
Если-бы разработчики сей железяки, догадались поставить нормализацию на выходе, докопаться до истины было бы куда сложней. Имхо, такой-же ход, как и с большинством звуковых карт, но там правда спрятана гораздо лучше. А несчастным пользователям остается только гонять холостой трафик и смотреть на децибелы :(
Много появилось в последнее время децибелов этих, теперь и не понять, какие из них правильные.

Это я к тому, куда делся "теплый ламповый звук" - его сожрала коммерция :D

Programmist правописание солжрало, <-- , поставил пробел между запятой и ссылкой, все качается.
Еще раз ссылку http://doris.kiev.ua/RS/FREQ/IQ/123_000.wav.con.wav

RadioKoteg
Вот это - другое дело, может быть в разных режимах, на выходе получается разное разрешение.
Хвост все равно есть (последние 16 отсчетов), но здесь надо разбираться, кто его делает, железка или конвертер.

з.ы.
Разобрался, конвертер делает, надо будет подправить, сейчас у меня тоже проблемы с началом и концом записи. Там не все гладко выходит, нужно добивать нулями.

Programmist В общем это выборки с LTC2206-14 - 14-Bit, 80Msps ADC.

Хвост все равно есть (последние 16 отсчетов) Хвост наверное от отсечения в адоб аудишин, так что на хвост не обращайте внимания. Вот оригинал в i/q http://doris.kiev.ua/RS/FREQ/IQ/123_000.wav

RadioKoteg
Ну да, понятно, там скорей всего так и есть, разные режимы дают разное разрешение, может быть и в прошивке дело.

Хвост наверное от отсечения в адоб аудишин
Не, хвост от конвертера, я проверил, в оригинале его нет. Просто так убрать его, наверно не получится, запись станет больше, на несколько отсчетов.

С конверсией из IQ я еще не разбирался, это совсем отдельная тема.
Наверно, там не все так просто, Mesh говорил, что качество разное может получаться на выходе.

качество разное может получаться на выходе

я его "софтом" конвертировал с I/Q в real.

Про него и говорю, другого-то нет. Края сигнала обрабатывать надо, а там не всегда все ровно выходит:


Увеличить

Второй день голову ломаю, чего на что там делить, чтобы все сошлось :)
Красная и зеленая зоны - это добивка нулями, иначе короткий сигнал не обработать, а кривые они, потому, что окно плавающее.
Кстати, на картинке, исходный сигналик размером всего 60 килобайт, а какая красота на выходе:
http://files.mail.ru/99UGRL (10 метров)
Это еще в формате RGB (24 бита), реальный расчет bmp 32 бита CYMK, ну а 64 бита точности оставим про запас.
Вот что значит настоящий спектрометр :)

з.ы.
Остальные картинки удалил, а то оно, конечно, красиво, да страница будет перегружена.

Возникла проблема, при вырезании куска спектра:


Увеличить
(на картинке - попытка обнуления участка с белым шумом)
Если делать все по науке - победить не могу. Используется только FFT, фильтры отсутствуют и для данного случая не годятся. Кто знает, решена ли эта задача в полной версии SA? Известно только то, что в Куле решена, но не до конца. Называется это безобразие эффектом Гиббса. Здесь это один из ключевых моментов, от которого, в дальнейшем, будет зависеть качество работы редактора.

з.ы.
Фильтры Кула работают вот так:


Увеличить
Эффект до конца не побежден, но практически мало заметен. Adobe Audition здесь рассматривать смысла нет, там вообще ничего не работает, а если и работает, то лучше бы его не было :)

Programmist

Каким образом используется FFT? Наука откуда взята, приведите источник?

petr0v
Наука откуда взята
Да вот в этом все дело, что получается так, что после преобразования спектр трогать нельзя, обратно не соберешь. Тем не менее, это как-то реализовано, в том же Куле. Работает чисто и не портит АЧХ. Не знаю, может быть там есть дополнительные фильтры. В связке с FFT они работают не плохо, но результат далек от идеала. Хорошо настраиваются только частные случаи, а в широких пределах возникают непредвиденные ситуации. Все фильтры ведут себя не адекватно и могут дать "выброс", в самом неожиданном месте.
Строить дополнительные "заборы", включающиеся при обнаружении аномалий не хочется, это только добавит неприятностей.
Может быть и так, что у этой задачи вообще нет нормального решения :(

В I/Q конвертере тоже этот злосчастный ФНЧ стоит, поэтому качество может быть различным, в зависимости от исходного сигнала.
Может я и ошибаюсь, но кажется, что при нормальной реализации, любой сигнал можно крутить до бесконечности, из I/Q в реал и обратно, при этом ничего не теряя.
Особенно красиво эта процедура выглядит на экране, когда с одной стороны что-то изменилось, а с другой - все осталось на своих местах :)

Programmist

Не факт что в куле или в SA не используется обычный полосовой фильтр рассчитываемый на выбранную полосу.

Эта задача имеет решение, не поленитесь поставить матлаб можно разобрать.

В I/Q конвертере тоже этот злосчастный ФНЧ стоит, поэтому качество может быть различным, в зависимости от исходного сигнала.

FFT это такой же конвертер, только сразу на много полос, с плохим ФНЧ скользящее среднее и децимацией не по Котельникову, если трогать спектр то появляются спектральные наложения. Нужно всего лишь использовать ФНЧ прототип, который при выбранной децимации даёт приемлемый уровень наложений и суммарная АЧХ банка фильтров равна единице.

Может я и ошибаюсь, но кажется, что при нормальной реализации, любой сигнал можно крутить до бесконечности, из I/Q в реал и обратно, при этом ничего не теряя.

Бесконечно не получится, но любой заданный уровень искажений преобразования туда-обратно можно обеспечить.

petr0v
Да оно понятно, спасибо, будет время - буду разбираться дальше.
Пока вот все на таком этапе:


Увеличить

Примерно посмотреть возможности программы можно здесь: http://www.radioscanner.ru/uploader/2011/ceplusdemo01.rar

Это далеко не релиз, а какой-то этап создания. На скорую руку выбросил то, что не работает и оставил то, что работает. В принципе, можно сносить спектр, умножив данные на частоту, кнопочкой SIN и конвертировать из I/Q в реал (© Mesh). Работает только с 16-ти битной датой, файлы забрасываются на форму мышкой, причем любые, содержание будет отображено на спектре.
Для сноса спектра нужно включить Future Panel в Options, возможности увеличения позволяют разглядеть всех теток сразу.
Пока это только красивая смотрелка с фотоаппаратом, не более того. Кладу здесь потому, что не знаю, когда опять появится возможность к ней вернуться.
*Размер выходного битмапа, во избежание неприятностей, ограничен в 500 Мегабайт.
*Antialiasing картинки тормозит работу системы, без необходимости его лучше не включать.

з.ы.
Получилось так, что все функции выведены в отдельный модуль и для каждого типа даты (по количеству бит), их нужно будет просто размножить, изменив формат данных. Пока до конца не отлажен 16-ти битный модуль, размножать смысла нет.
В более ранних версиях уже был интерпретатор форматов, вот такой:


Увеличить
В принципе, можно его вернуть обратно, если оно надо кому.

принципе, можно сносить спектр, умножив данные на частоту, кнопочкой SIN и конвертировать из I/Q в реал (© Mesh). Работает только с 16-ти битной датой, файлы забрасываются на форму мышкой, причем любые, содержание будет отображено на спектре.
.
Я обнаружил зеркалку при таких манипуляциях.

RadioKoteg
Я обнаружил зеркалку при таких манипуляциях.
Есть такое дело, там так все закручивает, что сразу не понять, что куда. Бывает и наоборот, например тот "блохастый" файл, путем нехитрых манипуляций с кнопками, начисто от "блох" можно избавить и вернуть в первозданный вид. В общем, игрушка такая была в детстве, калейдоскоп называется :)
А так прикольная, имхо штучка получается, спасибо за идею.
Зеркалка, наверно и должна быть, там же идет простое умножение данных на синус или косинус, как в приемнике, а фильтров никаких нет. Полноценно работать можно в связке с Кулом. Того уровня, как там, мне достичь, похоже не дано, а делать хуже не хочется.
Для работы с реальными записями нужна тренировка, потом получается. Тот файл, который Sinus для примера давал, восстанавливается элементарно, а тетки сидят в FM, демодулятора нет.
Интересно то, что путем "разворотов" и интерпретаций каналов удалось восстановить много файлов, записанных на чем попало и искореженных в других редакторах.
Будет время, сделаю к нему нормальную линейку и вставлялку - вырезалку, хотя бы для временнОй области.
Резать в частотной, похоже, никто нормально не умеет, почему я и спросил, решена эта проблема в SA или нет. FreeWare версия дает такую же картину, как и у меня, что представлено выше.
Есть у меня один фокус с FFT, для работы в реальном времени, но это больше туман, который похож на обман :) Кул в этом смысле тоже не идеал и спотыкается в неожиданных местах.

з.ы.
Пока знаю только одно, что без разрывное FT, выполняет нужные операции идеально, но реализовать такую функцию на практике не могу, не лезет в память, да и еще там куча проблем.

Возникла проблема, при вырезании куска спектра
...там так все закручивает, что сразу не понять, что куда...

Programmist, из Вашего описания проблемы не понятно, в чём проблема и как она нажита. Вообще, серьёзно, - предлагаю отдельную темку создать (здесь, в "Прочее", надо только названье придумать не сильно обязывающее, чтобы оффтоп в любом случае не получался)), где мы могли бы от печки и во всех мелочах разобраться с FFT, фильтрацией, децимацией, демодуляцией... и мало ли ещё чего всплывёт у кого-нить... Спокойную такую темку, для самообразования как пионЭров так и пенсионЭров...

Главное - двигаться от печки, и малыми шагами, добиваясь полной ясности. Не валить всё в кучу. Например, пока что я при всём желании не могу понять, что за программу Вы создаёте - сигналы обрабатывать или красивые картинки строить? И на хрена кому картинки объёмом 500 мб?!! И зачем вырезать из шума какой-то участок? И зачем конвертить из I/Q в реал, если конечная цель - снова заиметь сигнал в формате I/Q, и научиться его демодулировать именно из I/Q?

Кроме того, мне кажется, надо чётко различать FFT (то бишь обычное дискретное Пр-е Фурье) и SFT - кратковременное (оно же оконное) дискретное пр-е Фурье. Второе плохо подходит для осмысленной работы с сигналами (в нём нередко не возможно выполнить обратное пр-е), оно только для картинок годится - чтобы визуализовать присутствие сигналов одновременно и на шкале времени и на шкале частоты. Т.е. это не есть работа чисто во временной области или чисто в частотной, это ни кофе ни какао... Все эти "разноцветнтые кибитки" - как раз результат SFT.

Истинное же FFT полностью преобразует сразу весь временной сигнал в амплитудно-фазо-частотные данные. И если обрабатывать эти данные (т.е. сигнал строго в частотной области), то никаких там "туманов, похожих на обманов" нет и быть не может. Потому что чудес не бывает. И при том, частотное представление равноценно временному, поскольку существует точное пр-е туда-обратно. Значит, всего, чего можно добиться во временной области, того же можно добиться и в частотной.

Ну, лан, эт моё ворчанье пенсионЭра...)) А конкретный план вот какой - (см. пост ниже :))

Sinus
Вообще, серьёзно, - предлагаю отдельную темку создать
Если не сидится с бескислородной медью в одном флаконе, то вот.
Название темы уж сами сочиняйте.

Sinus Например, пока что я при всём желании не могу понять, что за программу Вы создаёте - сигналы обрабатывать или красивые картинки строить? И на хрена кому картинки объёмом 500 мб?!! Я уж давно нить потерял что делается и зачем. :)

БЕГЕМОТ "Данке шон". Или по нашему "дякую". Спасибо в общем. Поддержим дух и силу воли программиста. Programmist Вы согласны?

Я уж давно нить потерял что делается и зачем. :)
ну человек само обучается. Неужели это дефект общества?

БЕГЕМОТ, спасибо огромное!!! Отлично!

Programmistу и всем.
Так вот, план: для начала - не париться с хитроумными сигналами типа полётов бабочек, шумов, пересекающихся чирпов и с т.п. неразберихой, а создать ПРОСТЕЙШИЕ сигналы, и на таких вот кошечках тренироваться. Вот, например, папка с сигналом в виде суммы 5 синусоид строго в бинах FFT; там в папке есть и инфо-файл с подробным описанием сигнала, и графики, и результат фильтрации методом FFT:

http://narod.ru/disk/32980484001/FFT_test_1__29_11_2011.zip.html

Вот, для начала, попробуйте, кто пожелает, отфильтровать из 5 заданных синусоид одну, две, три, любыми известными Вам способами, и посмотрим у кого что как и почему получается. Пока не разберёмся в простом, бесполезняк пробивать сложное...

Вскоре выставлю подобный же тест-сигнал, но с частотами "мимо бинов", т.е. с растеканием спектра. Затем посмотрим как децимация порождает частоты "мимо бинов" и приводит к растеканию. Затем надо будет синтезировать свои, простейшие сигналы с модуляцией FM, AM, SSB, научиться их представлять в формате I/Q (как узкополосные поотдельности, так и широкополосные - все вместе сразу). И опробовать разные алгоритмы их демодуляции. И дать RadiuoKotegу их послухать в своей SDR-софтине - то ли у нас получается, что надо.

И вот, лишь когда в наших головах наступит полная алгоритмическая ясность (я имею ввиду те головы, в коих ещё нет ясности; наши корифеи пусть не обижаются :), тогда появится смысл оформить результаты в виде "красивой" высококлассной пользовательски-удобной программы (да, и бесплатной :) А сейчас рано вплотную заниматься "разноцветными кибитками", да ещё размерами под 500 мб, пока не рассеялись "туманы, похожие на обманы".

Точнее говоря, визуализирующая прога нужна и сейчас, но в применении к заведомо понятным тест-сигналам; параллельно надо выходные данные выдавать в виде числовых массивов в txt-файлах - тогда мы сможем сравнивать результаты, строя общепринятые понятные графики. Имхо ессно :)

Да, всё правильно. :-) Самое главное это упорно делать вид, что ничего не существует, что нет ни охренительного количества тест сигналиков в базе сайта как простейших так и сложнейших, что нет ни каких I/Q записей на форуме, что нет ну ни каких визуализирующая прога нужна и сейчас прог, как платных, так и бесплатных, так и ворованых, что б прочекить то ли у нас получается, что надо. . Эт главное!. Главное делать что-нить, а чекят пусть другие. :-) параллельно надо выходные данные выдавать в виде числовых массивов в txt-файлах Вот убейте не пойму зачем? Затем что б что? Что б перегнать всё это в отсчёты? Чем ваф то не угодил или какой типовой стандарт, в котором выдают дату 99 и 9 в периоде процев нормал железа и софта.

тогда мы сможем сравнивать результаты. Щас за руки кто держит? :-) Уже обсравниваться можно было до упаду.

Имхо тут сами не знают чего делают. Анализер? Редактор? Конвертор? Фотошоп? Ресемлер? Или делают вид, что оченно нужна визуализирующая прога нужна и сейчас но вот ж горе какое, нет их оказывается этих прог визуализирующих


Лана, имхо всё это, но так оно прикольно конечно :-)

Мне вспомнились времена Спектрумов, когда народ всякие демки колбасил в 64K на асме, просто так по приколу... Тут нечто похожее имхо :)

Mesh
но так оно прикольно конечно :-)

Ну, дык вовсю стараюсь Вас повеселить ;) Рад, что удаётся.

Насчёт базы сигналов - наверное я плохо искал, но с первого взгляда я не нашёл там себе для теста ни обычной FM, ни обычной AM, ни обычной SSB - с модуляцией человечьим голосом, а не с импульсной манипуляцией.

А даже если бы и нашёл их там, то как я узнАю, хорошо ли я сумел их демодулировать? А вот совсем будет другое дело, если:

1) сначала отдельно записать НЧ-вав с модулирующим голосовым сигналом (чтобы прослушать в итоге узнаваемую речь, а не "бульканье").

2) Затем применить этот голос в разных видах модуляции, т.е. - создать высокочастотные вав-файлы с одним и тем же модулирующим сигналом, но - один c FM (или даже несколько - с разной девиацией) другой с AM, третий с SSB, интересно ещё и с DSB, и с частично подавленной несущей.

Всё это можно делать кто как умеет или хочет научиться - кто в матлабе, кто в маткаде, кто на языках программирования.

3) Написать алгоритмы (опять же в той среде, какую кто любит или изучает) для демодуляции. И просто послушать - что получается, сравнивая демодулированный сигнал с исходным НЧ-голосовым сигналом.

4) Всё то же, но в формате I/Q - чтобы сравнить самопальные алгоритмы демодуляции с уже известными SDR, и чтобы на своём самопале в дальнейшем слушать чужие I/Q-записи.

Да, может я уже впадаю в детство, но мне кажется, что от этой деятельности можно получить такой же несравненный кайф, какой многие из нас испытывали в юности, паяя сначала детекторный приёмник, потом пр. прямого усиления, потом первый свой супергетеродин, поляковские пр-ки УКВ-ФАПЧ и пр-ки прямого пр. и т.д.

Во всяком случае, не вижу, чем такие спектральные игры для не профессиональных любителей радиотехники хуже любого другого хобби - футбола, рыбалки, или того же всенародно любимого анализа сигналов (с импульной манипуляцией, да ещё и зашифрованных, т.е. тоже по сути для большинства народа бесполезных ;).

Mesh, вот дал я Вам подробнейший ответ, из чувства уважения. Но, имхо, Вы и сами до всего того же уже c лёгкостью догадались :) Так что, присоединяйтесь, когда надоест топтать кнопки SA.

зы. DVE, ну вот, точно. Это хобби. (Кстати, ZX-спектрум тоже паял, хотя купить можно было, и ещё свою собственячью разработал 64К-ЭВМ, отталкиваясь от Ориона в Радио; там у меня помимо вывода на дисплей была предусмотрена работа с цифровым индикатором от калькулятора, встроенным прямо в клавиатуру. И для этого пришлось написать полностью свою "BIOS", причём сделал это не на асме (коего для моей железки не существовало), а прямо в машинных кодах нашего процессора 580ИК80. Было очень интересно! Хобби... ;))

Sinus вот дал я Вам подробнейший ответ, Да ладно. Вы не ответили ни на один мой вопрос между прочим. :-) А за меня как бы задали какие вам нравятся и ответили на них. Я не говорил, что всё что тут делается или обсуждается плохо, или полезно или бесполезно. Лана, это типово в таких дискусиях.

Просто мне казалось что кто-то хотел сделать вещь. Я пон, никто ничего делать не собирается, поиграют в игры и на том успокоятся. Тож дело. :-)

Mesh
Просто мне казалось что кто-то хотел сделать вещь

Желание сделать вещь живёт, вероятно, в каждом из нас. Но Вы ведь прекрасно понимаете, что нормальный чел не будет здесь бить себя в грудь и клятвенно обещать сделать вещь. Хз что получится. И ведь на 100% не исключено, что в итоге кто-нить и сделает-таки вещь. Как знать, может это, кстати, ненароком сделаете Вы, раз уж так близко принимаете всё к сердцу...