Я, похоже, сильно ошибся) я использовал режим буферизации в памяти ядра - один канал dma контроллера работал на заполнение элемента циклического буфера, второй - на копирование элемента в user space при операции чтения устройства. Драйвер по прерыванию контроллера апдейтил указатели чтения записи.
А год-два назад проглядел какую то статью здесь про использовпние dma в user space и в памяти осталось, что это уже работает. Но то что работает это доступ к контроллеру из user space, а это не очень перспективно, имхо.
Эээ... давайте я свои представления про циклический буфер выскажу сначала) Что это и для чего нужно - буферизация данных, когда, допустим, ввод идёт периодичный, а считывание и обработка батчами - то есть обработка может быть быстрой, но периодичность хромает. Простейшый случай - просто двухбуферная схема, когда ввод идёт в одну область памяти, а вторая в это время обрабатывается и потом освобождается. Когда не хватает детерминированности поведения, 2 буфера превращаются в несколько, а если могут возникнуть проблемы с фрагментацией памяти, то это превращается в буфер кратно превышающий фрагмент данных, и поскольку он имеет указатели чтения и записи, то их цикличность это способ имплементации такого буфера в заранее аллоцированой памяти. То, что циклический буфер представляют списком это точно чей то бред)) В здравом уме это точно незачем, имхо.
У вас есть поток данных блоками. То есть кто то пишет в пустой блок, а процесс обработки считывает уже доступные данные из записанного блока. Считал-обработал - освободил. Нужен снапшот - сделал 2 memcpy в другое место либо необработанного содержимого, либо от текущего до записываемого - как надо. И там сам процессор разберётся как ему из одного пространства памяти скопировать в другое - не будет там ещё и ос с mmap памятью болтаться в промежутке.
ЕСли я правильно понимаю вашу задачу, то у вас есть кадры, идущие потоком. Идет обработка кадров, и в какой то момент что то срабатывает, и вам нужно отдельно обработать кадры предыстории и те кадры, которые уже в буфере, но ещё не обработаны. Вы делаете снимок буфера, а поскольку он циклический, то надо в новом буфере обеспечить упорядоченность. Ну так и зачем этот подход с mmap? Правда не понимаю. Все равно всё сводится к тому, насколько поток входных данных затирает старые данные и насколько обработка освобождает буфер. В производительной системе никаких аллокаций памяти вообще не должно происходить - только статика
Да, ошибался, не дочитал) Всё равно не очень понимаю смысл использования mmap - у вас же всё равно нет сплошной физической памяти, при доступе будет постоянная трансляция страниц. Что мешает просто реализовать самому адресную арифметику по модулю - где надо? Если задача быстро сделать снапшот того, что уже в памяти, то самое эффективное это memcpy, пусть и в 2 этапа - перевычислить адреса это копейки по сравнению с доступом через отображение в память, что ваши тесты и подтверждают. Ну на С это напишите - всё равно же mmap хотите использовать
Я один раз видел, к чему приводят идеи "сделать красиво")) На достаточно дохлой машине надо было считывать файл и блоками передавать его по сети. Формат - заголовок сколько то байт и массив short пара килобайт. Программа на c++ состояла из десятка классов, не помещающихся на пару экранов каждый - сначала открывался и парсился файл, потом создавался объект с объектом заголовком и объектом массивом, потом он сериализовался и побайтно засовывался в сокет. Выглядело это очень академично, но.. ну нельзя же так, если задачей является поток данных порядка 10 МБ сек))
То есть неудобство с границей плоского буфера вы заменили использованием кучи системных вызовов? И посчитали наносекунды.. а может тогда dma использовать для перемещения 2 блоков в выходной массив?
Почитайте про первый советский радиолокатор. И в русскоязычной литературе радиолокатор и радар - синонимы. Да и радар то не так давно пришел в терминологию
У меня Мегафон в деревне, агрегация включается на 1800+2100, но крайне редко и, как правило, когда включен список. Е ли интернет норм Мегафон всех сгоняет на 1800, и скорость падает до 6-10 Мбит, если его принудительно запретить, то включается 2100 на скорости 16-30.. зимой как то даже 60 видел. Тоже не очень полезной эта агрегация оказалась
Лет 30 назад такие же соображения высказывались про бистатические радиолокационные станции, однако сейчас они стали тоже bistatic radar. Там, конечно, на порядок сложнее обработка, и дальность они измеряют весьма странно по сравнению с импульсными, однако сейчас это тоже радары
Формально - можно, вопрос только в разрешающей способности, величина которой комната)
В общем я не очень вижу причины критики статьи из за слова радар в названии. Конечно "Система обнаружения присутствия на основе ..." было бы корректней, но wifi радар лаконичней и полнее описывает и принцип, и имплементацию, особенно для программистов и электронщиков
))) я раньше тоже так думал, пока к нам на полигон не привезли монтажницу из КБ - не красное и белое, конечно) Приехала красивая девушка - причёска, глазки, маникюр, подошла к стойке, достала плату, потом вытаскивает из сумочки кожаный такой аля маникюрный набор, открывает, а там в идеальном состоянии пинцеты, пара скальпелей, кусачки, самодельные щипчики для снятия изоляции (бритва на крокодиле, кто помнит), маленький пузырек с флюсом, смывка, кисточки, небольшой отсос для припоя - в общем ни у одного инженера разработчика я такого не видел. Ну и работала она конечно красиво всем этим
Мне вот страшно подумать, как отлаживать программу с мильоном курутин в разных местах кода) Если они нужны для ввода вывода это что теперь, везде где только можно будут торчать async await и обращения к разного рода интерфейсам?) Чем плох диспетчер ввода вывода, который по epool запускает по списку готовности операции ввода вывода последовательно или параллельно, и тем самым активирует обработку этих данных.
Пример может и не совсем удачный, но суть, мне кажется, ясна - нельзя смешивать в "последовательном" коде обработку данных и коммуникации. Ошибки одного будут лезть в другое, перформанс обработки и коммуникаций не тестируется, беда.. в общем корутины хороши в каких то местах, но хайп о них чрезмерен, имхо
За счет того, что скорость снижается до нуля, да) вы путаете кислое с горячим, имхо - способ организации физического канала связи и методы помехоустойчивого кодирования цифрового потока
Один обслуживатель окон пообещал найти и объяснить, что он имеет право мне звонить а я должен его по гарантии на окна принять) Но там операторы были непричём, там сотрудник ушёл из компании с базой
Я всегда спрашиваю рекламирующих мне какую тнить фигню про наличие у них моего согласия - они говорят что его не нужно, что номер они взяли из федеральной базы и теде.. А я им заявляю, что за звонок без моего согласия им по закону о рекламе ст 18.1 и 18.2 грозит штраф и турьма) Сразу прощаются
У нас кстати лет 5 или больше назад большую тройку поштрафовали за такие звонки
Claude ничего этого про меня не знал и практически сразу вывел на Artery AT32F435. Чип содержит Cortex-M4F на 288 МГц, имеет 1 МБ флеша, 384 КБ ОЗУ и корпус LQFP64. Совершенно непонятное для меня семейство, как будто клон STM32, но непонятно, насколько полный клон. Сам бы такое не выбрал
А вот интересно, не в Вашем теперешнем случае, а в принципе - можно ли "подмазать" эту Claudю для роста продаж?)))
Я, похоже, сильно ошибся) я использовал режим буферизации в памяти ядра - один канал dma контроллера работал на заполнение элемента циклического буфера, второй - на копирование элемента в user space при операции чтения устройства. Драйвер по прерыванию контроллера апдейтил указатели чтения записи.
А год-два назад проглядел какую то статью здесь про использовпние dma в user space и в памяти осталось, что это уже работает. Но то что работает это доступ к контроллеру из user space, а это не очень перспективно, имхо.
Прошу прощения за ввод в заблуждение)
Эээ... давайте я свои представления про циклический буфер выскажу сначала) Что это и для чего нужно - буферизация данных, когда, допустим, ввод идёт периодичный, а считывание и обработка батчами - то есть обработка может быть быстрой, но периодичность хромает. Простейшый случай - просто двухбуферная схема, когда ввод идёт в одну область памяти, а вторая в это время обрабатывается и потом освобождается. Когда не хватает детерминированности поведения, 2 буфера превращаются в несколько, а если могут возникнуть проблемы с фрагментацией памяти, то это превращается в буфер кратно превышающий фрагмент данных, и поскольку он имеет указатели чтения и записи, то их цикличность это способ имплементации такого буфера в заранее аллоцированой памяти. То, что циклический буфер представляют списком это точно чей то бред)) В здравом уме это точно незачем, имхо.
У вас есть поток данных блоками. То есть кто то пишет в пустой блок, а процесс обработки считывает уже доступные данные из записанного блока. Считал-обработал - освободил. Нужен снапшот - сделал 2 memcpy в другое место либо необработанного содержимого, либо от текущего до записываемого - как надо. И там сам процессор разберётся как ему из одного пространства памяти скопировать в другое - не будет там ещё и ос с mmap памятью болтаться в промежутке.
ЕСли я правильно понимаю вашу задачу, то у вас есть кадры, идущие потоком. Идет обработка кадров, и в какой то момент что то срабатывает, и вам нужно отдельно обработать кадры предыстории и те кадры, которые уже в буфере, но ещё не обработаны. Вы делаете снимок буфера, а поскольку он циклический, то надо в новом буфере обеспечить упорядоченность. Ну так и зачем этот подход с mmap? Правда не понимаю. Все равно всё сводится к тому, насколько поток входных данных затирает старые данные и насколько обработка освобождает буфер. В производительной системе никаких аллокаций памяти вообще не должно происходить - только статика
Да, ошибался, не дочитал) Всё равно не очень понимаю смысл использования mmap - у вас же всё равно нет сплошной физической памяти, при доступе будет постоянная трансляция страниц. Что мешает просто реализовать самому адресную арифметику по модулю - где надо? Если задача быстро сделать снапшот того, что уже в памяти, то самое эффективное это memcpy, пусть и в 2 этапа - перевычислить адреса это копейки по сравнению с доступом через отображение в память, что ваши тесты и подтверждают. Ну на С это напишите - всё равно же mmap хотите использовать
Я один раз видел, к чему приводят идеи "сделать красиво")) На достаточно дохлой машине надо было считывать файл и блоками передавать его по сети. Формат - заголовок сколько то байт и массив short пара килобайт. Программа на c++ состояла из десятка классов, не помещающихся на пару экранов каждый - сначала открывался и парсился файл, потом создавался объект с объектом заголовком и объектом массивом, потом он сериализовался и побайтно засовывался в сокет. Выглядело это очень академично, но.. ну нельзя же так, если задачей является поток данных порядка 10 МБ сек))
А разве нельзя? Какие то вроде драйверы есть любительские - я давно ничего такого не программировал
То есть неудобство с границей плоского буфера вы заменили использованием кучи системных вызовов? И посчитали наносекунды.. а может тогда dma использовать для перемещения 2 блоков в выходной массив?
Почитайте про первый советский радиолокатор. И в русскоязычной литературе радиолокатор и радар - синонимы. Да и радар то не так давно пришел в терминологию
У меня Мегафон в деревне, агрегация включается на 1800+2100, но крайне редко и, как правило, когда включен список. Е ли интернет норм Мегафон всех сгоняет на 1800, и скорость падает до 6-10 Мбит, если его принудительно запретить, то включается 2100 на скорости 16-30.. зимой как то даже 60 видел. Тоже не очень полезной эта агрегация оказалась
Прикольно, но при белых списках бесполезно, имхо
Лет 30 назад такие же соображения высказывались про бистатические радиолокационные станции, однако сейчас они стали тоже bistatic radar. Там, конечно, на порядок сложнее обработка, и дальность они измеряют весьма странно по сравнению с импульсными, однако сейчас это тоже радары
Формально - можно, вопрос только в разрешающей способности, величина которой комната)
В общем я не очень вижу причины критики статьи из за слова радар в названии. Конечно "Система обнаружения присутствия на основе ..." было бы корректней, но wifi радар лаконичней и полнее описывает и принцип, и имплементацию, особенно для программистов и электронщиков
Просветные рлс это тоже рлс)
Я в лаборатории трудился, у нас не было в штате монтажников - инженегры да энесы)
))) я раньше тоже так думал, пока к нам на полигон не привезли монтажницу из КБ - не красное и белое, конечно) Приехала красивая девушка - причёска, глазки, маникюр, подошла к стойке, достала плату, потом вытаскивает из сумочки кожаный такой аля маникюрный набор, открывает, а там в идеальном состоянии пинцеты, пара скальпелей, кусачки, самодельные щипчики для снятия изоляции (бритва на крокодиле, кто помнит), маленький пузырек с флюсом, смывка, кисточки, небольшой отсос для припоя - в общем ни у одного инженера разработчика я такого не видел. Ну и работала она конечно красиво всем этим
Мне вот страшно подумать, как отлаживать программу с мильоном курутин в разных местах кода) Если они нужны для ввода вывода это что теперь, везде где только можно будут торчать async await и обращения к разного рода интерфейсам?) Чем плох диспетчер ввода вывода, который по epool запускает по списку готовности операции ввода вывода последовательно или параллельно, и тем самым активирует обработку этих данных.
Пример может и не совсем удачный, но суть, мне кажется, ясна - нельзя смешивать в "последовательном" коде обработку данных и коммуникации. Ошибки одного будут лезть в другое, перформанс обработки и коммуникаций не тестируется, беда.. в общем корутины хороши в каких то местах, но хайп о них чрезмерен, имхо
В каком месте физического канала связи присутствует это кодирование? Там же биты обычные передаются 1 и 0
За счет того, что скорость снижается до нуля, да) вы путаете кислое с горячим, имхо - способ организации физического канала связи и методы помехоустойчивого кодирования цифрового потока
Какая разница какое кодирование, если выигрыш в отношении с/ш определяется только базой сигнала..
Один обслуживатель окон пообещал найти и объяснить, что он имеет право мне звонить а я должен его по гарантии на окна принять) Но там операторы были непричём, там сотрудник ушёл из компании с базой
Я всегда спрашиваю рекламирующих мне какую тнить фигню про наличие у них моего согласия - они говорят что его не нужно, что номер они взяли из федеральной базы и теде.. А я им заявляю, что за звонок без моего согласия им по закону о рекламе ст 18.1 и 18.2 грозит штраф и турьма) Сразу прощаются
У нас кстати лет 5 или больше назад большую тройку поштрафовали за такие звонки
А вот интересно, не в Вашем теперешнем случае, а в принципе - можно ли "подмазать" эту Claudю для роста продаж?)))