Pull to refresh
5
0
Send message

Когда-то играл в Red Alarm на оригинальном девайсе где-то в недрах Акихабары. Эх, славные доковидные времена, ушедшая эпоха.

Тогда уж сразу на Луну.

Стантслав Лем - "Мир на Земле"

Я иногда работаю под гул контактной капсулы.

Ух ты, новая uncensored 70B модель с контекстом на 8к токенов. Это я люблю.

Вообще семейство Llama-2 вроде бы почти не теряет в качестве генерации при сжатии до q5_k_s. По крайней мере, на бенчмарках разница на уровне погрешности. 4х битные тоже имеют хорошее соотношение цена/качество.

Конкретно эту не пробовал, не знал про неё. Спасибо за наводку.

А вот Mixtral-8x7B не впечатлил. Больше было похоже на просто 7B модель.

Про что угодно, я имел ввиду, что ужатая в 4 бита модель будет занимать меньше 3 ГБ RAM, и её можно будет запустить и на распберри и на телефоне (не самом новом).

Конечно, скажи мне кто года 3 назад, что модели размером с GPT-2 будут считаться "микро" и запускаться на кофеварках, я бы не поверил.

Погонял немного эту Phi-2, спасибо Майкам, что выложили всё на HF, в отличие от некоторых.

Что можно сказать?

Для 2.7B, конечно, хорошие результаты. Но ни о каком сравнении с Llama-2 70B говорить не приходится. Число параметров решает, чудес не бывает.

В документации указана длина контекста 2048 токенов, но модель как правило сбивается уже в районе 1000, что типично и ожидаемо для микромоделей.

Неквантованая модель занимает около 9ГБ VRAM, ждём когда добавят поддержку в llama.cpp и выложат квантовыные версии. Чем-то всё-таки притягательна идея крохотных LLM, которые можно запускать на чём угодно.

Пример ответа на пустой промпт, <endoftext> после ~600 токенов:

Topic: Mathematics--Logic--Logical Train of Thought
Once upon a time, in a small town called Mathville, there lived three friends named Alice, Bob, and Carol. They were all passionate about mathematics and loved discussing logical train of thought. One sunny afternoon, they gathered at their favorite coffee shop to have their usual intellectual conversations.
Alice, who was known for her logical reasoning, started the conversation by saying, "You know, Bob, I always solve math problems faster than you because I have a better understanding of the concepts."
Bob chuckled and replied, "That's true, Alice. I admire your ability to grasp complex mathematical concepts quickly. It's like you have a natural talent for it."
Carol, who was listening intently, chimed in, "Speaking of talents, did you know that the famous mathematician, Isaac Newton, was also a skilled musician? He composed beautiful symphonies in his free time."
Alice nodded and added, "Yes, I've read about that. It's fascinating how people can excel in multiple fields. It just goes to show that our abilities are not limited to one area."
Bob, intrigued by the conversation, asked, "Do you think it's possible for someone to be a genius in both mathematics and music?"
Alice pondered for a moment and replied, "Well, it's highly unlikely. While some individuals may have a natural inclination towards both, it requires a significant amount of dedication and practice to excel in both fields."
Carol, who had been silently listening, finally spoke up, "I believe that passion plays a crucial role in achieving greatness. If someone is truly passionate about something, they will put in the necessary effort to master it."
Alice nodded in agreement and said, "Absolutely, Carol. Passion fuels our determination and motivates us to overcome challenges. It's what sets apart the average from the extraordinary."
As their conversation continued, they delved deeper into the world of mathematics, discussing various logical train of thought and problem-solving techniques. They shared their knowledge and insights, each contributing to the intellectual growth of the group.
Hours passed by, and the sun began to set, casting a warm glow over the coffee shop. Alice, Bob, and Carol bid farewell, promising to meet again soon for another stimulating conversation.
As they walked out of the coffee shop, their minds filled with new ideas and perspectives, they couldn't help but feel grateful for their shared passion for mathematics and the logical train of thought that brought them together.
And so, their journey of intellectual exploration continued, fueled by their curiosity and love for the world of numbers and logic.

OpenAI может в ответ показать, что все книги, на которых они обучали GPT были честно куплены на Амазоне или где-то еще.

А если серьёзно, думаю эта тема будет в ближайшем будущем регулироваться законодательно. Очень легко скопировать художественный стиль обучив лору. Голос неплохо копируется даже по 20 с записи.

Приблизительно во всём, начиная с состава атмосферы по высоте. Не знаю, откуда взята таблица в статье, но согласно модели атмосферы MSIE E-90 от НАСА, он изменяется вот так:

Кислород никуда не девается выше 100 км, просто начинает доминировать одноатомная форма.

Температура с высотой, растёт только в стратосфере. В мезосфере температура падает. Собственно их так и различают, стратопауза - верхняя граница стратосферы - это область с наибольшей температурой. А нагрев происходит за счет поглощения солнечного излучения воздухом.

Утверждения про выгорание кислорода с принесенным солнечным ветром водородом и про торможение "Пионера" "вакуумными газами" из облака Оорта, поданные как факты, это вообще форменное безумие.

Дирижабли прошлого века для компенсации расхода топлива конденсировали атмосферную влагу в балластные ёмкости.

/зануда mode on

Вообще панель управления Боинга это как раз пример очень эргономичного дизайна, где большое количество элементов управления сгруппированы понятным и удобным образом. Представьте, какого было бы пилотам, если бы каждые полгода происходил "редизайн" кабины, и кнопка, которая раньше включала автопилот переезжала бы на потолок, а на её месте оказывалось бы включение системы пожаротушения, потому что "таковы последние тренды в дизайне авиационных интерфейсов".

А в случае неполадок пилотам вместо сжатой и точной информации показывали бы сообщение "Упс! Что-то пошло не так ☹️"

Хотя современные веяния дошли и до Боинга, и кто-то решил, что пилотам не обязательно давать много информации о работе MCAS, например.

Я слышал, для тех кто пишет такие сообщения об ошибках в аду есть отдельный котёл.

Интересно, что с таким небольшим ухудшением аудиограммы вы вообще что-то заметили. Я пошёл к сурдологу только когда на очередном мед. осмотре не услышал шепот лора.

Потом еще раз сам перепроверил, и действительно, ничего не слышу выше 3 кГц.

Ни к каким парадоксам уравнение Бернулли, конечно же, не приводит. И выводится оно напрямую из уравнений Навье-Стокса, если принять некоторые допущения.

Никаких проблем идеальная жидкость не испытывает, послушно ускоряется в сужениях канала и тормозится, пройдя расширение.

Более того, с его помощью можно преспокойно рассчитывать и движение вязкой жидкости - с учетом потерь энергии между сечениями.

Можно рассчитать и нестационарное течение - вводится дополнительный член, т. н. "инерционный напор". Этого инструментария вполне достаточно, чтобы, например, на коленке посчитать минимально допустимое время закрытия (максимальную скорость) направляющего аппарата гидротурбины, чтобы не возникло недопустимого разрежения в камере рабочего колеса.

Но вот к течению пара в проточной части паровой турбины оно не имеет никакого отношения, т. к. для газов нельзя пренебречь сжимаемостью. Для потока газа есть похожее уравнение полной энтальпии.

Я вот буквально сейчас занят вводом в строй энергоблока 360 МВт на сверхкритическом паре и почти больно читать, когда кто-то с серьёзным видом пишет про "дно котла" и что не может быть перегретого пара на входе ЦВД, но это уже ниже отметили. Всё же надеялся, что после разгрома теории Жуковского и модели атомного ядра, автор низвергнет Эйнштейна или хотя бы квантовую механику.

Классическое батискафостроение не унесло ни одной жизни за последние 3 десятка лет. И в последние годы прогресс в этой сфере огромный. Вот пример инноваций здорового человека:

Information

Rating
3,868-th
Registered
Activity