Условно, я к тому, что если у нас нет таргета в виде высокой скорости обращения и тд, а нам достаточно условных 1-2 запросов в секунду, можно в лоб все забирать через селениум.
Может быть, если написать все асинхронно, то RPS будет значительно больше. Но на уровне 1.2 RPS действительно можно использовать тот же Selenium и вариации на него, тоже такая мысль возникла, пока читал.
Согласен, но сейчас тонкие ноуты в алюминиевом корпусе с 32 Гб ОЗУ или тем более со слотами, а не "распайкой" - редкий зверь. В основном со слотами что-то потолще и +- игровое.
Видимо, остается только вариант с хабом. Для себя нашел версию с двумя HDMI и PD 100 w, удобно - одним кабелем пробрасывается и зарядка, и картинка на два монитора, в хабе еще остаются пара USB type A и один type C. Но тут тоже вопрос, поддерживает ли USB type C в данной модели такое: у меня это завелось на ThunderBolt 4 порту, а здесь в спецификациях пишут "1 × USB-C 3.2 Gen1, поддержка передачи данных до 10 Гбит/с, зарядки, обратной зарядки и видеовыхода DisplayPort".
Неплохо в качестве первого приближения к теме, но лучше все же работать с json'ами, тем более, что pandas позволяет без проблем создавать датафреймы на основе json. Да и данные, тем более, потенциально большие объемы хранить в .csv в 2023 году как будто бы не стоит, есть форматы, которые позволяют использовать сжатие и сохраняют типы данных, например .parquet, да, такой файл не получится открыть в блокноте и посмотреть, но операции чтения/записи при этом на порядок быстрее.
Конечно, во многом это зависит от файлов, с которыми работаем. Но скорее всего контрольная сумма будет считаться сильно реже, так как одинаковый размер файла вплоть до бита встречается не так уж часто. Условно, даже два очень похожих внешне кадра не будут иметь одинаковый размер в силу механизмов под капотом у формата .jpeg.
Генерировал через ChatGPT порядка 20 текстов, которые можно использовать как части реферата: уникальность очень сильно скакала, примерно от 30% до 90%.
Так что идея сама по себе неплоха, но тут же захотелось повесить сверху какой-то дискриминатор, который бы подтягивал уникальность по api и отсеивал не особо уникальные попытки.
Как вариант, можно попросить ту же ChatGPT перефразировать текст или генерировать текст на английском, тут сразу два плюса: процесс генерации на порядок быстрее и такой текст после машинного перевода получается примерно в два раза более уникальным.
Но ведь 1000*0.01% = 0.1 студента..
Условно, я к тому, что если у нас нет таргета в виде высокой скорости обращения и тд, а нам достаточно условных 1-2 запросов в секунду, можно в лоб все забирать через селениум.
Может быть, если написать все асинхронно, то RPS будет значительно больше.
Но на уровне 1.2 RPS действительно можно использовать тот же Selenium и вариации на него, тоже такая мысль возникла, пока читал.
Согласен, но сейчас тонкие ноуты в алюминиевом корпусе с 32 Гб ОЗУ или тем более со слотами, а не "распайкой" - редкий зверь. В основном со слотами что-то потолще и +- игровое.
Видимо, остается только вариант с хабом.
Для себя нашел версию с двумя HDMI и PD 100 w, удобно - одним кабелем пробрасывается и зарядка, и картинка на два монитора, в хабе еще остаются пара USB type A и один type C.
Но тут тоже вопрос, поддерживает ли USB type C в данной модели такое: у меня это завелось на ThunderBolt 4 порту, а здесь в спецификациях пишут "1 × USB-C 3.2 Gen1, поддержка передачи данных до 10 Гбит/с, зарядки, обратной зарядки и видеовыхода DisplayPort".
Неплохо в качестве первого приближения к теме, но лучше все же работать с json'ами, тем более, что pandas позволяет без проблем создавать датафреймы на основе json.
Да и данные, тем более, потенциально большие объемы хранить в .csv в 2023 году как будто бы не стоит, есть форматы, которые позволяют использовать сжатие и сохраняют типы данных, например .parquet, да, такой файл не получится открыть в блокноте и посмотреть, но операции чтения/записи при этом на порядок быстрее.
Конечно, во многом это зависит от файлов, с которыми работаем.
Но скорее всего контрольная сумма будет считаться сильно реже, так как одинаковый размер файла вплоть до бита встречается не так уж часто.
Условно, даже два очень похожих внешне кадра не будут иметь одинаковый размер в силу механизмов под капотом у формата .jpeg.
Вспоминая опыт работы с Dash, выглядит супер!
Но возник вопрос, что думаете насчет Streamlit?
Генерировал через ChatGPT порядка 20 текстов, которые можно использовать как части реферата: уникальность очень сильно скакала, примерно от 30% до 90%.
Так что идея сама по себе неплоха, но тут же захотелось повесить сверху какой-то дискриминатор, который бы подтягивал уникальность по api и отсеивал не особо уникальные попытки.
Как вариант, можно попросить ту же ChatGPT перефразировать текст или генерировать текст на английском, тут сразу два плюса: процесс генерации на порядок быстрее и такой текст после машинного перевода получается примерно в два раза более уникальным.
Сколько листал настройки, только такой вариант видел
То есть да, отображение каждого отдельно настраивается
Персонализация > Панель задач > Другие значки панели задач