Скачиваем Youtube плейлист в формате mp3 одним bash-скриптом

[kekekeks]

Ух. А чего он такой здоровый? Кстати, вытаскивать из flv намного проще связкой из mplayer и lame:

Скрытый текст

#!/usr/bin/env csharp
using System.IO;
using System.Diagnostics;

var output =  System.Environment.GetCommandLineArgs ()[2];
Console.WriteLine ("Output directory is " + output);

foreach (var filename in Directory.GetFiles(Directory.GetCurrentDirectory()))
{
        if(filename == "audiodump.wav")
                continue;
        if(File.Exists ("audiodump.wav"))
                File.Delete ("audiodump.wav");

        Console.WriteLine ("Processing " + filename);
        var mplayer = Process.Start ("mplayer", "-vc null -vo null -ao pcm -benchmark -- \""+filename+"\"");
        mplayer.WaitForExit ();
        if(mplayer.ExitCode!=0)
                System.Environment.Exit(1);

        var lame = Process.Start ("lame", string.Format ("audiodump.wav \"{1}/{0}.mp3\"", Path.GetFileNameWithoutExtension(filename), output));
        lame.WaitForExit ();
        if(lame.ExitCode!=0)
                System.Environment.Exit(2);

}

А плейлист качается и вовсе однострочным скриптом (первый параметр — ссылка на плейлист):

#!/bin/sh
curl "$1" |grep "/watch"|grep index|sed "s/.amp.*//"|sed "s/.*href../http:\/\/youtube.com/"|xargs -n 1 youtube-dl

[kekekeks]

А, прошу прощения, скрипт у вас не здоровый, а хорошо задокументированный. Тем не менее связка из mplayer + lame видится мне более универсальной ввиду всеядности первого.

[limonte]

Спасибо за критику. Кусок скрипта, который конвертирует видео в mp3 используется мной также и в другом bash-скрипте, который живет на сервере, устанавливать на который mplayer со всеми его дополнительными пакетами нерационально.

Что касается всеядности, не было ни одного flv файла, который бы не понял avconv.

PS: первый комментарий на хабре! woooohooo! :)

[mhspace]

ffmpeg (или avconv) тоже всеяден.

[kekekeks]

У меня, помнится, года два или три назад он отказался что-то выкачанное из интернета читать вываливаясь с сегфолтом, а mplayer сжевал. Возможно, сейчас ситуация лучше.

[ToSHiC]

Скачивать ролики с ютуба ради только музыки? Неужели на всяких grooveshark.com/ или Я.Музыке нету ваших любимых исполнителей?

[kekekeks]

Покажите, где там можно скачать подобный набор аранжировок треков из Тохо, например. Или ещё какую-нибудь не совсем мейнстримную штуку.

[ToSHiC]

Так я не настаиваю, я удивлённо вопрошаю :) Лично мне намного больше нравится слушать музыку с сайтов типа pandora.com в режиме радио — частенько попадается новые интересные исполнители и треки.

[bvitaliyg]

А вот не скажите, на YouTube музыка разная бывает.

Я, например, очень люблю слушать саундтреки, переложенные на фортепиано. На YouTube тысячи кошерных версий, которых вы больше нигде не найдете, ибо авторы выкладывают только туда, записывая их игру на видео.

[limonte]

Youtube плейлисты очень удобны тем, что сформированы тематически, например «classic guitar» или «instrumental hip-hop beats». Насколько мне известно, в Grooveshark такой возможности нет. Сервис Яндекс.музыка недоступен в моей стране.

[Kirhgoff]

Про грувшарк там немного другой механизм — там есть broadcast по тегам, что, в принципе, тоже самое. Причем, там можно говорить, что композиция не нравится, и он будет это учитывать (уж как именно, не знаю). А получившийся в процессе броадкастинья лист можно и сохранить, как свой.

Но скрипт полезный, спасибо, в свою копилочку положу.

[kekekeks]

[Удалено, не туда]

[silvansky]

Круто! Я пользовался до сего момента 4k YouTube to MP3, попробую перейти на Ваше решение =)

[DimanFox]

Вот инженерный подход к решению проблем)

[catharsis]

к слову об использовании памяти: на старом ноутбуке стал использовать Firefox вместо Chrome — желание его выкинуть пропало :)

[mhspace]

Не проще ли использовать -acodec copy? Даже если там будет не mp3, а какой-нибудь AAC, разве это большая проблема?

[limonte]

MOC по умолчанию не дружит с AAC

[mhspace]

faad2 у меня в системе уже стоял, он в обязательных зависимостях тех же mplayer и vlc.

[mhspace]

Кстати, для себя я заменил подписку на каналы на youtube таким скриптом-однострочником на bash:
while true; do for s in $(cat subscriptions); do ../youtube-dl -c --max-quality 22 -o '/home/youtube-dl/Youtube/%(upload_date)s %(uploader)s — %(title)s %(id)s.%(ext)s' --max-downloads 10 "$s"; done; sleep 1000; done
Соответственно, в файле subscriptions лежат каналы, которые нужно скачивать.

[limonte]

спасибо что поделились, хорошая идея.

[mhspace]

Только есть нюанс в том, в каком формате нужно указывать подписки в файле. Впринципе, можно указывать любой, понимаемый youtube-dl: хоть ссылку на канал, хоть ссылку на плейлист, хоть ytuser:channername, и даже ytsearch:cats. Но проблема в том, что не всегда эти списки возвращают видео отсортированные по дате в порядке убывания, а это проблема (скорее всего баг youtube-dl). К слову, ytuser:blahblahblah работает нормально.

[iborzenkov]

Спасибо, не знал, полез читать доки, нашел еще --extract-audio так что начальный скрипт можно еще сократить.
А мой скрипт порядком сократился — до этого парсил страницу юзера регулярками

[yktoo]

А в чём смысл использования конструкции $(echo $target_folder)? Почему нельзя просто написать $target_folder?

[limonte]

Хорошее замечание, в своих bash-скриптах я стараюсь всегда использовать конструкцию $(echo $target_folder) в строках, это позволяет не задумываться об экранизации переменных + они визуально отделены.

Обновил скрипт, заменив везде $(echo $target_folder) на $target_folder, код стал красивее и не потерял читабельности.

Спасибо за внимательность к коду.

[yktoo]

Не за что, но я, честно говоря, не понял вашей аргументации. Если нужно отделить переменную от окружающих символов, просто используйте выражение вида ${my_var}_1.

Если же каждое обращение к переменной оборачивать в сабшелл, это приведёт к созданию множества лишних процессов.

[limonte]

Не знал про эту конструкцию, стыд-позор.
Первый день на хабре прожит не зря :)

[0xC0CAC01A]

Вопрос почти в тему — как избавиться от настырной видео-рекламы перед роликами на youtube? Только не говорите что adblock справляется.

[kekekeks]

Я на оперу поставил вот эту штуку, она режет (хотя пишут, что оно только для всплывающей, возможно, именно видео-рекламу режет ещё что-то, надо посмотреть, cкорее всего adblock).

[0xC0CAC01A]

Спасибо, а в Firefox?

[pan_alik]

# ./get_youtube_playlist PL6DB07B6741FE6EA3
wget: missing URL
Usage: wget [OPTION]... [URL]...
Try `wget --help' for more options.
./get_youtube_playlist: line 36: https://gdata.youtube.com/feeds/api/playlists/PL6DB07B6741FE6EA3?max-results=50: No such file or directory
Playlist ID is incorrect, usage:
 ./get_youtube_playlist <playlist_id> <target_folder> <num_songs>
   target_folder: (default: songs will be downloaded in current folder)
   num_songs:     number of songs to get (default: 50)

[limonte]

wget говорит, что не существует https://gdata.youtube.com/feeds/api/playlists/PL6DB07B6741FE6EA3?max-results=50 хотя он есть.

Что-то мне подсказывет, что ваша проблема в https://, попробуйте в 36й строке заменить https:// на http://.

[pan_alik]

Не помогает.

[limonte]

можете ли вы в браузере открыть https://gdata.youtube.com/feeds/api/playlists/PL6DB07B6741FE6EA3?max-results=50?

[pan_alik]

Могу, проверял.

[limonte]

неужели wget не работает… попробуем curl. Попробуйте, пожалуйста, 36ю строку заменить на
youtube_api="`curl https://gdata.youtube.com/feeds/api/playlists/$playlist_id?max-results=$num_songs`"

[deeGraYve]

тот же результат…

[deeGraYve]

замените 36 строку на
youtube_api="`wget -qO- https://gdata.youtube.com/feeds/api/playlists/$playlist_id\?max-results\=$num_songs`"

[limonte]

Вот где собака зарыта… спасибо, исправленно.
Интересно почему у меня работает без экранирования, полез читать доки.

[pan_alik]

Спасибо, помогло!

[pan_alik]

Еще вопрос, а если я, например, хочу скачать песни с 53 по 106 из определенного плейлиста — это возможно?

[limonte]

API отдает максимум 50 треков.
Границы 'от' и 'до' конечно возможны, но я бы не усложнял скрипт.

[kekekeks]

Можете воспользоваться хламом из моего комментария. В вашем случае будет что-то типа

#!/bin/sh
PLAYLIST_URL=$1
FROM=$2
TO=$3


curl $PLAYLIST_URL |grep "/watch"|grep index|sed "s/.amp.*//"|sed "s/.*href../http:\/\/youtube.com/"|head -n $TO|tail -n+$FROM | xargs -n 1 youtube-dl

А дальше натравите скрипт из скрытого текста

[pan_alik]

Спасибо.

[StrangeAttractor]

К стати, по теме, хочу поделиться одной хитростью. Я всегда «лайкал» что мне нравится на YouTube прежде всего с целью потом иметь возможность легко найти это, для меня это было как закладка. Но однажды я заметил, что в списке моих лайков всего около 200 пунктов и последними идут далеко не первые, а сравнительно недавние лайки. Боялся, что старые потеряны, но нет. Да, YouTube ограничивает длину этого списка как и любого плэйлиста случайной цийрой между 190 и 200 (как так получается и почему не точно 200 я не понял, но не суть). Но остальные хоть и скрываются, но не теряются, а появляются по мере удаления верхних. В результате я просто создал несколько отдельных плэйлистов и поперетаскивал всё из лайков туда.

[victor1234]

в чем отличие вашего скрипта от вот такой команды, например?

youtube-dl www.youtube.com/watch?list=playlist_name -x -o '%(playlist)s/%(playlist_index)s-%(title)s.%(ext)s'

[ForeverYoung]

Мои поделки:

hg.f-y.name/svv — сайт (создан конкретно под один канал, но можно в настройках указать плейлист, убрать ускорение, приделать плейлист к аудио-плееру...)

github.com/Forever-Young/speedup-extract — скрипты для ускорения-вытаскивания (можно вытаскивать без ускорения)