【個人開発】YouTubeのギター教則動画からTAB譜をPDF化するCLIツールを作ってみた

YouTubeのギター教則動画を読み込んで、自動でTAB譜のPDFを作成するシンプルなCLIツールを開発しました。

既存のYouTube楽曲からTAB譜を生成するサービスはいくつか存在しますが、どれも精度がいまいちだと感じていたため、もっとシンプルなアプローチを採用しました。

仕組みは以下の通りです：

1. YouTube動画をダウンロード
2. フレームをサンプリング
3. Claude Visionを使用してTAB譜エリアを特定
4. 各フレームから対象エリアを切り出し
5. スコアの小節番号をもとに重複を排除
6. 抽出したTAB譜のラインを垂直に繋ぎ合わせ、最終的にPDF化する

まだ多くの動画でテストできていないため、不具合が出る可能性は高いですが、興味のある方はぜひ試してみてください。

再生ヘッドが中央に固定されてタブ譜が後ろへ流れていくタイプのような、タブ譜が動く動画でどう機能するのか気になる。そういうタイプのタブ譜だと、このアプローチじゃうまく動かないんじゃないかな…？Soundsliceのメンバーより賞賛を送るよ。俺たちも2012年からウェブベースのタブ譜や楽譜ツールを作ってきたからね！ :)

ClaudeのVision機能が具体的にどう動くのかは知らないけど、昔ながらのコンピュータビジョンを使うほうがずっと安上がりじゃないの？

曲や録音データそのものからプログラムで直接タブ譜を生成する際、何か技術的なハードルでもあるの？これはこれで面白いけど、オーディオ処理じゃなくてコンピュータビジョンに頼ってるように見えるし。

こういうツールをずっと探してたからワクワクしてたのに、AI（Claude？）が必要だと知ってがっかりした。コストが結構かさみそうだよね。多分AIなしでやる方法もあると思うし、むしろビジュアルエディタで手動でタブ譜エリアを指定するほうがいいな。

AIが画面の何を正確に読み取ろうとしているのかを確認できるように、YouTube動画のサンプルリンクがあるといいんだけど。

これ覚えたよ：https://m.youtube.com/watch?v=07N4VVSmYLU&list=RD07N4VVSmYLU... まさに君が言った通り。一時停止してスクリーンショットを撮って、色やコントラストを調整して、PDFにまとめるっていう。最高に面倒だよ。

ベーシストなんだけど、まさにこういう動画を作ったことがあるよ。動画の概要欄にPatreonのリンクを貼ってて、会員になるとフルバージョンのタブ譜をPDFでダウンロードできるようにしてるんだ。AIが苦労して時間をかけてやってるタブ譜起こしの作業を完全に置き換えてくれるかも、なんて考えてたけど、動画から直接リッピングされちゃうとは思いもしなかったよ……。もしこれでうまくいくなら教えてくれ ;-) https://www.youtube.com/watch?v=c2i-Lwoe2Ow

コードの転回形を見つけたり、自分が弾きやすい運指を探したりするためのツールを作ってるよ。 https://music.shademaps.com/

ありがとう！

YouTubeが登場する前にギターを弾くのをやめちゃったから、タブ譜の教則本しか使ったことがないんだ。公式のソースでも（人間が起こしてるから）間違いはよくあったよ。間違いにも色々あって、単なる誤植もあれば、正しい音だけどネックのポジションが違うもの、もっとひどいのは音が間違ってるもの、あるいは頻繁にあるのが音の抜け（ヘヴィメタルのジャンルで同じ音を高速で弾くときによくある）だね。このAIツールが人間による採譜を上回れるのかどうか気になる。