タグ「YouTube」が付けられているもの

YouTubeMP4をコマンドラインから使いたいとのこと。

でも、右クリックめんどうだなあ、ということでコマンドラインからダウンロードできるようにしてみた。

YouTubeMP4をコマンドラインから使いたい - Seeking for my unique color.

勝手に添削、というか添削になってないんだけど、 これってぶっちゃけわざわざYouTubeMP4にアクセスしないでもYouTubeのページから直接スクレイピングすればよくって、 以下のスクリプトで実現できます。あとMech使わなくてもLWPはGETすれば自動的にリダイレクト先をフェッチしてくれます。

#!/usr/bin/perl

use strict;
use warnings;
use LWP::UserAgent;

my $url = $ARGV[0] || "http://www.youtube.com/watch?v=N7NTRPKfUtw";
my $ua = LWP::UserAgent->new;

my $response = $ua->get($url);
die $response->status_line unless $response->is_success;
my $content = $response->content;

if($content =~ /video_id=(.+?)&l.*?&t=(.+?)&/){
    my $mp4_url = "http://www.youtube.com/get_video?video_id=$1&t=$2&fmt=18";
    warn "downloading mp4 from $mp4_url\n";
    $ua->mirror($mp4_url, "$1.mp4");
}else{
    warn "Error\n";
}

Spidering hacks―ウェブ情報ラクラク取得テクニック101選
posted with yusukebe.com::AmazonSearch on 2008.3.16
  • Kevin Hemenway Tara Calishain 村上 雅章
  • 単行本 / オライリー・ジャパン (2004/05)
  • Amazon 売り上げランキング: 34884
  • Amazon おすすめ度の平均: 4.5
    • 5 回り道しても読む価値がありました
    • 5 『Hacks』の白眉
    • 5 混沌のWEBからデータを収集した人は必読
Amazon.co.jpで詳細を見る

昨日の夕方頃、YouTube API のドキュメントを見たら、急に内容が追加されていてびっくらこいたわけですが、 YouTube の API に新しく、動画をアップロードする機能やプレイヤーをJavaScriptから制御できる機能が追加されました。というわけで、早速 Perl を使ってローカルにある動画をYouTubeにアップロードするスクリプトを書いてみました。いろいろと癖があるので、適当に解説をします。

今回試したのは「Direct Uploading」という方法で、ローカルにあるスクリプトから直接動画ファイルを読み込んでポストするものです。他にもウェブフォームからユーザーにファイルを選んでもらってアップロードするやりかたもあるようです。この新API、とても充実しています(その代わりなのか昨日はやたらGDataのフィードが重たかったよ!)。

アップロードする流れは以下の順番になります。

  1. Developer Key を取得
  2. YouTube アカウントでの認証
  3. authentication_token の取得
  4. アップロードするビデオ情報の設定
  5. リクエストの作成
  6. アップロード
  7. 結果の得取

YouTube にある動画を検索して結果を取得するだけなら、GDataのフィードを読めばいいので、関係ないのですが、今回の場合は Developer Key が必要になってきます。 以下のページから登録ができます。

次にYouTubeアカウントの認証について説明します。 動画をアップロードするとなると、その人のYouTubeのアカウント名義でアップロードするわけであり、そのアカウント情報を用いて認証をしなければなりません。いつもYouTubeで利用しているユーザー名とパスワードを認証URLにPOSTで渡して、authentication_token とやらを取得します。 この authentication_token がアップロードをするリクエストに必要になってきます。 認証だけならリクエストURLに対してPOSTメソッドを発行するだけです。 最後にアップロードするサンプルスクリプトを掲載しますが、そのサンプルから認証をするサブルーチンを紹介すると以下のようになります。HTTP::Request::Common を使ってPOSTのリクエストを生成しています。 Emailパラメータにはユーザーアカウントを入れます。Emailとありますが、YouTubeに登録しているメールアドレスではありません。 アカウント名です。これが、最初にはまったポイントです。source パラメータはなんか適当に入れてればよさげ。


use LWP::UserAgent;
use HTTP::Request::Common;

my $ua = LWP::UserAgent->new;

sub auth {
    my $request = POST(
        "https://www.google.com/youtube/accounts/ClientLogin",
        Content_Type => 'application/x-www-form-urlencoded',
        Content      => [
            Email   => $username,
            Passwd  => $password,
            service => "youtube",
            source  => "uploads",
        ],
    );
    my $response = $ua->request($request);
    die $response->status_line unless ( $response->is_success );
    $response->content =~ /Auth=(.*?)\n/;
    return $1;
}

返ってきた文字列からAuth=xxxxxxxxxxxxxxxxxxという部分を抜き出せばそれがauthentication_tokenとなります。

次にアップロードするビデオの設定をします。基本的にGDataということで、ビデオの情報をAtomのentry形式で記述します。Atomとはいえ、その記述形式がYahoo!のMedia RSSを使っているので、モジュールは使わないで、テキストで書いてみました。もっとスマートなやり方があると思いますが、とりあえずわかりやすいので。 これもサブルーチンにしています。

sub video_detail {
    my $param = shift;
    foreach my $key ( keys %$param ){
        utf8::encode($param->{$key}) if utf8::is_utf8($param->{$key});
    }
    my $title = $param->{title} || die "title is required";
    my $description = $param->{description} || die "description is required";
    my $category = $param->{category} || "People";
    my $keywords = $param->{keywords} || die "keywords is required";

my $video_detail = << "XML";
<?xml version="1.0"?>
<entry xmlns="http://www.w3.org/2005/Atom"
 xmlns:media="http://search.yahoo.com/mrss/"
 xmlns:yt="http://gdata.youtube.com/schemas/2007">
    <media:group>
    <media:title type="plain">$title</media:title>
    <media:description type="plain">$description</media:description>
    <media:category scheme="http://gdata.youtube.com/schemas/2007/categories.cat">$category</media:category>
    <media:keywords>$keywords</media:keywords>
  </media:group>
</entry>
XML
   return $video_detail;
}

それぞれのパラメータが無いとdieしてますが、これらが空だとアップロードした時にAPIから怒られちゃいますので、しっかり設定しましょう。これも軽くはまりました。

この様にビデオの情報とそのビデオ自体のファイルを手元に用意したら、POSTのリクエスト作成します。 以下のURLがPOSTする先のURLです。

http://uploads.gdata.youtube.com/feeds/api/users/<username>/uploads

リクエストのヘッダーに含める要素が結構あって、まず、Content-Type は multipart/related にしなければいけません。次に認証がらみで、上記の authentication_token と developer key を

Authorization: GoogleLogin token=<authentication_token>
X-GData-Key: key=<developer_key>

という形式で含めます。ここが一番はまったところで、ドキュメントによると、Authorization のところが

Authorization: AuthSub token=<authentication_token>

になっていて、最初はこちらで試していたのですが、はねられました。このAuthSubというのは今回の「Direct Uploading」では使えなくて、ウェブフォームから外部ユーザーによってアップロードする場合などに使うようです。

ヘッダーの次は、リクエストの中にいれるコンテンツを入れます。用意しておいたビデオ情報の Atom 及び 実際の動画ファイルであるバイナリ形式のデータです。それぞれ、Content-Typeを「application/atom+xml」、動画の場合はそれにあった、例えば「video/mpeg」などにします。 upload サブルーチンのリクエスト生成までのコードはこんな感じです。

sub upload {
    my $token = shift;
    my $url =
      "http://uploads.gdata.youtube.com/feeds/api/users/$username/uploads";
    my $request = HTTP::Request->new( POST => $url );

    $request->header(
        "Authorization" => "GoogleLogin auth=$token",
        "X-GData-Key"   => "key=$developer_key",
        Slug            => $filename,
        Content_Type    => 'multipart/related',
    );
    $request->add_part(
        HTTP::Message->new(
            [ Content_type => 'application/atom+xml' ],
            $video_detail
        )
    );
    $request->add_part(
        HTTP::Message->new( [ Content_type => $content_type ], $data ) );

それで、いよいよリクエスト発行します。うまくいかなければエラーが返ってきますし、うまくいけばアップロードした動画のYouTubeでの情報がGData形式で返却されます。 その部分が upload サブルーチンの残りの部分になります。取得したGDataはそのままprintしていますが、 利用する場合はパースなどをしましょう。

    my $response = $ua->request($request);
    die $response->status_line unless ( $response->is_success );
    print $response->content;
}

以上でアップロードは完了です。YouTubeにログインしMyAccountのMyVideo(http://www.youtube.com/my_videos)にアクセスしたら変換中のさきほどあげた動画があれば成功というわけです。

youtube

アカウントのことも含め情報を全てコードに記述しているので、モジュール化したいところではありますが、 とりあえずうまくいったということでめでたしめでたし。 これを使っていろんなことができそうですね! 以下、アップロードするサンプルの全コードになります。

#!/usr/bin/perl

use strict;
use warnings;
use LWP::UserAgent;
use HTTP::Request;
use HTTP::Request::Common;
use IO::All;
use utf8;

# account settings
my $username = "your_account";
my $password = "your_password";
my $developer_key = "your_developer_key";

# video settings
my $filename = "movie01.mpg";
my $content_type = "video/mpeg";
my $video_detail = video_detail(
    {
        title       => "test",
        description => "description",
        keywords    => "tag1,tag2",
    }
);

my $ua    = LWP::UserAgent->new( keep_alive => 1 );
my $data  = io($filename)->binary->all;
my $token = auth();
upload($token);

sub upload {
    my $token = shift;
    my $url =
      "http://uploads.gdata.youtube.com/feeds/api/users/$username/uploads";
    my $request = HTTP::Request->new( POST => $url );

    $request->header(
        "Authorization" => "GoogleLogin auth=$token",
        "X-GData-Key"   => "key=$developer_key",
        Slug            => $filename,
        Content_Type    => 'multipart/related',
    );
    $request->add_part(
        HTTP::Message->new(
            [ Content_type => 'application/atom+xml' ],
            $video_detail
        )
    );
    $request->add_part(
        HTTP::Message->new( [ Content_type => $content_type ], $data ) );

    my $response = $ua->request($request);
    die $response->status_line unless ( $response->is_success );
    print $response->content;
}

sub auth {
    my $request = POST(
        "https://www.google.com/youtube/accounts/ClientLogin",
        Content_Type => 'application/x-www-form-urlencoded',
        Content      => [
            Email   => $username,
            Passwd  => $password,
            service => "youtube",
            source  => "uploads",
        ],
    );
    my $response = $ua->request($request);
    die $response->status_line unless ( $response->is_success );
    $response->content =~ /Auth=(.*?)\n/;
    return $1;
}

sub video_detail {
    my $param = shift;
    foreach my $key ( keys %$param ){
    utf8::encode($param->{$key}) if utf8::is_utf8($param->{$key});
    }
    my $title = $param->{title} || die "title is required";
    my $description = $param->{description} || die "description is required";
    my $category = $param->{category} || "People";
    my $keywords = $param->{keywords} || die "keywords is required";

my $video_detail = << "XML";
<?xml version="1.0"?>
<entry xmlns="http://www.w3.org/2005/Atom"
 xmlns:media="http://search.yahoo.com/mrss/"
 xmlns:yt="http://gdata.youtube.com/schemas/2007">
    <media:group>
    <media:title type="plain">$title</media:title>
    <media:description type="plain">$description</media:description>
    <media:category scheme="http://gdata.youtube.com/schemas/2007/categories.cat">$category</media:category>
    <media:keywords>$keywords</media:keywords>
  </media:group>
</entry>
XML
   return $video_detail;
}

初めてのPerl
posted with yusukebe.com::AmazonSearch on 2008.3.13
  • ランダル・L. シュワルツ トム フェニックス Randal L. Schwartz Tom Phoenix 近藤 嘉雪
  • 単行本 / オライリージャパン (2003/05)
  • Amazon 売り上げランキング: 12132
  • Amazon おすすめ度の平均: 4.5
    • 5 定番書
    • 5 初心者も持っておきたい一冊
    • 5 CGI言語としてのPerl
Amazon.co.jpで詳細を見る

プログラミングPerl〈VOLUME1〉
posted with yusukebe.com::AmazonSearch on 2008.3.13
  • ラリー ウォール ジョン オーワント トム クリスチャンセン Larry Wall Jon Orwant Tom Christiansen 近藤 嘉雪
  • 単行本 / オライリー・ジャパン (2002/09)
  • Amazon 売り上げランキング: 6070
  • Amazon おすすめ度の平均: 4.5
    • 4 値段は高いけど・・・
    • 5 CGIを自在にこなす第一歩の書
    • 5 Perl文法の仕組みを詳細に知りたい人の本
Amazon.co.jpで詳細を見る

まるごとPerl! Vol.1
posted with yusukebe.com::AmazonSearch on 2008.3.13
  • 小飼 弾 宮川 達彦 伊藤 直也 川合 孝典 水野 貴明
  • 大型本 / インプレスコミュニケーションズ (2006/08/24)
  • Amazon 売り上げランキング: 89091
  • Amazon おすすめ度の平均: 5.0
    • 5 技術書・解説書というよりはマイルストーン
Amazon.co.jpで詳細を見る

最新WebサービスAPIエクスプロ-ラ ~Amazon、はてな、Google、Yahoo! 4大Webサービス完全攻略
posted with yusukebe.com::AmazonSearch on 2008.3.13
  • Software Design 編集部
  • 大型本 / 技術評論社 (2005/09/23)
  • Amazon 売り上げランキング: 44588
  • Amazon おすすめ度の平均: 4.0
    • 4 Webサービスについてまとまっててサンプルプログラムも豊富
    • 4 情報は流通してこそ価値がある?
    • 3 完全攻略ではない
Amazon.co.jpで詳細を見る

1

プロフィール

yusukebe

ゆーすけべー / yusukebe
Yusuke Wada
1981/12/23 生
天然パーマ Erogeek
HP Twitter mixi はてブ
yusuke (at) kamawada.com
more...

最近10件のアクション

最近のブログ記事

  • PerlでWeb API入門/Web APIでPerl入門 - PerlCasual#3より

    先日7月23日(金)に株式会社ネイバーさんのご協力で行われたYokohama.pm#6 x PerlCasual#3。 イベント自体のまとめはアンケートの様子をみて後ほどさせていただくとして、 僕が発表を担当したPerlCasualセッションのことを少々。 PerlCasualのセッションは僕の割と独断で「どういう内容/スタイルが誰に求められているのか」を毎回試行錯誤で 探っている状況です。 この度は自分の原点に戻る感じでテーマを「Web API」としました。 というのも僕の最初のCPANモジュールはまさしく「WebService::Simple」ですし、 このPerl/Webの世界に入ってきたのも様々なWeb APIがキッカケだったからです。 また、対象のスキルレベルをかなり低いものと設定してみました。 何か新しいことを試す時には「極端なこと」をしてみて様子を探るっていうのは実は有効な手段だからです (これは学生時代にPHSを作ったとも言われる「小檜山賢二」教授に教えてもらったことです)。 で、そういうたくらみがあって、 sugyanによる「全裸ボットの作り方」というライブコーディングを中心に構成を組みました。 前半20分僕の「PerlでWeb API入門/Web APIでPerl入門」という発表、 後半30分はsugyanのライブコーディングです。 ライブコーディングの方、 結構無茶ぶり気味だったにもかかわらずsugyanはキョドリつつも引き受けてくれて、 直前の週のskype打ち合わせでガーっと内容固めていく感じでした。...

  • 今日(7/23金)はYokohama.pm#6 x PerlCasual#3だよ!/アンケート/スタッフ若干募集

    今日、23日(金曜日)はいよいよPerlのイベント「Yokohama.pm#6 x PerlCasual#3」です! 最終確認のエントリーを書きます。 ATNDで参加希望を出した方は必ず以下を確認してください。 Yokohama.pm#6 x PerlCasual#3 : ATND 必ずATNDで自分が出席可能かどうかを確認してください どうしても行けないという方は必ずATNDでキャンセルをお願いします イベントは18時開場です! 今後の活動の参考にするためWebアンケートを用意しました。「イベント終了後に記入」ということなんで、 まだ記入しちゃだめだよ!って感じですが、URLは以下ですので、是非「イベント終了後に」ご回答ください! http://bit.ly/perlcasual03 また、イベント中に若干のお手伝いをしていただくスタッフを募集しています。 15分ほど一部セッションみれなくなっちゃうかもしれませんが>< 人員が足りないので、もしご協力してくれる方がいたら18時開場時点で僕かclouderさんに声をかけてください。 もしくは事前に @yusukebe へ向ってつぶやいてもらえると助かります! さて、PerlCasualのセッション「初心者向け勉強会 テーマ:...

  • 明日(7/23金)はYokohama.pm#6 x PerlCasual#3だよ!

    明日、23日(金曜日)は100人規模の(ビッグ)イベント「Yokohama.pm#6 x PerlCasual#3」です! 待ちに待ったというよりか「え!もう?明日なの?」って感じかもしれないので、 参加予定者の方は以下ご確認お願いします。 Yokohama.pm#6 x PerlCasual#3 : ATND 必ずATNDで自分が出席可能かどうかを確認してください どうしても行けないという方は必ずATNDでキャンセルをお願いします スタートの時間は18:25分ですが、開場は18時からなので来れる方はその時間を狙って来てください 懇親会の会場として五反田の居酒屋を予約しました、会場から徒歩10分ほどらしいです 参加していただいた方にはもれなくWeb上でのアンケートに答えてもらおうと思います。 URLは後ほどお伝えいたしますのでよろしくお願いします Ustream中継あります。URLは http://www.ustream.tv/channel/yokohama-pm、ハッシュタグは #yokohamapm の予定です 以下、ほぼfixのプログラムになります! 日時: 2010/7/23(金) 18:25...

  • 本日(21日) twittie(携帯Twitterアプリ)のイベントに出ます

    twittieというすごい使いやすい携帯用Twitterクライアントアプリの人達が企画するイベントが明日開催されます。 そこで、Twitterサービス開発者ということで招かれて参加することになりました。 Twibの発表してきます。 普通のお方の現地参加は無理ぽいのですが、Ustream配信をするようなんで、 よかったら見てください!他の某有名Twitterサービスの開発者の方もたくさん来るみたいです。 イベントは19時から開始です! Ustream URL:http://ustre.am/kVRk ハッシュタグ: #twittie0721 twittie...

  • コードとかをブログで晒す意味 - dankogaiと私

    Perlやり始めて4年くらい経つんでもう初心者ってほどではないという立場から言ってみます。 「コードとかプログラミングに関することをブログに晒すってすごくいい」と思います。 最近Twitterがあるもんで、情報の発信の力をそちらに取られている感があって若干悲しいので、 もっとブログ使った方がいいと考えるのです。 で、コードを晒したりすると何が嬉しいって、とにかく自分が成長できます。 そしてお友達が増えます。ただそれだけだけどすっごく重要。 俺はそれで成長できたし、あの!dankogaiさんとお友達?になって雑誌での対談まではたしちゃいました。 というエピソードを例に挙げるんで参考にしてくださいね。 # まぁ、dankogaiさんと言ってもただのエロ親父なんですけどね^^; 本人には内緒だよ! 2007/8/3 ニコニコ動画をダウンロードするPerlスクリプトのコードをブログに書く Perl、割とかじり始めの俺がニコニコ動画のflvをダウンロードしちゃうイケナイスクリプトをブログに晒す。 正直今見るとひどいコードだ。 Perlでニコニコ動画のflvとコメントxmlをダウンロードする (Yusukebe::Tech) 2007/8/4 dankogaiさんに添削される、コード量半分くらいになる ニコ厨のdankogaiさんが即座に反応。 「勝手に添削」シリーズとして添削され、コード量が半分くらいになったし、少なくなっただけじゃなく スマート!ぶっちゃけると一瞬、怒られた感じがして腹が立ったが、ちょっとするとすげー!こんな風に書けるんだ!すげー!ってなり感動する。 404 Blog...

閉じる