最初の部分では、古い家族のビデオをデジタル化し、それらを別々のシーンに分割するという難しい探求について説明します。すべてのクリップを処理した後、YouTubeと同じくらい便利なオンライン表示を実現したいと思いました。これらは家族の個人的な思い出であるため、YouTube自体に投稿することはできません。便利で安全な、よりプライベートなホスティングが必要です。

ステップ3.公開

ClipBucket、独自のサーバーにインストールできるオープンソースのYouTubeクローン

私が最初に試したのはClipBucketでした。これは、サーバーにインストールできるオープンソースのYouTubeクローンと呼ばれています。







驚いたことに、ClipBucketにはインストール手順がありません。おかげでサードパーティのチュートリアルでは、私は、インストールプロセスの自動化使用Ansible、サーバ構成管理ツールを。



難しさの一部は、ClipBucketインストールスクリプトが完全に壊れていたことでした。当時、私はGoogleで働いていて、契約の条件の下で、オープンソースのYouTubeクローンに貢献する権利はありませんでしたが、必要な修正を簡単に行えるバグレポートを投稿しました。何ヶ月も経ちましたが、彼らはまだ問題が何であるかを理解していませんでした。代わりに、リリースごとにバグがどんどん追加されていました。



ClipBucketはコンサルティングモデルに取り組みました-彼らは無料でコードをリリースし、展開を支援するために料金を請求しました。徐々に、有料サポートからお金を稼ぐ会社は、おそらく顧客に製品を自分でインストールしてもらうことにあまり興味がないことに気づきました。

MediaGoblin、より現代的な代替手段

ClipBucketに何ヶ月も不満を感じた後、利用可能なオプションを確認し、MediaGoblinを見つけました。





MediaGoblin は、スタンドアロンのメディア共有プラットフォーム



です。MediaGoblinには多くの利点があります。見苦しいPHPのClipBucketとは異なり、MediaGoblinはPythonで記述されています。これは、私がコーディングの経験が豊富な言語です。ビデオのダウンロードを簡単に自動化できるコマンドラインインターフェイスがあります。最も重要なことは、MediaGoblinはインストールの問題を排除するDockerイメージで提供されます。

Dockerは、どこでも実行できるアプリケーション用の自己完結型環境を作成するテクノロジーです。私は多くのプロジェクトでDockerを使用しています。

MediaGoblinの再ドッキングの驚くべき難しさ

MediaGoblindockerイメージのデプロイは簡単だと思いました。まあ、それはそのようにはうまくいきませんでした。



完成した画像には、2つの必要な機能がありませんでした。

• 認証
  • MediaGoblinはデフォルトでパブリックメディアポータルを作成しますが、不正アクセスを制限する方法が必要でした。
• トランスコーディング
  • MediaGoblinは、ビデオをアップロードするたびに、最適なストリーミングのためにビデオを再コーディングしようとします。ビデオを最初にストリーミングする準備ができている場合、トランスコーディングによって品質が低下します。
  • MediaGoblinは、構成オプションを介してトランスコーディングを無効にすることを提供しますが、これは既存のDockerイメージでは実行できません。

まあ、問題ありません。 Dockerイメージはオープンソースであるため、自分で再構築できます。



残念ながら、Dockerイメージは現在のMediaGoblinリポジトリから構築されなくなりました。前回成功したビルドのバージョンと同期しようとしましたが、どちらも機能しませんでした。まったく同じコードを使用しましたが、MediaGoblinの外部依存関係が変更され、ビルドが壊れました。数十時間後、MediaGoblinの10〜15分のビルドプロセスを何度も繰り返して、最終的に機能するようにしました。



数ヶ月後、同じことが起こりました。過去2年間で、MediaGoblin依存関係チェーンが何度かビルドを壊してしまいました。最後に起こったのは、この記事を書いているときでした。依存関係をハードコードし、ライブラリのバージョンを明示して、MediaGoblinの独自のフォークを公開することになりました。言い換えれば、代わりの疑わしげMediaGoblinは、任意のバージョンで動作することを主張してセロリ> = 3.0、私は上の特定の依存関係がインストールセロリ4.2.1を、私はそのバージョンでMediaGoblinをテストしているため。製品には再現可能なビルドメカニズムが必要なようですが、私はまだそれを行っていません。



とにかく、何時間もの苦労の末、ついにDockerイメージでMediaGoblinをビルドして構成することができました。既に存在するのは簡単だった、不要なトランスコーディングをスキップして、認証のためのnginxのを置きます。

ステップ4.ホスティング

MediaGoblinはローカルマシンでDockerを実行していたので、次のステップは、家族がビデオを視聴できるようにクラウドサーバーにデプロイすることでした。

MediaGoblinとビデオストレージの問題

Dockerイメージを取得し、パブリックURLでホストするプラットフォームは多数あります。欠点は、アプリ自体に加えて、33GBのビデオファイルを公開する必要があったことです。それらをドッカーイメージにハードコーディングすることは可能でしたが、面倒で醜いことが判明しました。 1行の構成を変更するには、33GBのデータを再デプロイする必要があります。



ClipBucketを使用したときに 、オペレーティングシステムが通常のファイルシステムパスとしてディレクトリをGoogleCloudにアップロードできるようにするユーティリティであるgcsfuseの問題を解決しました。ビデオファイルをGoogleCloudに投稿し、gcsfuseを使用してClipBucketのローカルファイルとして表示しました。



違いは、ClipBucketが実際のVMで実行されたのに対し、MediaGoblinはDockerコンテナで実行されたことです。ここでは、クラウドストレージからファイルをマウントするのがはるかに難しいことが判明しました。私はすべての問題を解決するために数十時間を費やし、それについてのブログ投稿全体を書きました。





MediaGoblinとGoogleCloudストレージの最初の統合（2018年 に話しました）



すべてのコンポーネントを数週間調整した後、すべてが機能しました。 MediaGoblinコードに変更を加えることなく、メディアファイルの読み取りとgoogleクラウドストレージへの書き込みを不正に強制します。



唯一の問題は、MediaGoblinがひどく遅くなったということでした。ホームページにビデオサムネイルをロードするのになんと20秒かかりました。ビデオを見ながら前にジャンプすると、MediaGoblinは再生を再開する前に無限に10秒間一時停止します。



主な問題は、ビデオや写真が長い回り道でユーザーに届くことでした。彼らは、Googleクラウドストレージからgcsfuseを経由してMediaGoblin、Nginxに移動する必要がありました。その後、ユーザーのブラウザにアクセスしました。主なボトルネックはgcsfuseでしたが、これは高速パフォーマンス用に最適化されていません。開発者は、プロジェクトのメインページでユーティリティの作業が大幅に遅れることについて





警告します。gcsfuseドキュメントのパフォーマンス警告



理想的には、ブラウザはすべての中間層をバイパスして、GoogleCloudから直接ファイルをフェッチする必要があります。MediaGoblinコードベースに飛び込んで、複雑なGoogle Cloud統合ロジックを追加せずにこれを行うにはどうすればよいですか？

Nginxsub_filterトリック

幸いなことに、少し醜いですが、簡単な解決策を見つけました。Nginxのdefault.conf構成に次のフィルターを追加しました。

sub_filter "/mgoblin_media/media_entries/" "https://storage.googleapis.com/MY-GCS-BUCKET/media_entries/";
sub_filter_once off;

私のインストールでは、NginxはMediaGoblinとエンドユーザーの間のプロキシとして機能しました。上記のディレクティブは、MediaGoblinのすべてのHTML応答を検索して置き換えてから、エンドユーザーに渡すようにNginxに指示します。Nginxは、MediaGoblinメディアファイルへのすべての相対パスをGoogle CloudStorageからのURLに置き換えます。



たとえば、MediaGoblinは次のようなHTMLを生成します。

<video width="720" height="480" controls autoplay>
  <source
    src="/mgoblin_media/media_entries/16/Michael-riding-a-bike.mp4"
    type="video/mp4">
</video>

Nginxは応答を変更します：

<video width="720" height="480" controls autoplay>
  <source
    src="https://storage.googleapis.com/MY-GCS-BUCKET/media_entries/16/Michael-riding-a-bike.mp4"
    type="video/mp4">
</video>

これで、すべてが期待どおりに





機能します。NginxはMediaGoblinからの応答を書き換えて、クライアントがGoogleクラウドストレージから直接メディアファイルを要求できるようにします。



私のソリューションの最大の利点は、MediaGoblinコードを変更する必要がないことです。Nginxの2行のディレクティブは、MediaGoblinとGoogle Cloudをシームレスに統合しますが、これらのサービスはお互いについてまったく何も知りません。

注：このソリューションでは、Google CloudStorage内のファイルをすべての人が読み取れるようにする必要があります。不正アクセスのリスクを軽減するために、（たとえばmediagoblin-39dpduhfz1wstbprmyk5ak29）長いランダムなバケット名を使用し、バケットのアクセス制御ポリシーで権限のないユーザーがディレクトリの内容を表示できないことを確認します。

最終製品

この時点で、私は完全で実用的なソリューションを手に入れました。 MediaGoblinは、Googleのクラウドプラットフォーム上の独自のコンテナで問題なく実行されたため、頻繁にパッチを適用したり更新したりする必要はありませんでした。私のプロセスのすべてが自動化されて再現可能であり、簡単な編集やロールバックが可能でした。



私の家族は、ビデオを見るのがいかに簡単かが大好きでした。上記のNginxハックにより、ビデオ処理はYouTubeと同じくらい高速になりました。



プレビュー画面は次のようになります。





注目



タグによるファミリービデオディレクトリのコンテンツサムネイルをクリックすると、次の画面が表示されます。





メディアサーバーで単一のクリップを表示する



長年の仕事の末、私は親戚に、当初望んでいたように、YouTubeと同じユーザーフレンドリーなインターフェースでビデオを見る機会を与えてくれたことを非常に嬉しく思います。

ボーナス：月額1ドル未満へのコスト削減

ホームビデオを頻繁に見ることはなく、数か月ごとにしか見ません。私の家族は1年に合計で約20時間のトラフィックを生成しましたが、サーバーは24時間稼働していました。 99.7％の確率でダウンしたサーバーに月額15ドルを支払いました。



2018年の終わりに、GoogleはCloudRun製品をリリースしました。キラー機能は、アプリケーションがHTTP要求に応答できるほど迅速にDockerコンテナーを起動することでした。つまり、サーバーはスタンバイモードのままで、誰かがアクセスしたいときにのみ起動する可能性があります。私のように起動頻度の低いアプリの場合、コストは月額15ドルから年数セントに下がりました。



もう思い出せない理由で、CloudRunはMediaGoblinイメージで機能しませんでした。でもクラウドランの登場で、ヘロクを思い出しました同様のサービスを無料で提供しており、そのツールはGoogleよりもはるかに便利です。



無料のアプリケーションサーバーを使用すると、費用はデータストレージだけになります。Googleの標準的な地域ストレージのコストは2.3セント/ GBです。ビデオアーカイブは33GBなので、月に77セントしか支払いません。





このソリューションのコストは月額わずか0.77ドルです

試してみたい人のためのヒント

明らかに、このプロセスには長い時間がかかりました。ただし、この記事が、ホームビデオのデジタル化と公開にかかる労力の80〜90％を節約するのに役立つことを願っています。別のセクションで、プロセス全体の詳細なステップバイステップガイドを見つけることができますが、ここにいくつかの一般的なヒントがあります。

• デジタル化および編集フェーズでは、できるだけ多くのメタデータを保持します。
  • .
  • , .
  • , .
• .
  • .
  • EverPresent ( , ).
• , HDD.
  • 100-200 .
  • Synology DS412+ (10 ).
• - , .
  • , , . .
  • (, , ), , .
  • . , .
    • ?
    • ?
    • ?
• .
  • , .
  • “best of” , .
• , .
  • , . .
  • , . , .
• .
  • , , .
  • , , .
• .
  • , MediaGoblin - .
  • , , Hugo, Jekyll Gridsome.
• .
  •  — .
  •  — . , Slow Snow The National, .