シェルスクリプト on dyama's page

常駐監視型 Twitter メディアダウンローダー「berryjack/win32」

Wed, 15 Jul 2015 22:55:54 +0900

Twitter の常駐監視型メディアダウンローダー berryjack の Windows 移植版を作成しました。品質無保証の人柱版として公開します。

概要

監視対象となるアカウントを定期的に巡回して、メディアファイル(画像、動画ファイル)が投稿されていたら自動的にダウンロードしてくれます。投稿されたメディアファイルを一括ダウンロードする点では、他の Twitter ダウンローダーと変わりがありませんが、起動しておくだけで複数のアカウントを定期的にチェックしてくれるところが大きな特徴です。

ツイキャス録画スクリプト

Tue, 03 Mar 2015 00:00:08 +0900

リアルタイム動画配信サービス「ツイキャス」の録画をしてくれるシェルスクリプトを書いてみました。…と言っても、ffmpeg の入力ソースに食わせるだけですので、スクリプトというよりは例によって自分の覚え書きのようなものになっています。

twitcast.sh (Gist)

#!/bin/bash
# coding: utf-8
# twitcast.sh by dyama

if [ -n "$1" ]; then
  id=$(echo "$1" | sed 's|^.*/||g')
  fname="${id}_$(date +'%F_%H-%M-%S').ts"
  ffmpeg -i "http://twitcasting.tv/$id/metastream.m3u8" \
    -vcodec copy -acodec copy -f mpegts "$fname"
else
  echo "usage: $0 twitcasting_account"
fi

使い方は、実行権限を付与して

MD5ハッシュ値をURLセーフな文字列に変換

Sun, 25 Jan 2015 20:56:37 +0900

大量に保存した画像ファイルなどの重複潰しも兼ねて、ファイル名を MD5 ハッシュ値にリネームして保存しています。

dyama/hashmv · GitHub

まったく同一のファイルであれば、ハッシュ値が同一になりますので、ファイル名が同一になります。上のスクリプト「hashmv」ではリネーム時に同一ファイルを上書きしますので、結果、重複ファイルを除去することができます。

Twitterの画像を一括ダウンロードするシェルスクリプト「berryjack」を書いた。

Sat, 25 Oct 2014 11:00:37 +0900

以下、スクリプトの解説が中心です。Windows で手軽に使いたい方は berryjack/win32 をダウンロードしてください。

数年前、知人より「Twitterの特定アカウントで公開されている画像ファイルを一括ダウンロードするスクリプトがないかな」と相談を受けて、Perl でNet::Twitter::Liteを使ってがりがりコーディングしました。そして、今年になってから Ruby を使う機会が増えたため、そのコードを Ruby で書き直してみました。

シェルスクリプトによる簡易Wikiシステム

Fri, 16 May 2014 23:55:19 +0900

以前、PQI Air Card でも動く簡易 Wiki を書いてみました。PQI Air Card 自体、標準で Perl が動いていますし実用性はあんまりないですが、シェルスクリプトベースでも簡単に出来てしまいます。

ANSI エスケープシーケンスについて

Sat, 05 Apr 2014 00:10:30 +0900

端末の色やカーソル制御を行うには、curses を利用するのが一般的ですが、ライブラリを利用しなくとも、シェル経由である決まりのエスケープシーケンス文字列を端末に投げることにより、色やカーソル制御を行うことができます。

シェルスクリプトでCGIチャットを書いてみました。

Sun, 09 Mar 2014 00:00:02 +0900

CGIは、標準入出力と環境変数を用いて動的コンテンツを生成する仕組みなので、これらを扱うことができるプログラムだったら記述言語は問いません。CGIと言えば「CGI/Perl」の組み合わせだけが突出して有名ですが、CGI/Cだって世の中にはたくさんあります。さらに極端な事を言えば、CGI/awkだってCGI/shだって不可能ではありません。

音声合成エンジン Open JTalk について

Sat, 01 Jun 2013 00:00:11 +0900

動画の生放送サイトを見ていると、リアルタイムに視聴者から来るコメントを合成音声によって読み上げている人が増えているようで、合成音声のジャンルも賑わってきたようです。ボーカロイドの初音ミクが登場するよりも前、AquesTalk をいじってみて調整次第ではかなり「聞ける」音声になるんだなあ、と実感した覚えがあります。自分は合成音声を入れた動画を作成したり、配信したりするわけではないのですが、IRCのログやTwitterのタイムラインの読み上げ程度には使ってみたくなりました。ということで、今更感が拭えませんが、Open JTalkを使ってみた時のメモを書いておきます。

自炊ZIPをスマホや電子ブックリーダー向けに最適化する

Sat, 11 May 2013 00:00:20 +0900

去る2月、楽天の Kobo を中古購入しました。投げ売り価格の2500円でした。私は風呂でよく本を読むので、浴槽に落としてもそんなに凹まない安価な端末を探していました。期待をまるでしていない、という意味では Kobo は最高の端末です。

tumblrの画像を一括ダウンロードするスクリプト

Sat, 02 Feb 2013 00:00:26 +0900

tumblrの画像を一括ダウンロードするbash向けシェルスクリプトを書いてみました。

あまり効率的ではないですが、投稿を1ページずつ取得して、含まれる画像を抜き出しています。また、ダウンロードが完了したらZIPファイルに固めてくれます。

PDFを連番画像ファイルを含むZIP圧縮ファイルに変換

Sun, 30 Dec 2012 00:00:16 +0900

安価な Android 端末が出回っています。
Amazon キンドルが発売されて、投げ売り状態だった楽天の Kobo が、新品でも3000円程度で流通するようになりました。
ようやく、電子書籍を読むというライフスタイルが日本にも定着するんでしょうか。今後が楽しみです。

Bash, Perl, Ruby, Pythonで正規表現置換

Tue, 23 Oct 2012 23:35:38 +0900

前回のC++/boost、.NETに加え、各種インタプリタ言語でも同じ動作をするスクリプトを書いてみました。

シェルスクリプト(bash)

シェルスクリプトはそもそもグルー言語ですので、他のコマンドを呼び出して処理をすることが一般的です。下のサンプルではsedコマンドで置換処理をしています。bashだと正規表現マッチングは可能なので、ガリガリとスクリプトを書けばsedを使わずに実現できるかもしれません。

NEC Life Touch NOTE に Debian GNU/Linux を導入

Mon, 19 Mar 2012 00:00:21 +0900

NECのAndroid端末「Life Touch NOTE」にDebian GNU/Linux をインストールした時の覚え書きです。

root 権限の奪還

ホストマシンにAndroid SDKのインストールしたら、USBでホストとLTNをつないで、以下の手順でroot権限を取り返します。

カセットテープにデータを記録

Mon, 19 Mar 2012 00:00:06 +0900

人生で初めて使い始めた Macintosh には、既に内蔵ハードディスク、CD ドライブ、FD ドライブが搭載されていたので、コンパクトカセット(音楽カセットテープ)を補助記憶媒体としてリアルタイムに使った事がありません。父が使っていた MZ-700 を譲り受けて持っていますが、肝心のデータレコーダのゴムが劣化していて、まともに使えないのが残念です。
中学生の頃までコンパクトカセットを使って、よくラジオで流れていた好きな音楽を録音していました。そんなコンパクトカセットにデジタルデータが記録されるのが、ひどくアナログな雰囲気だけど、ちゃんとデジタルなところが魅力的で、試してみたいなあ、と考えて、MP3 プレイヤーが 500 円で買えるご時世に、安いステレオラジカセを購入した事もありました。
古いコンピュータのエミュレータ環境のツールの一つとして、コンパクトカセットの情報をデジタルデータに変換するコンバータ・ソフトは、Windows ではよく見かけていました。
Linux で使えるものはないな、と思いリポジトリを漁ってみましたが、需要がなかった模様。
アマチュア無線関連のツールや本物(？)のテープレコーダ用のツール( tar )はあっても、民生用カセット向けのツールは乏しいみたいです。

Android SDK の導入

Sun, 18 Mar 2012 00:00:21 +0900

Ubuntu 11.10 に NEC LifeTouch NOTE をつないで、いじくる時に操作したメモです。基本的には、以下の手順で OK なはず。

android-sdk_r*-linux.tgz のダウンロード、解凍。
tools/android update sdk --no-ui の実行。

下記では、Java SDK をインストールしていなかったので、その導入からしています。

Xv6を使ってみる

Fri, 16 Dec 2011 00:00:45 +0900

Xv6 というのは、マサチューセッツ工科大の院生向け教材として、UNIX V6 を ANSI の C で書き直し、x86 CPU 向けに書き直したオペレーティング・システムです。

講義用の資料とソースコード、ビルド環境( MakeFile や QEMU オプション )などの一式が、無料で公開・配布されています。詳しい情報は、下記のページを参考にしてください。

端末キャプチャツール「captty」

Mon, 24 Oct 2011 00:00:54 +0900

筑波大の古橋貞之(viver)氏が開発されたターミナルのキャプチャツールcapttyを使ってみました。ターミナルサイズの動的な変更のサポートに対応しています。

また、氏の提供されているサービス partty!.orgを組み合わせる事により、ターミナルの内容を他の人とシェアしたり、ブログに貼り付ける事が出来るなど素晴しい仕様。

準備

github より、cloneして、ビルドします。

git clone https://github.com/frsyuki/captty.git
./autogen.sh
./configure
make all

エラーが発生しなければ、src ディレクトリにバイナリが生成されます。

JAN コードのチェックスクリプト

Tue, 27 Sep 2011 00:00:30 +0900

財団法人流通システム開発センターで公開されている JAN コードの仕様に基き、与えられた文字列が正しい JAN コードであるか否かを返すシェルスクリプト関数です。

JANコードの仕様

0 から 9 までの数字 8 桁または 13 桁から構成される。
桁数に関わらず、末尾の 1 桁はチェックデジット(誤り検出符号)として用いられる。
チェックデジットを除く部分は、企業コードとアイテムコードから成る。

チェックデジットの算出方法

奇数桁にある数の和に 3 をかける。
チェックデジットを除く偶数桁にある数の和を求める。
1 と 2 の和で求められた数の下 1 桁を n とする。
n が 0 の時、チェックデジットは 0 である。
n > 0 の時、チェックデジットは 10 – n である。

計算して求められたチェックデジットと、与えられた JAN コードのチェックデジットを比較し、一致すれば正しい JAN コードとして判断します。

ビープ音でモールス信号を再生

Mon, 12 Sep 2011 00:00:48 +0900

以前、ブログでも取りあげたbsdgamesパッケージにあるmorseコマンドを利用して、ビープ音(PCスピーカー)でモールス信号を再生するスクリプトを書いてみました。ビープ音の再生には、自由に周波数と再生時間を指定する事が出来るbeepコマンドを利用しました。

#!/usr/bin/env bash

f=1800 # 周波数

#正確な再生単位
b=60 # 単位長さ
t=$(($b*1)) # 短点長さ
w=$(($b*3)) # 長点長さ
s=$(($b*1)) # 無音長さ
n=$(($b*3)) # 次の文字との無音長さ

#こっちの方が聞き易い気がする
#b=50 # 単位長さ
#t=$(($b*2)) # 短点長さ
#w=$(($b*6)) # 長点長さ
#s=$(($b*1)) # 無音長さ
#n=$(($b*3)) # 次の文字との無音長さ

morse $@ | while read line
do
    echo $line
    opt=$(echo '$line' | sed \
    -e 's/dit/ -n -f $f -l $t -n -f 1 -l $s/g' \
    -e 's/daw/ -n -f $f -l $w -n -f 1 -l $s/g' \
    -e 's/^ *-n *//')
    if [ "$opt" ]; then
        beep $opt -n -f 1 -l $n
    else
        beep -f 1 -l $n
    fi
done

$(()) での計算を行っている為、bash依存です。適宜、exprなどに置き換えれば他のシェルでも使えるはずです。無音部分は、周波数1Hzの音を再生する事によって実現しています。実行すると、以下のように表示され、ビープ音でモールスが再生されます。

コマンドラインから Google 翻訳を利用するスクリプト

Tue, 08 Mar 2011 00:00:58 +0900

単語の意味が分からなかったり、定形文でコレは何て言ったっけ？など、ちょこっと意味を調べたい場合、いちいち GUI のウェブブラウザを開くのもナンセンス。

そう思って、コマンドラインから Google 翻訳を使って翻訳をしてくれるスクリプトを書いてみました。タイムスタンプを見ると 2011 年の 11 月 22 日でしたが、今でもちゃんと動いているようです。