fkubota / anima

音データ用ラベリングツール。Linuxなら環境必要構築不要で使える。ラベルのレコメンド機能もついている。

このアプリはなに？

このアプリを参考につくりました。 ヒューマンインザループ**で作られた音データをラベリングするツールです。あるターゲット音1種類を探す時に使います。例えば音声ファイルの中にクシャミが含まれていてその音をラベリングしたいなどです。
また、このツールにはラベルレコメンド機能がついています。ラベリングしたデータに似たデータを自動で抽出しレコメンドしてくれます。レコメンドされたラベルに対し正否を判断しフィードバックすることでレコメンド性能は徐々に向上していきます。

使い方

• また今度書くやで

Installation

• めっちゃ簡単に動かしたい人向けの説明

  • 実行ファイルがビルドされているのでそれを動かすだけです
  • 手順
    1. リポジトリをクローンする
    2. chmod u+x anima/app/dist/anima/anima <--- 実行権限付与
    3. ./anima/app/dist/anima/anima <--- 実行

• developer 向けの説明

  • また今度書くやで

build

• build command
  • cd app
  • pyinstaller main.spec
• sklearnとscipyのビルドをするのはちょっとむずかしい。
• app/main.spec ファイルに以下を書き足したら動いた。

hiddenimports=['scipy.special.cython_special', 'sklearn.utils._cython_blas', 'sklearn.neighbors._typedefs', 'sklearn.neighbors._quad_tree', 'sklearn.tree', 'sklearn.tree._utils'],

anima's Issues

最初の特徴量抽出のときプログレスバーを出す

リージョンとラベルリストの結合を行う

• ラベルを振る--> find ボタン --> リージョンの色が変わる&触れなくなる 機能の実装

export機能の追加。ポジティブラベルをcsvで

region pair のクラスの作成

音楽再生機能を用意

ノートブックで特徴量、ラベル、セグメント管理の実験を行う

musicplayer widgetを作成

再生中でもクリックしたところに飛ぶようにする

target_regionの色を赤くする

urlの取得をファイルダイアログで行う

ビルドしてみる

pyinstallerかな

クリックしたところから再生する機能を実装

listクリックで対応領域にジャンプする

• リストクリック-->bar移動
• リストクリック--> focus region も移動

アイコンを設定

positive/negative ボタンで色がつくようにする

barのzvalueを大きくする

重なってる領域を指定できないようにする

再生した音がおかしい。

clicked_btn_find に リージョンクラスチェックを実装

リージョンのクラスにNoneが混ざってないかチェック。

同じところがレコメンドされてしまう

guiからのregion(label付き) ---> レコメンド を実装

ラベルリージョン機能の作成

export table の横幅の変更

アプリ名を変更

positiveとnegativeの色が逆(positiveが青)

横軸を時刻表示にする

window titleを設定

特徴量をアップデートする

特徴量抽出は1回だけでいいので、それを反映させる

スペクトログラムを表示する機能を追加

sample music を追加

main windowのwidgetを作成

スコアを計算する関数を実装

scalerを追加(df_handler.py)

bar を動かしたら、muscplayer の再生場所も変更する

ラベル管理画面UIを作成する

関連度を計算した後にレコメンドするんだけど、関連度とレコメンドの紐付けができてない

同じところがレコメンドされる

main.pyを作成

pyqt5のmultimediaを試してみる

musicplayerからいろいろ情報取得できるかも。

recommendしたときのバグを修正する

recommend_region を2つ作らないといけない。

main window にmusic player を実装

weight の計算ができるようにする

波形を表示するwidgetを作成

findボタンでリストがリセットされるようにする

バーの色が見づらい。色変える。線を太くするなど対策をする。

signal windowを上下に用意する

レコメンドのリストと、リージョンが1対1になってるか確認

class_をlabelにリファクタリング

README.md に使い方書く