2017-01-01から1年間の記事一覧

novelty detectionのサーベイ論文

A review of novelty detection A review of novelty detection - ScienceDirect http://www.robots.ox.ac.uk/~davidc/pubs/NDreview2014.pdf

MinimalRNNをTensorFlowで実装した(だけ)

もはや「実装した」と呼べるかどうか。既存のコードを少しいじっただけなので。 論文 [1711.06788] MinimalRNN: Toward More Interpretable and Trainable Recurrent Neural Networks 実装 A TensorFlow implementation of MinimalRNN. · GitHub 論文を要約…

Simple Recurrent Unit をTensorFlowで実装した

論文 [1709.02755] Training RNNs as Fast as CNNs 実装 A TensorFlow implementation of Simple Recurrent Unit (SRU). · GitHub 論文の主旨はRNN学習(例えばLSTM)の高速化であるが、上記実装は論文の式の通りにTensorFlowで組んだだけなので、実行速度は遅…

Chaos Free NetworkをTensorflowで実装した

CFN (Chaos-Free Network) 論文 A recurrent neural network without chaos 実装 An implementation of Chaos-Free Network (CFN) in TensorFlow · GitHub

Multiplicative LSTM (Workshop Track in ICLR 2017)をTensorFlowで実装した

はじめに 表題の通り、ICLR 2017のWorkshop Trackで発表されたMultiplicative LSTMを実装した。 論文 Ben Krause, Iain Murray, Steve Renals and Liang Lu, "Multiplicative LSTM for sequence modelling," Workshop Track in ICLR 2017. URL https://openr…

Delta RNNのTensorFlow実装をv0.12で動くようにした

以下のリポジトリにDelta RNNのTensorFlow実装があるのだが、変数のスコープまわりの実装が全然ダメで動かなかったので、フォークして修正を加えたということ。 github.com 修正後の実装は以下。論文 [1703.08864] Learning Simpler Language Models with th…

Zoneout正規化をLSTMに実装した by TensorFlow

論文 Zoneout: Regularizing RNNs by Randomly Preserving Hidden Activations実装 An implementation of zoneout regularizer on LSTM-RNN in Tensorflow · GitHub 著者によるプレゼン動画(直接サイトに飛んでみたほうが良いかも) videolectures.net要する…

音声/音楽生成・音響処理分野におけるEnd-to-End系の論文情報とか各種スライド情報とかを忘れないうちにメモ

なんだか最近、当該分野でEnd-to-End系の論文が急に増えたなぁということで、忘れないうちに自分用にメモ。面白そうな論文情報も含めて。もうね、正直言ってお腹いっぱいなんですけど、流れには逆らえないですね。ほとんどarXivなので、信頼性は担保されてお…