Sample program of the mbed Audio Framework for the Nucleo F746ZG

Dependencies:   amakusa mbed-dsp mbed shimabara ukifune unzen_nucleo_f746

Fork of Signal_nucleo_f746 by seiichi horie

このプログラムは『雲仙』オーディオ・フレームワークを使する、オーディオ信号処理プログラムのスケルトンです。

雲仙はオーディオ信号処理を割り込みコンテキストで実行します。割り込みコンテキストではmbedの便利な機能を使いにくいため、それらはmain()関数で実行します。管理プログラムはシリアルIO、GPIO、ファイルIOなどといったmbedの機能をそのまま使うことが出来ます。

雲仙は各種のサンプル周波数や各種のハードウェアに対応できる柔軟な設計になっています。一方で、この柔軟さは信号処理と無関係のAPIを複数呼ぶことを必要とします。結果として雲仙の柔軟性はオーディオ信号処理をする上で余計な作業を増やします。

スケルトンを使うことで、これらの問題は概ね解決します。本プロジェクトは雲仙の管理APIを可能な限りサブルーチンに押し込み、一方でサンプル周波数やブロックサイズといったコンフィギュレーション用のマクロをプログラマが変更できるようにしています。このスケルトンでは、プログラマは大きく分けて「信号処理の初期化」「信号処理アルゴリズム」「管理プログラム」の3つのコードを穴埋めしていきます。

利用方法

このページ右上の"Import to compiler"をクリックしてください。自分のmbed compilerにスケルトンがインポートされます。あとはプロジェクト名を変えて、自由に変更してください。

利用しているライブラリ

ライブラリの詳細はそれぞれのライブラリを参照してください。

  • unzen_nucleo_f746 : Nucleo F746ZG用のオーディオ・フレームワーク本体です。詳細は『雲仙』オーディオ・フレームワークを参照してください。
  • shimabara : 雲仙とペアで使う、オーディオCODECコントローラ。
  • ukifune : Nucleo F476ZG用のUI基板コントロール・ライブラリ。回路設計情報もあります。
  • amakusa : mbed-dsp 用のラッパー・クラス・ライブラリ + α
  • mbed-dsp : mbed用の公式DSPライブラリ。

利用するハードウェア

コンフィギュレーション

このスケルトンは、マクロを使ってサンプル周波数とブロックサイズを変更できます。

BLOCKSIZEマクロは main.cpp の冒頭で宣言されています。この値がNのとき、Nサンプル毎に信号処理がおこなわれます。FSマクロはmain.cppの冒頭で宣言されています。この値はサンプル周波数を変更します。

main.cpp

/*========================= Project Dependent Constants ======================*/
#define BLOCKSIZE 16        // number of the sample to be processed at once.
#define FS shimabara::Fs_48 // Fs can be Fs_32, Fs_441, Fs_48, Fs_96

信号処理アルゴリズムの初期化と実装

このスケルトンは、信号処理アルゴリズムとその初期化をひとつのClassとして実装しています。ユーザーはアルゴリズムの内部変数を含め、クラスの実装を変更することで独自のアルゴリズムを実装します。

ヘッダー・ファイルである signal_processing.h にはクラスの宣言があります。このクラス宣言にはユーザーが変更してよい部分と変更してはならない部分があります。

次のメソッド・プロトタイプは変更してはいけません。

  • SignalProcessing::SignalProcessing()
  • SignalProcessing::run()
  • SignalProcessing::set_volume()
  • SignalProcessing::enter_critical_section()
  • SignalProcessing::leave_critical_section()

次のメソッド・プロトタイプは、管理プログラムと信号処理アルゴリズムの通信用のサンプルとして実装しているものです。ユーザーが自由に変更、削除、追加してかまいません。

  • SignalProcessing::set_volume()

メンバー変数は自由に変更してください。

signal_processing.h

    // User Signal processing Class 
class SignalProcessing {
public:
        // essential members. Do not touch
    SignalProcessing( unsigned int  block_size );
    void run(           
        float rx_left_buffer[],     // array of the left input samples
        float rx_right_buffer[],    // array of the right input samples
        float tx_left_buffer[],     // place to write the left output samples
        float tx_right_buffer[],    // place to write the right output samples
        unsigned int block_size     // block size [sample]
        );
           
        // project depenedent members.
    void set_volume( float vol );
private:
        // essential members. Do not touch.
    void enter_critical_section(void);
    void leave_critical_section(void);

        // project dependent members.
    float volume_level;
};

実際のコードは signal_processing.cpp に実装します。

SignalProcessing::SignalProcessing() はコンストラクタです。信号処理の初期化が必要な場合にはここに実装します。たとえば、フィルタへの係数の設定、内部変数の初期化などがそれです。

signal_processing.cpp

        // Modify this constructor to initialize your audio algorithm.
SignalProcessing::SignalProcessing( unsigned int  block_size )
{
        // place the signal processing initializing code here.
    this->volume_level = 0.0;   // sample initializaiton
}   // End of constructor()

SignalProcessing::run() は信号処理本体です。このメソッドはスケルトンの冒頭で宣言したBLOCKSIZEサンプル周期で呼び出されます。デフォルトでは、入力オーディオ信号を出力にコピーしながら、ボリューム値で音量を変えるサンプルになっています。

signal_processing.cpp

        // Modify this method to implement your audio algorithm.
void SignalProcessing::run(           
            float rx_left_buffer[],     // array of the left input samples
            float rx_right_buffer[],    // array of the right input samples
            float tx_left_buffer[],     // place to write the left output samples
            float tx_right_buffer[],    // place to write the right output samples
            unsigned int block_size     // block size [sample]
           )
{
        // place the signal processing coce here
    for ( int i= 0; i< block_size; i++ )
    {
            tx_left_buffer[i]  = rx_left_buffer[i]  * this->volume_level;
            tx_right_buffer[i] = rx_right_buffer[i] * this->volume_level;
    }
}   // End of run()

管理プログラムとの間で通信を行うメソッドを実装する場合には、必要に応じて SignalProcessing::enter_critical_section() と SignalProcessing::leave_critical_section() によってメンバー変数アクセスを保護してください。

管理プログラムの実装

main.cpp の main() 関数には信号処理アルゴリズムの外側で実行すべき管理プログラムを書きます。一般にはUIの処理、外部との通信、ファイル・アクセスなどをここに書きます。ここではmbed SDKが提供するAPIを使うことが出来ます。

管理プログラムが信号処理アルゴリズムと通信する場合には、SignalProcessing * 型変数 process を介して通信を行ってください。

main.cpp

int main() 
{    
    uint32_t pushing, releasing, holding;

        // start audio. Do not touch
    initialize_system();
 
       // main loop. Signal processing is done in background.
    while(1)     
    {       // place your foreground program here.

            // get volume from UI panel, then apply it to signal processing.
        process->set_volume( ukifune::get_volume(0) );   
       
            // sample usage of button switch detection
        ukifune::get_button_state( pushing, releasing, holding);

            // pushing detection demo
        if ( pushing & (1 << ukifune::swm1 ) )      // is SWM1 switch pusshing down?
            ukifune::toggle_led( ukifune::led1_1 ); // then, toggle LED1_1 

            // releasing detection demo     
        if ( releasing & (1 << ukifune::swm2 ) )    // is SWM2 switch releasing? 
            ukifune::toggle_led( ukifune::led2_1 ); // then toggle LED2_1
       
            // holding detection demo     
        if ( holding & (1 << ukifune::swm3 ) )    // is SWM3 switch holding? 
            ukifune::turn_led_on( ukifune::led3_1 );    // then turn LED3_1 on
        else
            ukifune::turn_led_off( ukifune::led3_1 );   // else off

       
            // you have to call tick() every 20mS-50mS if you need get_volume()
        wait(0.05);
        ukifune::tick();
    }
}   // End of main

Committer:
shorie
Date:
Sun Dec 11 21:05:20 2016 +0000
Revision:
1:98ddcbbe10ba
Parent:
0:a837eeab3ca6
Child:
2:d5028a37f17b
Beta establishment. Demonstration of Unzen.

Who changed what in which revision?

UserRevisionLine numberNew contents of line
shorie 1:98ddcbbe10ba 1 #include "mbed.h"
shorie 1:98ddcbbe10ba 2
shorie 1:98ddcbbe10ba 3
shorie 0:a837eeab3ca6 4 #include "unzen.h" // audio framework include file
shorie 1:98ddcbbe10ba 5 #include "umb_adau1361a.h" // audio codec contoler include file
shorie 1:98ddcbbe10ba 6 #include "amakusa.h" // audio signal processing class library.
shorie 0:a837eeab3ca6 7
shorie 1:98ddcbbe10ba 8 #define CODEC_I2C_ADDR 0x38 // Address of the ADAU-1361A
shorie 0:a837eeab3ca6 9
shorie 0:a837eeab3ca6 10 DigitalOut myled1(LED1);
shorie 0:a837eeab3ca6 11
shorie 1:98ddcbbe10ba 12 amakusa::OSCSinCos osc( 440.0, 48000 ); // freq=440Hz, Fs=48kHz.
shorie 0:a837eeab3ca6 13
shorie 0:a837eeab3ca6 14 // customer signal processing initialization call back.
shorie 0:a837eeab3ca6 15 void init_callback(
shorie 0:a837eeab3ca6 16 unsigned int block_size // block size [sample]
shorie 0:a837eeab3ca6 17 )
shorie 0:a837eeab3ca6 18 {
shorie 0:a837eeab3ca6 19 // place initialization code here
shorie 0:a837eeab3ca6 20 }
shorie 0:a837eeab3ca6 21
shorie 0:a837eeab3ca6 22
shorie 0:a837eeab3ca6 23 // customer signal processing call back.
shorie 0:a837eeab3ca6 24 void process_callback(
shorie 0:a837eeab3ca6 25 float rx_left_buffer[], // array of the left input samples
shorie 0:a837eeab3ca6 26 float rx_right_buffer[], // array of the right input samples
shorie 0:a837eeab3ca6 27 float tx_left_buffer[], // place to write the left output samples
shorie 0:a837eeab3ca6 28 float tx_right_buffer[], // place to write the left output samples
shorie 0:a837eeab3ca6 29 unsigned int block_size // block size [sample]
shorie 0:a837eeab3ca6 30 )
shorie 0:a837eeab3ca6 31 {
shorie 1:98ddcbbe10ba 32 // generate tone.
shorie 1:98ddcbbe10ba 33 osc.run( tx_left_buffer, block_size );
shorie 1:98ddcbbe10ba 34
shorie 1:98ddcbbe10ba 35 // copy left to right
shorie 0:a837eeab3ca6 36 for ( int i=0; i<block_size; i++) // for all sample
shorie 0:a837eeab3ca6 37 {
shorie 1:98ddcbbe10ba 38 tx_right_buffer[i] = tx_left_buffer[i] *= 0.5F;
shorie 0:a837eeab3ca6 39
shorie 0:a837eeab3ca6 40 }
shorie 0:a837eeab3ca6 41 }
shorie 0:a837eeab3ca6 42
shorie 0:a837eeab3ca6 43
shorie 0:a837eeab3ca6 44
shorie 0:a837eeab3ca6 45 int main()
shorie 0:a837eeab3ca6 46 {
shorie 0:a837eeab3ca6 47 // I2C is essential to talk with ADAU1361
shorie 0:a837eeab3ca6 48 I2C i2c(D14, D15);
shorie 0:a837eeab3ca6 49
shorie 0:a837eeab3ca6 50 // create an audio codec contoler
shorie 1:98ddcbbe10ba 51 shimabara::UMB_ADAU1361A codec(shimabara::Fs_48, i2c, CODEC_I2C_ADDR ); // Fs can be Fs_32, Fs_441, Fs_48, Fs_96
shorie 0:a837eeab3ca6 52
shorie 0:a837eeab3ca6 53 // create an audio framework by singlton pattern
shorie 0:a837eeab3ca6 54 unzen::Framework audio;
shorie 0:a837eeab3ca6 55
shorie 0:a837eeab3ca6 56 // Set I3C clock to 100kHz
shorie 0:a837eeab3ca6 57 i2c.frequency( 100000 );
shorie 0:a837eeab3ca6 58
shorie 0:a837eeab3ca6 59
shorie 0:a837eeab3ca6 60 // Configure the optional block size of signal processing. By default, it is 1[Sample]
shorie 0:a837eeab3ca6 61 // audio.set_block_size(16);
shorie 0:a837eeab3ca6 62
shorie 0:a837eeab3ca6 63
shorie 0:a837eeab3ca6 64 // Start the ADAU1361. Audio codec starts to generate the I2C signals
shorie 0:a837eeab3ca6 65 codec.start();
shorie 0:a837eeab3ca6 66
shorie 0:a837eeab3ca6 67 // Start the audio framework on ARM processor.
shorie 0:a837eeab3ca6 68 audio.start( init_callback, process_callback); // path the initializaiton and process call back to framework
shorie 0:a837eeab3ca6 69
shorie 1:98ddcbbe10ba 70 codec.set_hp_output_gain( -3, -3 );
shorie 1:98ddcbbe10ba 71 codec.set_line_output_gain( -3, -3 );
shorie 0:a837eeab3ca6 72
shorie 0:a837eeab3ca6 73 // periodically changing gain for test
shorie 0:a837eeab3ca6 74 while(1)
shorie 0:a837eeab3ca6 75 {
shorie 1:98ddcbbe10ba 76 /*
shorie 1:98ddcbbe10ba 77 myled1 = 1;
shorie 1:98ddcbbe10ba 78 wait(0.2);
shorie 1:98ddcbbe10ba 79 myled1 = 0;
shorie 1:98ddcbbe10ba 80 wait(0.2);
shorie 1:98ddcbbe10ba 81 */
shorie 0:a837eeab3ca6 82 }
shorie 0:a837eeab3ca6 83 }