Sample program of the mbed Audio Framework for the Nucleo F746ZG

Dependencies:   amakusa mbed-dsp mbed shimabara ukifune unzen_nucleo_f746

Fork of Signal_nucleo_f746 by seiichi horie

このプログラムは『雲仙』オーディオ・フレームワークを使する、オーディオ信号処理プログラムのスケルトンです。

雲仙はオーディオ信号処理を割り込みコンテキストで実行します。割り込みコンテキストではmbedの便利な機能を使いにくいため、それらはmain()関数で実行します。管理プログラムはシリアルIO、GPIO、ファイルIOなどといったmbedの機能をそのまま使うことが出来ます。

雲仙は各種のサンプル周波数や各種のハードウェアに対応できる柔軟な設計になっています。一方で、この柔軟さは信号処理と無関係のAPIを複数呼ぶことを必要とします。結果として雲仙の柔軟性はオーディオ信号処理をする上で余計な作業を増やします。

スケルトンを使うことで、これらの問題は概ね解決します。本プロジェクトは雲仙の管理APIを可能な限りサブルーチンに押し込み、一方でサンプル周波数やブロックサイズといったコンフィギュレーション用のマクロをプログラマが変更できるようにしています。このスケルトンでは、プログラマは大きく分けて「信号処理の初期化」「信号処理アルゴリズム」「管理プログラム」の3つのコードを穴埋めしていきます。

利用方法

このページ右上の"Import to compiler"をクリックしてください。自分のmbed compilerにスケルトンがインポートされます。あとはプロジェクト名を変えて、自由に変更してください。

利用しているライブラリ

ライブラリの詳細はそれぞれのライブラリを参照してください。

  • unzen_nucleo_f746 : Nucleo F746ZG用のオーディオ・フレームワーク本体です。詳細は『雲仙』オーディオ・フレームワークを参照してください。
  • shimabara : 雲仙とペアで使う、オーディオCODECコントローラ。
  • ukifune : Nucleo F476ZG用のUI基板コントロール・ライブラリ。回路設計情報もあります。
  • amakusa : mbed-dsp 用のラッパー・クラス・ライブラリ + α
  • mbed-dsp : mbed用の公式DSPライブラリ。

利用するハードウェア

コンフィギュレーション

このスケルトンは、マクロを使ってサンプル周波数とブロックサイズを変更できます。

BLOCKSIZEマクロは main.cpp の冒頭で宣言されています。この値がNのとき、Nサンプル毎に信号処理がおこなわれます。FSマクロはmain.cppの冒頭で宣言されています。この値はサンプル周波数を変更します。

main.cpp

/*========================= Project Dependent Constants ======================*/
#define BLOCKSIZE 16        // number of the sample to be processed at once.
#define FS shimabara::Fs_48 // Fs can be Fs_32, Fs_441, Fs_48, Fs_96

信号処理アルゴリズムの初期化と実装

このスケルトンは、信号処理アルゴリズムとその初期化をひとつのClassとして実装しています。ユーザーはアルゴリズムの内部変数を含め、クラスの実装を変更することで独自のアルゴリズムを実装します。

ヘッダー・ファイルである signal_processing.h にはクラスの宣言があります。このクラス宣言にはユーザーが変更してよい部分と変更してはならない部分があります。

次のメソッド・プロトタイプは変更してはいけません。

  • SignalProcessing::SignalProcessing()
  • SignalProcessing::run()
  • SignalProcessing::set_volume()
  • SignalProcessing::enter_critical_section()
  • SignalProcessing::leave_critical_section()

次のメソッド・プロトタイプは、管理プログラムと信号処理アルゴリズムの通信用のサンプルとして実装しているものです。ユーザーが自由に変更、削除、追加してかまいません。

  • SignalProcessing::set_volume()

メンバー変数は自由に変更してください。

signal_processing.h

    // User Signal processing Class 
class SignalProcessing {
public:
        // essential members. Do not touch
    SignalProcessing( unsigned int  block_size );
    void run(           
        float rx_left_buffer[],     // array of the left input samples
        float rx_right_buffer[],    // array of the right input samples
        float tx_left_buffer[],     // place to write the left output samples
        float tx_right_buffer[],    // place to write the right output samples
        unsigned int block_size     // block size [sample]
        );
           
        // project depenedent members.
    void set_volume( float vol );
private:
        // essential members. Do not touch.
    void enter_critical_section(void);
    void leave_critical_section(void);

        // project dependent members.
    float volume_level;
};

実際のコードは signal_processing.cpp に実装します。

SignalProcessing::SignalProcessing() はコンストラクタです。信号処理の初期化が必要な場合にはここに実装します。たとえば、フィルタへの係数の設定、内部変数の初期化などがそれです。

signal_processing.cpp

        // Modify this constructor to initialize your audio algorithm.
SignalProcessing::SignalProcessing( unsigned int  block_size )
{
        // place the signal processing initializing code here.
    this->volume_level = 0.0;   // sample initializaiton
}   // End of constructor()

SignalProcessing::run() は信号処理本体です。このメソッドはスケルトンの冒頭で宣言したBLOCKSIZEサンプル周期で呼び出されます。デフォルトでは、入力オーディオ信号を出力にコピーしながら、ボリューム値で音量を変えるサンプルになっています。

signal_processing.cpp

        // Modify this method to implement your audio algorithm.
void SignalProcessing::run(           
            float rx_left_buffer[],     // array of the left input samples
            float rx_right_buffer[],    // array of the right input samples
            float tx_left_buffer[],     // place to write the left output samples
            float tx_right_buffer[],    // place to write the right output samples
            unsigned int block_size     // block size [sample]
           )
{
        // place the signal processing coce here
    for ( int i= 0; i< block_size; i++ )
    {
            tx_left_buffer[i]  = rx_left_buffer[i]  * this->volume_level;
            tx_right_buffer[i] = rx_right_buffer[i] * this->volume_level;
    }
}   // End of run()

管理プログラムとの間で通信を行うメソッドを実装する場合には、必要に応じて SignalProcessing::enter_critical_section() と SignalProcessing::leave_critical_section() によってメンバー変数アクセスを保護してください。

管理プログラムの実装

main.cpp の main() 関数には信号処理アルゴリズムの外側で実行すべき管理プログラムを書きます。一般にはUIの処理、外部との通信、ファイル・アクセスなどをここに書きます。ここではmbed SDKが提供するAPIを使うことが出来ます。

管理プログラムが信号処理アルゴリズムと通信する場合には、SignalProcessing * 型変数 process を介して通信を行ってください。

main.cpp

int main() 
{    
    uint32_t pushing, releasing, holding;

        // start audio. Do not touch
    initialize_system();
 
       // main loop. Signal processing is done in background.
    while(1)     
    {       // place your foreground program here.

            // get volume from UI panel, then apply it to signal processing.
        process->set_volume( ukifune::get_volume(0) );   
       
            // sample usage of button switch detection
        ukifune::get_button_state( pushing, releasing, holding);

            // pushing detection demo
        if ( pushing & (1 << ukifune::swm1 ) )      // is SWM1 switch pusshing down?
            ukifune::toggle_led( ukifune::led1_1 ); // then, toggle LED1_1 

            // releasing detection demo     
        if ( releasing & (1 << ukifune::swm2 ) )    // is SWM2 switch releasing? 
            ukifune::toggle_led( ukifune::led2_1 ); // then toggle LED2_1
       
            // holding detection demo     
        if ( holding & (1 << ukifune::swm3 ) )    // is SWM3 switch holding? 
            ukifune::turn_led_on( ukifune::led3_1 );    // then turn LED3_1 on
        else
            ukifune::turn_led_off( ukifune::led3_1 );   // else off

       
            // you have to call tick() every 20mS-50mS if you need get_volume()
        wait(0.05);
        ukifune::tick();
    }
}   // End of main

Committer:
shorie
Date:
Sat Jan 21 07:17:14 2017 +0000
Revision:
3:1b420050bdda
Parent:
2:d5028a37f17b
Child:
6:486b1cb03e61
Commit for test

Who changed what in which revision?

UserRevisionLine numberNew contents of line
shorie 1:98ddcbbe10ba 1 #include "mbed.h"
shorie 1:98ddcbbe10ba 2
shorie 0:a837eeab3ca6 3 #include "unzen.h" // audio framework include file
shorie 1:98ddcbbe10ba 4 #include "umb_adau1361a.h" // audio codec contoler include file
shorie 3:1b420050bdda 5 #include "amakusa.h" // audio signal processing class library.
shorie 3:1b420050bdda 6 #include "ukifune.h" // UI board support routines
shorie 3:1b420050bdda 7
shorie 3:1b420050bdda 8 #define BLOCKSIZE 1
shorie 3:1b420050bdda 9 #define TAPS 200
shorie 0:a837eeab3ca6 10
shorie 1:98ddcbbe10ba 11 #define CODEC_I2C_ADDR 0x38 // Address of the ADAU-1361A
shorie 2:d5028a37f17b 12 #define AD7999 (0x29<<1)
shorie 2:d5028a37f17b 13 #define ADCBUFSIZE 8
shorie 2:d5028a37f17b 14
shorie 3:1b420050bdda 15
shorie 0:a837eeab3ca6 16 DigitalOut myled1(LED1);
shorie 2:d5028a37f17b 17 float gain = 1.0;
shorie 0:a837eeab3ca6 18
shorie 3:1b420050bdda 19 amakusa::OSCSinCos *osc;
shorie 3:1b420050bdda 20 amakusa::FIRFilter *filter;
shorie 3:1b420050bdda 21 float coeff[TAPS];
shorie 2:d5028a37f17b 22
shorie 2:d5028a37f17b 23 void parse_adc( char * buf, int &ch, int &data );
shorie 0:a837eeab3ca6 24
shorie 0:a837eeab3ca6 25 // customer signal processing initialization call back.
shorie 0:a837eeab3ca6 26 void init_callback(
shorie 0:a837eeab3ca6 27 unsigned int block_size // block size [sample]
shorie 0:a837eeab3ca6 28 )
shorie 0:a837eeab3ca6 29 {
shorie 0:a837eeab3ca6 30 // place initialization code here
shorie 3:1b420050bdda 31 osc = new amakusa::OSCSinCos( 440.0, 48000, block_size ); // freq=440Hz, Fs=48kHz.
shorie 3:1b420050bdda 32
shorie 3:1b420050bdda 33 filter = new amakusa::FIRFilter( TAPS, coeff, block_size ); //
shorie 0:a837eeab3ca6 34 }
shorie 0:a837eeab3ca6 35
shorie 0:a837eeab3ca6 36
shorie 0:a837eeab3ca6 37 // customer signal processing call back.
shorie 0:a837eeab3ca6 38 void process_callback(
shorie 0:a837eeab3ca6 39 float rx_left_buffer[], // array of the left input samples
shorie 0:a837eeab3ca6 40 float rx_right_buffer[], // array of the right input samples
shorie 0:a837eeab3ca6 41 float tx_left_buffer[], // place to write the left output samples
shorie 0:a837eeab3ca6 42 float tx_right_buffer[], // place to write the left output samples
shorie 0:a837eeab3ca6 43 unsigned int block_size // block size [sample]
shorie 0:a837eeab3ca6 44 )
shorie 0:a837eeab3ca6 45 {
shorie 3:1b420050bdda 46 #if 0
shorie 1:98ddcbbe10ba 47 // generate tone.
shorie 3:1b420050bdda 48 osc->run( tx_left_buffer );
shorie 3:1b420050bdda 49 #elif 0
shorie 3:1b420050bdda 50 filter->run( rx_left_buffer, tx_left_buffer );
shorie 3:1b420050bdda 51 #else
shorie 3:1b420050bdda 52 for ( int i=0; i<block_size; i++) // for all sample
shorie 3:1b420050bdda 53 {
shorie 3:1b420050bdda 54 tx_right_buffer[i] = atan2( rx_right_buffer[i], rx_left_buffer[i] );
shorie 3:1b420050bdda 55
shorie 3:1b420050bdda 56 }
shorie 3:1b420050bdda 57
shorie 3:1b420050bdda 58 #endif
shorie 1:98ddcbbe10ba 59
shorie 1:98ddcbbe10ba 60 // copy left to right
shorie 0:a837eeab3ca6 61 for ( int i=0; i<block_size; i++) // for all sample
shorie 0:a837eeab3ca6 62 {
shorie 2:d5028a37f17b 63 tx_right_buffer[i] = tx_left_buffer[i] *= 0.5F * gain;
shorie 0:a837eeab3ca6 64
shorie 0:a837eeab3ca6 65 }
shorie 0:a837eeab3ca6 66 }
shorie 0:a837eeab3ca6 67
shorie 0:a837eeab3ca6 68
shorie 0:a837eeab3ca6 69
shorie 0:a837eeab3ca6 70 int main()
shorie 0:a837eeab3ca6 71 {
shorie 2:d5028a37f17b 72 char adcbuf[ADCBUFSIZE];
shorie 2:d5028a37f17b 73 int dacch, dacdata;
shorie 2:d5028a37f17b 74
shorie 0:a837eeab3ca6 75 // I2C is essential to talk with ADAU1361
shorie 0:a837eeab3ca6 76 I2C i2c(D14, D15);
shorie 0:a837eeab3ca6 77
shorie 0:a837eeab3ca6 78 // create an audio codec contoler
shorie 1:98ddcbbe10ba 79 shimabara::UMB_ADAU1361A codec(shimabara::Fs_48, i2c, CODEC_I2C_ADDR ); // Fs can be Fs_32, Fs_441, Fs_48, Fs_96
shorie 0:a837eeab3ca6 80
shorie 0:a837eeab3ca6 81 // create an audio framework by singlton pattern
shorie 0:a837eeab3ca6 82 unzen::Framework audio;
shorie 0:a837eeab3ca6 83
shorie 0:a837eeab3ca6 84 // Set I3C clock to 100kHz
shorie 0:a837eeab3ca6 85 i2c.frequency( 100000 );
shorie 0:a837eeab3ca6 86
shorie 0:a837eeab3ca6 87
shorie 0:a837eeab3ca6 88 // Configure the optional block size of signal processing. By default, it is 1[Sample]
shorie 0:a837eeab3ca6 89 // audio.set_block_size(16);
shorie 0:a837eeab3ca6 90
shorie 0:a837eeab3ca6 91
shorie 0:a837eeab3ca6 92 // Start the ADAU1361. Audio codec starts to generate the I2C signals
shorie 0:a837eeab3ca6 93 codec.start();
shorie 0:a837eeab3ca6 94
shorie 3:1b420050bdda 95 ukifune::init( & audio );
shorie 3:1b420050bdda 96
shorie 3:1b420050bdda 97 audio.set_block_size(BLOCKSIZE);
shorie 3:1b420050bdda 98
shorie 0:a837eeab3ca6 99 // Start the audio framework on ARM processor.
shorie 0:a837eeab3ca6 100 audio.start( init_callback, process_callback); // path the initializaiton and process call back to framework
shorie 0:a837eeab3ca6 101
shorie 1:98ddcbbe10ba 102 codec.set_hp_output_gain( -3, -3 );
shorie 1:98ddcbbe10ba 103 codec.set_line_output_gain( -3, -3 );
shorie 0:a837eeab3ca6 104
shorie 0:a837eeab3ca6 105 // periodically changing gain for test
shorie 0:a837eeab3ca6 106 while(1)
shorie 0:a837eeab3ca6 107 {
shorie 2:d5028a37f17b 108
shorie 2:d5028a37f17b 109 i2c.read( AD7999, adcbuf, ADCBUFSIZE);
shorie 2:d5028a37f17b 110 parse_adc( &adcbuf[0],dacch, dacdata );
shorie 2:d5028a37f17b 111 gain = dacdata / 255.0;
shorie 1:98ddcbbe10ba 112 /*
shorie 1:98ddcbbe10ba 113 myled1 = 1;
shorie 1:98ddcbbe10ba 114 wait(0.2);
shorie 1:98ddcbbe10ba 115 myled1 = 0;
shorie 1:98ddcbbe10ba 116 wait(0.2);
shorie 1:98ddcbbe10ba 117 */
shorie 0:a837eeab3ca6 118 }
shorie 2:d5028a37f17b 119 }
shorie 2:d5028a37f17b 120
shorie 2:d5028a37f17b 121 void parse_adc( char * buf, int &ch, int &data )
shorie 2:d5028a37f17b 122 {
shorie 2:d5028a37f17b 123 ch = ( buf[0] & 0x30 ) >> 4;
shorie 2:d5028a37f17b 124 data =
shorie 2:d5028a37f17b 125 ( buf[0] & 0x0F ) << 4 |
shorie 2:d5028a37f17b 126 ( buf[1] & 0xF0 ) >> 4;
shorie 2:d5028a37f17b 127
shorie 0:a837eeab3ca6 128 }