Add audio loopback test
This commit is contained in:
@@ -25,7 +25,10 @@
|
|||||||
#include "es7210.h"
|
#include "es7210.h"
|
||||||
#include <Audio.h>
|
#include <Audio.h>
|
||||||
#include <driver/i2s.h>
|
#include <driver/i2s.h>
|
||||||
#include <esp_vad.h>
|
|
||||||
|
// By default, the audio pass-through speaker is used for testing, and esp_sr can also be used for noise detection.
|
||||||
|
// #define USE_ESP_VAD
|
||||||
|
|
||||||
|
|
||||||
#define TOUCH_MODULES_GT911
|
#define TOUCH_MODULES_GT911
|
||||||
#include "TouchLib.h"
|
#include "TouchLib.h"
|
||||||
@@ -83,18 +86,24 @@ static const DemoEvent event[] = {
|
|||||||
DEMO_SLEEP_BTN_CLICK_EVENT,
|
DEMO_SLEEP_BTN_CLICK_EVENT,
|
||||||
};
|
};
|
||||||
|
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
|
#include <esp_vad.h>
|
||||||
|
int16_t *vad_buff;
|
||||||
|
vad_handle_t vad_inst;
|
||||||
|
const size_t vad_buffer_size = VAD_BUFFER_LENGTH * sizeof(short);
|
||||||
|
#else
|
||||||
|
uint16_t loopbackBuffer[3200] = {0};
|
||||||
|
#endif
|
||||||
|
|
||||||
TouchLib *touch = NULL;
|
TouchLib *touch = NULL;
|
||||||
SX1262 radio = new Module(RADIO_CS_PIN, RADIO_DIO1_PIN, RADIO_RST_PIN, RADIO_BUSY_PIN);
|
SX1262 radio = new Module(RADIO_CS_PIN, RADIO_DIO1_PIN, RADIO_RST_PIN, RADIO_BUSY_PIN);
|
||||||
TFT_eSPI tft;
|
TFT_eSPI tft;
|
||||||
Audio audio;
|
Audio audio;
|
||||||
size_t bytes_read;
|
size_t bytes_read;
|
||||||
uint8_t status;
|
uint8_t status;
|
||||||
int16_t *vad_buff;
|
|
||||||
vad_handle_t vad_inst;
|
|
||||||
TaskHandle_t playHandle = NULL;
|
TaskHandle_t playHandle = NULL;
|
||||||
TaskHandle_t radioHandle = NULL;
|
TaskHandle_t radioHandle = NULL;
|
||||||
|
|
||||||
const size_t vad_buffer_size = VAD_BUFFER_LENGTH * sizeof(short);
|
|
||||||
static lv_obj_t *vad_btn_label;
|
static lv_obj_t *vad_btn_label;
|
||||||
static uint32_t vad_detected_counter = 0;
|
static uint32_t vad_detected_counter = 0;
|
||||||
static TaskHandle_t vadTaskHandler;
|
static TaskHandle_t vadTaskHandler;
|
||||||
@@ -147,9 +156,6 @@ void setBrightness(uint8_t value)
|
|||||||
level = value;
|
level = value;
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
void setFlag(void)
|
void setFlag(void)
|
||||||
{
|
{
|
||||||
// check if the interrupt is enabled
|
// check if the interrupt is enabled
|
||||||
@@ -338,10 +344,7 @@ bool setupCoder()
|
|||||||
ret_val |= es7210_adc_config_i2s(cfg.codec_mode, &cfg.i2s_iface);
|
ret_val |= es7210_adc_config_i2s(cfg.codec_mode, &cfg.i2s_iface);
|
||||||
ret_val |= es7210_adc_set_gain(
|
ret_val |= es7210_adc_set_gain(
|
||||||
(es7210_input_mics_t)(ES7210_INPUT_MIC1 | ES7210_INPUT_MIC2),
|
(es7210_input_mics_t)(ES7210_INPUT_MIC1 | ES7210_INPUT_MIC2),
|
||||||
(es7210_gain_value_t)GAIN_0DB);
|
(es7210_gain_value_t)GAIN_6DB);
|
||||||
ret_val |= es7210_adc_set_gain(
|
|
||||||
(es7210_input_mics_t)(ES7210_INPUT_MIC3 | ES7210_INPUT_MIC4),
|
|
||||||
(es7210_gain_value_t)GAIN_37_5DB);
|
|
||||||
ret_val |= es7210_adc_ctrl_state(cfg.codec_mode, AUDIO_HAL_CTRL_START);
|
ret_val |= es7210_adc_ctrl_state(cfg.codec_mode, AUDIO_HAL_CTRL_START);
|
||||||
return ret_val == ESP_OK;
|
return ret_val == ESP_OK;
|
||||||
|
|
||||||
@@ -521,6 +524,7 @@ bool checkKb()
|
|||||||
return false;
|
return false;
|
||||||
}
|
}
|
||||||
|
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
void vadTask(void *params)
|
void vadTask(void *params)
|
||||||
{
|
{
|
||||||
Serial.println("vadTask(void *params)");
|
Serial.println("vadTask(void *params)");
|
||||||
@@ -550,7 +554,26 @@ void vadTask(void *params)
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
void setupMicphoneI2S(i2s_port_t i2s_ch)
|
#else
|
||||||
|
|
||||||
|
void audioLoopbackTask(void *params)
|
||||||
|
{
|
||||||
|
vTaskSuspend(NULL);
|
||||||
|
while (1) {
|
||||||
|
delay(5);
|
||||||
|
size_t bytes_read = 0, bytes_write = 0;
|
||||||
|
memset(loopbackBuffer, 0, sizeof(loopbackBuffer));
|
||||||
|
i2s_read(MIC_I2S_PORT, loopbackBuffer, sizeof(loopbackBuffer), &bytes_read, 15);
|
||||||
|
if (bytes_read) {
|
||||||
|
i2s_write(SPK_I2S_PORT, loopbackBuffer, bytes_read, &bytes_write, 15);
|
||||||
|
}
|
||||||
|
}
|
||||||
|
vTaskDelete(NULL);
|
||||||
|
}
|
||||||
|
|
||||||
|
#endif
|
||||||
|
|
||||||
|
void setupMicrophoneI2S(i2s_port_t i2s_ch)
|
||||||
{
|
{
|
||||||
i2s_config_t i2s_config = {
|
i2s_config_t i2s_config = {
|
||||||
.mode = (i2s_mode_t)(I2S_MODE_MASTER | I2S_MODE_RX),
|
.mode = (i2s_mode_t)(I2S_MODE_MASTER | I2S_MODE_RX),
|
||||||
@@ -580,7 +603,7 @@ void setupMicphoneI2S(i2s_port_t i2s_ch)
|
|||||||
i2s_set_pin(i2s_ch, &pin_config);
|
i2s_set_pin(i2s_ch, &pin_config);
|
||||||
i2s_zero_dma_buffer(i2s_ch);
|
i2s_zero_dma_buffer(i2s_ch);
|
||||||
|
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
// Initialize esp-sr vad detected
|
// Initialize esp-sr vad detected
|
||||||
#if ESP_IDF_VERSION_VAL(4,4,1) == ESP_IDF_VERSION
|
#if ESP_IDF_VERSION_VAL(4,4,1) == ESP_IDF_VERSION
|
||||||
vad_inst = vad_create(VAD_MODE_0, MIC_I2S_SAMPLE_RATE, VAD_FRAME_LENGTH_MS);
|
vad_inst = vad_create(VAD_MODE_0, MIC_I2S_SAMPLE_RATE, VAD_FRAME_LENGTH_MS);
|
||||||
@@ -597,10 +620,21 @@ void setupMicphoneI2S(i2s_port_t i2s_ch)
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
xTaskCreate(vadTask, "vad", 8 * 1024, NULL, 12, &vadTaskHandler);
|
xTaskCreate(vadTask, "vad", 8 * 1024, NULL, 12, &vadTaskHandler);
|
||||||
|
#else
|
||||||
|
xTaskCreate(audioLoopbackTask, "vad", 8 * 1024, NULL, 12, &vadTaskHandler);
|
||||||
|
#endif
|
||||||
|
|
||||||
}
|
}
|
||||||
|
|
||||||
void playTTS(const char *filename)
|
void playTTS(const char *filename)
|
||||||
{
|
{
|
||||||
|
vTaskSuspend(vadTaskHandler);
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
|
lv_label_set_text(vad_btn_label, "VAD detect");
|
||||||
|
#else
|
||||||
|
lv_label_set_text(vad_btn_label, "loopback");
|
||||||
|
#endif
|
||||||
|
|
||||||
bool findMp3 = false;
|
bool findMp3 = false;
|
||||||
if (SD.exists("/" + String(filename))) {
|
if (SD.exists("/" + String(filename))) {
|
||||||
findMp3 = audio.connecttoFS(SD, filename);
|
findMp3 = audio.connecttoFS(SD, filename);
|
||||||
@@ -671,7 +705,11 @@ void lv_button_event_cb(lv_event_t *e)
|
|||||||
lv_state_t state = lv_obj_get_state(obj);
|
lv_state_t state = lv_obj_get_state(obj);
|
||||||
if (state == 2) {
|
if (state == 2) {
|
||||||
vTaskSuspend(vadTaskHandler);
|
vTaskSuspend(vadTaskHandler);
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
lv_label_set_text(vad_btn_label, "VAD detect");
|
lv_label_set_text(vad_btn_label, "VAD detect");
|
||||||
|
#else
|
||||||
|
lv_label_set_text(vad_btn_label, "loopback");
|
||||||
|
#endif
|
||||||
} else {
|
} else {
|
||||||
vad_detected_counter = 0;
|
vad_detected_counter = 0;
|
||||||
vTaskResume(vadTaskHandler);
|
vTaskResume(vadTaskHandler);
|
||||||
@@ -965,7 +1003,7 @@ void setup()
|
|||||||
|
|
||||||
setupAmpI2S(SPK_I2S_PORT);
|
setupAmpI2S(SPK_I2S_PORT);
|
||||||
|
|
||||||
setupMicphoneI2S(MIC_I2S_PORT);
|
setupMicrophoneI2S(MIC_I2S_PORT);
|
||||||
|
|
||||||
// Test screen
|
// Test screen
|
||||||
lv_obj_t *label;
|
lv_obj_t *label;
|
||||||
@@ -1093,7 +1131,11 @@ void setup()
|
|||||||
lv_obj_add_flag(btn4, LV_OBJ_FLAG_CHECKABLE);
|
lv_obj_add_flag(btn4, LV_OBJ_FLAG_CHECKABLE);
|
||||||
lv_obj_add_event_cb(btn4, lv_button_event_cb, LV_EVENT_CLICKED, (void *)&event[3]);
|
lv_obj_add_event_cb(btn4, lv_button_event_cb, LV_EVENT_CLICKED, (void *)&event[3]);
|
||||||
vad_btn_label = lv_label_create(btn4);
|
vad_btn_label = lv_label_create(btn4);
|
||||||
|
#ifdef USE_ESP_VAD
|
||||||
lv_label_set_text(vad_btn_label, "Noise detection");
|
lv_label_set_text(vad_btn_label, "Noise detection");
|
||||||
|
#else
|
||||||
|
lv_label_set_text(vad_btn_label, "loopback");
|
||||||
|
#endif
|
||||||
lv_obj_center(vad_btn_label);
|
lv_obj_center(vad_btn_label);
|
||||||
|
|
||||||
lv_obj_t *btn5 = lv_btn_create(btn_ui2);
|
lv_obj_t *btn5 = lv_btn_create(btn_ui2);
|
||||||
|
|||||||
+20
-16
@@ -35,6 +35,10 @@ typedef enum {
|
|||||||
ES7210_AD1_AD0_11 = 0x43,
|
ES7210_AD1_AD0_11 = 0x43,
|
||||||
} es7210_address_t;
|
} es7210_address_t;
|
||||||
|
|
||||||
|
#ifdef ES7210_ADDR
|
||||||
|
#undef ES7210_ADDR
|
||||||
|
#endif
|
||||||
|
|
||||||
/* ES7210 address*/
|
/* ES7210 address*/
|
||||||
#define ES7210_ADDR ES7210_AD1_AD0_00
|
#define ES7210_ADDR ES7210_AD1_AD0_00
|
||||||
|
|
||||||
@@ -84,22 +88,22 @@ typedef enum {
|
|||||||
ES7210_INPUT_MIC4 = 0x08
|
ES7210_INPUT_MIC4 = 0x08
|
||||||
} es7210_input_mics_t;
|
} es7210_input_mics_t;
|
||||||
|
|
||||||
typedef enum gain_value{
|
typedef enum gain_value {
|
||||||
GAIN_0DB = 0,
|
GAIN_0DB = 0,
|
||||||
GAIN_3DB,
|
GAIN_3DB,
|
||||||
GAIN_6DB,
|
GAIN_6DB,
|
||||||
GAIN_9DB,
|
GAIN_9DB,
|
||||||
GAIN_12DB,
|
GAIN_12DB,
|
||||||
GAIN_15DB,
|
GAIN_15DB,
|
||||||
GAIN_18DB,
|
GAIN_18DB,
|
||||||
GAIN_21DB,
|
GAIN_21DB,
|
||||||
GAIN_24DB,
|
GAIN_24DB,
|
||||||
GAIN_27DB,
|
GAIN_27DB,
|
||||||
GAIN_30DB,
|
GAIN_30DB,
|
||||||
GAIN_33DB,
|
GAIN_33DB,
|
||||||
GAIN_34_5DB,
|
GAIN_34_5DB,
|
||||||
GAIN_36DB,
|
GAIN_36DB,
|
||||||
GAIN_37_5DB,
|
GAIN_37_5DB,
|
||||||
} es7210_gain_value_t;
|
} es7210_gain_value_t;
|
||||||
|
|
||||||
/*
|
/*
|
||||||
|
|||||||
+33
-10
@@ -14,6 +14,10 @@
|
|||||||
|
|
||||||
; Please comment out the following when compiling the T-Keyboard
|
; Please comment out the following when compiling the T-Keyboard
|
||||||
default_envs = T-Deck
|
default_envs = T-Deck
|
||||||
|
; default_envs = T-Deck-868M
|
||||||
|
; default_envs = T-Deck-915M
|
||||||
|
; default_envs = T-Deck-433M
|
||||||
|
|
||||||
;; Examples only one is valid
|
;; Examples only one is valid
|
||||||
src_dir = examples/UnitTest
|
src_dir = examples/UnitTest
|
||||||
; src_dir = examples/Microphone
|
; src_dir = examples/Microphone
|
||||||
@@ -23,13 +27,13 @@ src_dir = examples/UnitTest
|
|||||||
; src_dir = examples/LvglArduinoVNC_VGA
|
; src_dir = examples/LvglArduinoVNC_VGA
|
||||||
|
|
||||||
|
|
||||||
[env:T-Keyboard]
|
; [env:T-Keyboard]
|
||||||
platform = espressif32
|
; platform = espressif32
|
||||||
board = ttgo-t-oi-plus
|
; board = ttgo-t-oi-plus
|
||||||
framework = arduino
|
; framework = arduino
|
||||||
|
|
||||||
|
|
||||||
[env:T-Deck]
|
[env]
|
||||||
platform = espressif32@6.3.0
|
platform = espressif32@6.3.0
|
||||||
board = esp32s3box
|
board = esp32s3box
|
||||||
framework = arduino
|
framework = arduino
|
||||||
@@ -46,11 +50,30 @@ build_flags =
|
|||||||
-UARDUINO_USB_CDC_ON_BOOT
|
-UARDUINO_USB_CDC_ON_BOOT
|
||||||
|
|
||||||
-DDISABLE_ALL_LIBRARY_WARNINGS
|
-DDISABLE_ALL_LIBRARY_WARNINGS
|
||||||
; -DRADIO_FREQ=868.0
|
|
||||||
; -DRADIO_FREQ=915.0
|
|
||||||
; -DRADIO_FREQ=433.0
|
|
||||||
|
|
||||||
; extra_scripts = ./script/pos_extra_script.py
|
|
||||||
|
|
||||||
|
|
||||||
|
extra_scripts = ./script/pos_extra_script.py
|
||||||
|
|
||||||
|
[env:T-Deck]
|
||||||
|
extends = env
|
||||||
|
build_flags =
|
||||||
|
${env.build_flags}
|
||||||
|
|
||||||
|
[env:T-Deck-868M]
|
||||||
|
extends = env
|
||||||
|
build_flags =
|
||||||
|
${env.build_flags}
|
||||||
|
-DRADIO_FREQ=868.0
|
||||||
|
|
||||||
|
[env:T-Deck-915M]
|
||||||
|
extends = env
|
||||||
|
build_flags =
|
||||||
|
${env.build_flags}
|
||||||
|
-DRADIO_FREQ=915.0
|
||||||
|
|
||||||
|
[env:T-Deck-433M]
|
||||||
|
extends = env
|
||||||
|
build_flags =
|
||||||
|
${env.build_flags}
|
||||||
|
-DRADIO_FREQ=433.0
|
||||||
|
|
||||||
|
|||||||
Reference in New Issue
Block a user