{
"cells": [
{
"cell_type": "markdown",
"metadata": {
"tags": []
},
"source": [
"## Мультимодальное объединение для получения прогнозов по аудио и видео `FI V2`\n",
"\n",
"
\n",
"
\n",
"\n",
"\n",
"
"
]
},
{
"cell_type": "code",
"execution_count": 1,
"metadata": {
"nbsphinx": "hidden",
"tags": []
},
"outputs": [],
"source": [
"import os # Взаимодействие с файловой системой\n",
"import sys # Доступ к некоторым переменным и функциям Python\n",
"\n",
"PATH_TO_SOURCE = os.path.abspath(os.path.dirname(globals()['_dh'][0]))\n",
"PATH_TO_ROOT = os.path.join(PATH_TO_SOURCE, '..', '..', '..')\n",
"\n",
"sys.path.insert(0, os.path.abspath(PATH_TO_ROOT))"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Импорт необходимых инструментов"
]
},
{
"cell_type": "code",
"execution_count": 2,
"metadata": {},
"outputs": [],
"source": [
"from oceanai.modules.lab.build import Run"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Сборка"
]
},
{
"cell_type": "code",
"execution_count": 3,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:17] OCEANAI - персональные качества личности человека:**
Авторы:
Рюмина Елена [ryumina_ev@mail.ru]
Рюмин Дмитрий [dl_03.03.1991@mail.ru]
Карпов Алексей [karpov@iias.spb.su]
Сопровождающие:
Рюмина Елена [ryumina_ev@mail.ru]
Рюмин Дмитрий [dl_03.03.1991@mail.ru]
Версия: 1.0.0a40
Лицензия: BSD License"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"_b5 = Run(\n",
" lang = 'ru', # Язык\n",
" color_simple = '#333', # Цвет обычного текста (шестнадцатеричный код)\n",
" color_info = '#1776D2', # Цвет текста содержащего информацию (шестнадцатеричный код)\n",
" color_err = '#FF0000', # Цвет текста содержащего ошибку (шестнадцатеричный код)\n",
" color_true = '#008001', # Цвет текста содержащего положительную информацию (шестнадцатеричный код)\n",
" bold_text = True, # Жирное начертание текста\n",
" num_to_df_display = 30, # Количество строк для отображения в таблицах\n",
" text_runtime = 'Время выполнения', # Текст времени выполнения\n",
" metadata = True # Отображение информации о библиотеке\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Получение и отображение версий установленных библиотек\n",
"\n",
"> - `_b5.df_pkgs_` - DataFrame c версиями установленных библиотек"
]
},
{
"cell_type": "code",
"execution_count": 4,
"metadata": {},
"outputs": [
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" Package | \n",
" Version | \n",
"
\n",
" \n",
" \n",
" \n",
" | 1 | \n",
" OpenCV | \n",
" 4.10.0 | \n",
"
\n",
" \n",
" | 2 | \n",
" MediaPipe | \n",
" 0.10.14 | \n",
"
\n",
" \n",
" | 3 | \n",
" NumPy | \n",
" 1.26.4 | \n",
"
\n",
" \n",
" | 4 | \n",
" SciPy | \n",
" 1.14.1 | \n",
"
\n",
" \n",
" | 5 | \n",
" Pandas | \n",
" 2.2.3 | \n",
"
\n",
" \n",
" | 6 | \n",
" Scikit-learn | \n",
" 1.5.2 | \n",
"
\n",
" \n",
" | 7 | \n",
" OpenSmile | \n",
" 2.5.0 | \n",
"
\n",
" \n",
" | 8 | \n",
" Librosa | \n",
" 0.10.2.post1 | \n",
"
\n",
" \n",
" | 9 | \n",
" AudioRead | \n",
" 3.0.1 | \n",
"
\n",
" \n",
" | 10 | \n",
" IPython | \n",
" 8.28.0 | \n",
"
\n",
" \n",
" | 11 | \n",
" Requests | \n",
" 2.32.3 | \n",
"
\n",
" \n",
" | 12 | \n",
" JupyterLab | \n",
" 4.2.5 | \n",
"
\n",
" \n",
" | 13 | \n",
" LIWC | \n",
" 0.5.0 | \n",
"
\n",
" \n",
" | 14 | \n",
" Transformers | \n",
" 4.45.1 | \n",
"
\n",
" \n",
" | 15 | \n",
" Sentencepiece | \n",
" 0.2.0 | \n",
"
\n",
" \n",
" | 16 | \n",
" Torch | \n",
" 2.4.1+cu118 | \n",
"
\n",
" \n",
" | 17 | \n",
" Torchaudio | \n",
" 2.4.1+cu118 | \n",
"
\n",
" \n",
" | 18 | \n",
" Torchvision | \n",
" 0.19.1+cu118 | \n",
"
\n",
" \n",
"
\n",
"
"
],
"text/plain": [
" Package Version\n",
"1 OpenCV 4.10.0\n",
"2 MediaPipe 0.10.14\n",
"3 NumPy 1.26.4\n",
"4 SciPy 1.14.1\n",
"5 Pandas 2.2.3\n",
"6 Scikit-learn 1.5.2\n",
"7 OpenSmile 2.5.0\n",
"8 Librosa 0.10.2.post1\n",
"9 AudioRead 3.0.1\n",
"10 IPython 8.28.0\n",
"11 Requests 2.32.3\n",
"12 JupyterLab 4.2.5\n",
"13 LIWC 0.5.0\n",
"14 Transformers 4.45.1\n",
"15 Sentencepiece 0.2.0\n",
"16 Torch 2.4.1+cu118\n",
"17 Torchaudio 2.4.1+cu118\n",
"18 Torchvision 0.19.1+cu118"
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.013 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"_b5.libs_vers(runtime = True, run = True)"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Анализ аудио информации (формирование и загрузка весов моделей)"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевой архитектуры модели для получения оценок по экспертным признакам (аудио модальность)\n",
"\n",
"> - `_b5.audio_model_hc_` - Нейросетевая модель **nn.Module** для получения оценок по экспертным признакам"
]
},
{
"cell_type": "code",
"execution_count": 5,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:17] Формирование нейросетевой архитектуры модели для получения оценок по экспертным признакам (аудио модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.013 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_audio_model_hc = _b5.load_audio_model_hc(\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевой модели для получения оценок по экспертным признакам (аудио модальность)\n",
"\n",
"> - `_b5.audio_model_hc_` - Нейросетевая модель **nn.Module** для получения оценок по экспертным признакам"
]
},
{
"cell_type": "code",
"execution_count": 6,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:17] Загрузка весов нейросетевой модели для получения оценок по экспертным признакам (аудио модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:21] Загрузка файла \"weights_2022-05-05_11-27-55.pth\" 100.0% ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 3.485 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url = _b5.weights_for_big5_['audio']['fi']['hc']['googledisk']\n",
"\n",
"res_load_audio_model_weights_hc = _b5.load_audio_model_weights_hc(\n",
" url = url, # Полный путь к файлу с весами нейросетевой модели\n",
" force_reload = True, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевой архитектуры модели для получения оценок по нейросетевым признакам (аудио модальность)\n",
"\n",
"> - `_b5.audio_model_nn_` - Нейросетевая модель **nn.Module** для получения оценок по нейросетевым признакам"
]
},
{
"cell_type": "code",
"execution_count": 7,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:21] Формирование нейросетевой архитектуры для получения оценок по нейросетевым признакам (аудио модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 1.067 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_audio_model_nn = _b5.load_audio_model_nn(\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевой модели для получения оценок по нейросетевым признакам (аудио модальность)\n",
"\n",
"> - `_b5.audio_model_nn_` - Нейросетевая модель **nn.Module** для получения оценок по нейросетевым признакам"
]
},
{
"cell_type": "code",
"execution_count": 8,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:22] Загрузка весов нейросетевой модели для получения оценок по нейросетевым признакам (аудио модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:25] Загрузка файла \"weights_2022-05-03_07-46-14.pth\"** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 2.936 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url = _b5.weights_for_big5_['audio']['fi']['nn']['googledisk']\n",
"\n",
"res_load_audio_model_weights_nn = _b5.load_audio_model_weights_nn(\n",
" url = url, # Полный путь к файлу с весами нейросетевой модели\n",
" force_reload = False, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Анализ видео информации (формирование и загрузка весов моделей)"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевой архитектуры модели для получения оценок по экспертным признакам (видео модальность)\n",
"\n",
"> - `_b5.video_model_hc_` - Нейросетевая модель **nn.Module** для получения оценок по экспертным признакам"
]
},
{
"cell_type": "code",
"execution_count": 9,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:25] Формирование нейросетевой архитектуры модели для получения оценок по экспертным признакам (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.002 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_video_model_hc = _b5.load_video_model_hc(\n",
" lang = 'en',\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевой модели для получения оценок по экспертным признакам (видео модальность)\n",
"\n",
"> - `_b5.video_model_hc_` - Нейросетевая модель **nn.Module** для получения оценок по экспертным признакам"
]
},
{
"cell_type": "code",
"execution_count": 10,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:25] Загрузка весов нейросетевой модели для получения оценок по экспертным признакам (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:28] Загрузка файла \"weights_2022-08-27_18-53-35.pth\" 100.0% ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 3.298 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url = _b5.weights_for_big5_['video']['fi']['hc']['googledisk']\n",
"\n",
"res_load_video_model_weights_hc = _b5.load_video_model_weights_hc(\n",
" url = url, # Полный путь к файлу с весами нейросетевой модели\n",
" force_reload = True, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевой архитектуры для получения нейросетевых признаков (видео модальность)\n",
"\n",
"> - `_b5.video_model_deep_fe_` - Нейросетевая модель **nn.Module** для получения нейросетевых признаков"
]
},
{
"cell_type": "code",
"execution_count": 11,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:28] Формирование нейросетевой архитектуры для получения нейросетевых признаков (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.114 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_video_model_deep_fe = _b5.load_video_model_deep_fe(\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевой модели для получения нейросетевых признаков (видео модальность)\n",
"\n",
"> - `_b5.video_model_deep_fe_` - Нейросетевая модель **nn.Module** для получения нейросетевых признаков"
]
},
{
"cell_type": "code",
"execution_count": 12,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:28] Загрузка весов нейросетевой модели для получения нейросетевых признаков (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:47] Загрузка файла \"weights_2022-11-01_12-27-07.pth\" 100.0% ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 19.075 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url = _b5.weights_for_big5_['video']['fi']['fe']['googledisk']\n",
"\n",
"res_load_video_model_weights_deep_fe = _b5.load_video_model_weights_deep_fe(\n",
" url = url, # Полный путь к файлу с весами нейросетевой модели\n",
" force_reload = True, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевой архитектуры модели для получения оценок по нейросетевым признакам (видео модальность)\n",
"\n",
"> - `_b5.video_model_nn_` - Нейросетевая модель **nn.Module** для получения оценок по нейросетевым признакам"
]
},
{
"cell_type": "code",
"execution_count": 13,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:48] Формирование нейросетевой архитектуры для получения оценок по нейросетевым признакам (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.023 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_video_model_nn = _b5.load_video_model_nn(\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевой модели для получения оценок по нейросетевым признакам (видео модальность)\n",
"\n",
"> - `_b5.video_model_nn_` - Нейросетевая модель **nn.Module** для получения оценок по нейросетевым признакам"
]
},
{
"cell_type": "code",
"execution_count": 14,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:48] Загрузка весов нейросетевой модели для получения оценок по нейросетевым признакам (видео модальность) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:52] Загрузка файла \"weights_2022-03-22_16-31-48.pth\"** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 4.148 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url = _b5.weights_for_big5_['video']['fi']['nn']['googledisk']\n",
"\n",
"res_load_video_model_weights_nn = _b5.load_video_model_weights_nn(\n",
" url = url, # Полный путь к файлу с весами нейросетевой модели\n",
" force_reload = False, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"### Анализ мультимодальной информации (формирование, загрузка весов моделей, получение оценок персональных качеств)"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Формирование нейросетевых архитектур моделей для получения результатов оценки персональных качеств (мультимодальное объединение)\n",
"\n",
"> - `_b5.av_models_b5_` - Нейросетевые модели **nn.Module** для получения результатов оценки персональных качеств"
]
},
{
"cell_type": "code",
"execution_count": 15,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:52] Формирование нейросетевых архитектур моделей для получения результатов оценки персональных качеств (мультимодальное объединение) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 0.002 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"res_load_av_models_b5 = _b5.load_av_models_b5(\n",
" show_summary = False, # Отображение сформированной нейросетевой архитектуры модели\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Загрузка весов нейросетевых моделей для получения результатов оценки персональных качеств (мультимодальное объединение)\n",
"\n",
"> - `_b5.av_models_b5_` - Нейросетевые модели **nn.Module** для получения результатов оценки персональных качеств"
]
},
{
"cell_type": "code",
"execution_count": 16,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:52] Загрузка весов нейросетевых моделей для получения результатов оценки персональных качеств (мультимодальное объединение) ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:54] Загрузка файла \"weights_2022-08-28_11-14-35.pth\" 100.0% ...** **Открытость опыту**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:56] Загрузка файла \"weights_2022-08-28_11-08-10.pth\" 100.0% ...** **Добросовестность**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:52:59] Загрузка файла \"weights_2022-08-28_11-17-57.pth\" 100.0% ...** **Экстраверсия**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:53:01] Загрузка файла \"weights_2022-08-28_11-25-11.pth\" 100.0% ...** **Доброжелательность**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 14:53:03] Загрузка файла \"weights_2022-06-14_21-44-09.pth\" 100.0% ...** **Эмоциональная стабильность**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 11.693 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_save_ = './models' # Директория для сохранения файла\n",
"_b5.chunk_size_ = 2000000 # Размер загрузки файла из сети за 1 шаг\n",
"\n",
"url_openness = _b5.weights_for_big5_['av']['fi']['b5']['openness']['googledisk']\n",
"url_conscientiousness = _b5.weights_for_big5_['av']['fi']['b5']['conscientiousness']['googledisk']\n",
"url_extraversion = _b5.weights_for_big5_['av']['fi']['b5']['extraversion']['googledisk']\n",
"url_agreeableness = _b5.weights_for_big5_['av']['fi']['b5']['agreeableness']['googledisk']\n",
"url_non_neuroticism = _b5.weights_for_big5_['av']['fi']['b5']['non_neuroticism']['googledisk']\n",
"\n",
"res_load_av_models_weights_b5 = _b5.load_av_models_weights_b5(\n",
" url_openness = url_openness, # Открытость опыту\n",
" url_conscientiousness = url_conscientiousness, # Добросовестность\n",
" url_extraversion = url_extraversion, # Экстраверсия\n",
" url_agreeableness = url_agreeableness, # Доброжелательность\n",
" url_non_neuroticism = url_non_neuroticism, # \"Эмоциональная стабильность\n",
" force_reload = True, # Принудительная загрузка файла с весами нейросетевой модели из сети\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
},
{
"cell_type": "markdown",
"metadata": {},
"source": [
"#### Получение прогнозов (мультимодальное объединение)\n",
"\n",
"> - `_b5.df_files_` - DataFrame с данными\n",
"> - `_b5.df_accuracy_` - DataFrame с результатами вычисления точности"
]
},
{
"cell_type": "code",
"execution_count": 17,
"metadata": {},
"outputs": [
{
"data": {
"text/markdown": [
"**[2024-10-09 16:17:33] Получение прогнозов и вычисление точности (мультимодальное объединение) ...** 2000 из 2000 (100.0%) ... test80_25\\_Q4wOgixh7E.004.mp4 ...
"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" Path | \n",
" Openness | \n",
" Conscientiousness | \n",
" Extraversion | \n",
" Agreeableness | \n",
" Non-Neuroticism | \n",
"
\n",
" \n",
" | Person ID | \n",
" | \n",
" | \n",
" | \n",
" | \n",
" | \n",
" | \n",
"
\n",
" \n",
" \n",
" \n",
" | 1 | \n",
" 13kjwEtSyXc.003.mp4 | \n",
" 0.555285 | \n",
" 0.507643 | \n",
" 0.44126 | \n",
" 0.541062 | \n",
" 0.486505 | \n",
"
\n",
" \n",
" | 2 | \n",
" 1Lv72Si4GnY.000.mp4 | \n",
" 0.556782 | \n",
" 0.442179 | \n",
" 0.503365 | \n",
" 0.557368 | \n",
" 0.520389 | \n",
"
\n",
" \n",
" | 3 | \n",
" 1uC-2TZqplE.003.mp4 | \n",
" 0.47469 | \n",
" 0.568426 | \n",
" 0.334602 | \n",
" 0.493305 | \n",
" 0.459734 | \n",
"
\n",
" \n",
" | 4 | \n",
" 2Z8Xi_DTlpI.000.mp4 | \n",
" 0.664059 | \n",
" 0.623677 | \n",
" 0.5902 | \n",
" 0.599828 | \n",
" 0.637361 | \n",
"
\n",
" \n",
" | 5 | \n",
" 3df_Uk9EmwU.002.mp4 | \n",
" 0.639771 | \n",
" 0.531204 | \n",
" 0.54498 | \n",
" 0.585063 | \n",
" 0.545633 | \n",
"
\n",
" \n",
" | 6 | \n",
" 3gmc2kLV4Bo.003.mp4 | \n",
" 0.677814 | \n",
" 0.667441 | \n",
" 0.623028 | \n",
" 0.614309 | \n",
" 0.64445 | \n",
"
\n",
" \n",
" | 7 | \n",
" 3hKgh9AB3tk.003.mp4 | \n",
" 0.403166 | \n",
" 0.397586 | \n",
" 0.335559 | \n",
" 0.497902 | \n",
" 0.398648 | \n",
"
\n",
" \n",
" | 8 | \n",
" 3S72dDIm1fM.005.mp4 | \n",
" 0.577434 | \n",
" 0.597293 | \n",
" 0.495771 | \n",
" 0.639257 | \n",
" 0.59949 | \n",
"
\n",
" \n",
" | 9 | \n",
" 3tPq9fNOXZQ.000.mp4 | \n",
" 0.543016 | \n",
" 0.452105 | \n",
" 0.446706 | \n",
" 0.481398 | \n",
" 0.414833 | \n",
"
\n",
" \n",
" | 10 | \n",
" 43tayteIFRk.001.mp4 | \n",
" 0.547357 | \n",
" 0.504516 | \n",
" 0.428625 | \n",
" 0.575848 | \n",
" 0.526416 | \n",
"
\n",
" \n",
" | 11 | \n",
" 4RKQGZzPClk.000.mp4 | \n",
" 0.549941 | \n",
" 0.401322 | \n",
" 0.447195 | \n",
" 0.520176 | \n",
" 0.496661 | \n",
"
\n",
" \n",
" | 12 | \n",
" 6zm71IHOCZA.005.mp4 | \n",
" 0.458676 | \n",
" 0.430076 | \n",
" 0.316856 | \n",
" 0.497522 | \n",
" 0.459488 | \n",
"
\n",
" \n",
" | 13 | \n",
" 7qGYGbIg45c.001.mp4 | \n",
" 0.311843 | \n",
" 0.321219 | \n",
" 0.221201 | \n",
" 0.375789 | \n",
" 0.243581 | \n",
"
\n",
" \n",
" | 14 | \n",
" 8YQKwMdiaAE.003.mp4 | \n",
" 0.64309 | \n",
" 0.512177 | \n",
" 0.484826 | \n",
" 0.50723 | \n",
" 0.556773 | \n",
"
\n",
" \n",
" | 15 | \n",
" 9Crw2RtrBcY.005.mp4 | \n",
" 0.652284 | \n",
" 0.842436 | \n",
" 0.536853 | \n",
" 0.710465 | \n",
" 0.746347 | \n",
"
\n",
" \n",
" | 16 | \n",
" 9eNHxfOV2Kg.005.mp4 | \n",
" 0.597793 | \n",
" 0.528687 | \n",
" 0.454204 | \n",
" 0.491327 | \n",
" 0.560673 | \n",
"
\n",
" \n",
" | 17 | \n",
" 9J-KIPMQmqk.002.mp4 | \n",
" 0.573772 | \n",
" 0.675375 | \n",
" 0.47772 | \n",
" 0.617765 | \n",
" 0.626578 | \n",
"
\n",
" \n",
" | 18 | \n",
" 9RfE2-aTvaM.002.mp4 | \n",
" 0.556951 | \n",
" 0.572427 | \n",
" 0.461965 | \n",
" 0.616268 | \n",
" 0.576087 | \n",
"
\n",
" \n",
" | 19 | \n",
" 9_6auSk_wkY.002.mp4 | \n",
" 0.657349 | \n",
" 0.629292 | \n",
" 0.633481 | \n",
" 0.6122 | \n",
" 0.625547 | \n",
"
\n",
" \n",
" | 20 | \n",
" aaylz9A9K80.000.mp4 | \n",
" 0.660384 | \n",
" 0.543107 | \n",
" 0.642626 | \n",
" 0.603371 | \n",
" 0.628241 | \n",
"
\n",
" \n",
" | 21 | \n",
" Af_F0IzHK6o.002.mp4 | \n",
" 0.544945 | \n",
" 0.477108 | \n",
" 0.40823 | \n",
" 0.557337 | \n",
" 0.500925 | \n",
"
\n",
" \n",
" | 22 | \n",
" Ah5PEPT4xbo.000.mp4 | \n",
" 0.543 | \n",
" 0.466857 | \n",
" 0.422051 | \n",
" 0.502522 | \n",
" 0.461761 | \n",
"
\n",
" \n",
" | 23 | \n",
" AotbiNsU85A.003.mp4 | \n",
" 0.462694 | \n",
" 0.434322 | \n",
" 0.346588 | \n",
" 0.428535 | \n",
" 0.356066 | \n",
"
\n",
" \n",
" | 24 | \n",
" BLc_GvsbI1U.001.mp4 | \n",
" 0.634953 | \n",
" 0.633947 | \n",
" 0.585365 | \n",
" 0.616067 | \n",
" 0.608561 | \n",
"
\n",
" \n",
" | 25 | \n",
" bLOSPQ8MAC8.005.mp4 | \n",
" 0.453969 | \n",
" 0.581637 | \n",
" 0.349498 | \n",
" 0.528774 | \n",
" 0.470935 | \n",
"
\n",
" \n",
" | 26 | \n",
" bPLhV0PGR50.001.mp4 | \n",
" 0.601943 | \n",
" 0.593242 | \n",
" 0.493392 | \n",
" 0.540426 | \n",
" 0.504249 | \n",
"
\n",
" \n",
" | 27 | \n",
" bYXRyimxh7A.001.mp4 | \n",
" 0.58827 | \n",
" 0.525422 | \n",
" 0.485068 | \n",
" 0.532413 | \n",
" 0.535188 | \n",
"
\n",
" \n",
" | 28 | \n",
" ch2BcBv4SdQ.003.mp4 | \n",
" 0.690328 | \n",
" 0.647787 | \n",
" 0.699549 | \n",
" 0.64751 | \n",
" 0.689377 | \n",
"
\n",
" \n",
" | 29 | \n",
" cpch8WDydcM.004.mp4 | \n",
" 0.585724 | \n",
" 0.567717 | \n",
" 0.503909 | \n",
" 0.556293 | \n",
" 0.542365 | \n",
"
\n",
" \n",
" | 30 | \n",
" De4i7-FX9Og.002.mp4 | \n",
" 0.64488 | \n",
" 0.587383 | \n",
" 0.618146 | \n",
" 0.614909 | \n",
" 0.62523 | \n",
"
\n",
" \n",
"
\n",
"
"
],
"text/plain": [
" Path Openness Conscientiousness Extraversion \\\n",
"Person ID \n",
"1 13kjwEtSyXc.003.mp4 0.555285 0.507643 0.44126 \n",
"2 1Lv72Si4GnY.000.mp4 0.556782 0.442179 0.503365 \n",
"3 1uC-2TZqplE.003.mp4 0.47469 0.568426 0.334602 \n",
"4 2Z8Xi_DTlpI.000.mp4 0.664059 0.623677 0.5902 \n",
"5 3df_Uk9EmwU.002.mp4 0.639771 0.531204 0.54498 \n",
"6 3gmc2kLV4Bo.003.mp4 0.677814 0.667441 0.623028 \n",
"7 3hKgh9AB3tk.003.mp4 0.403166 0.397586 0.335559 \n",
"8 3S72dDIm1fM.005.mp4 0.577434 0.597293 0.495771 \n",
"9 3tPq9fNOXZQ.000.mp4 0.543016 0.452105 0.446706 \n",
"10 43tayteIFRk.001.mp4 0.547357 0.504516 0.428625 \n",
"11 4RKQGZzPClk.000.mp4 0.549941 0.401322 0.447195 \n",
"12 6zm71IHOCZA.005.mp4 0.458676 0.430076 0.316856 \n",
"13 7qGYGbIg45c.001.mp4 0.311843 0.321219 0.221201 \n",
"14 8YQKwMdiaAE.003.mp4 0.64309 0.512177 0.484826 \n",
"15 9Crw2RtrBcY.005.mp4 0.652284 0.842436 0.536853 \n",
"16 9eNHxfOV2Kg.005.mp4 0.597793 0.528687 0.454204 \n",
"17 9J-KIPMQmqk.002.mp4 0.573772 0.675375 0.47772 \n",
"18 9RfE2-aTvaM.002.mp4 0.556951 0.572427 0.461965 \n",
"19 9_6auSk_wkY.002.mp4 0.657349 0.629292 0.633481 \n",
"20 aaylz9A9K80.000.mp4 0.660384 0.543107 0.642626 \n",
"21 Af_F0IzHK6o.002.mp4 0.544945 0.477108 0.40823 \n",
"22 Ah5PEPT4xbo.000.mp4 0.543 0.466857 0.422051 \n",
"23 AotbiNsU85A.003.mp4 0.462694 0.434322 0.346588 \n",
"24 BLc_GvsbI1U.001.mp4 0.634953 0.633947 0.585365 \n",
"25 bLOSPQ8MAC8.005.mp4 0.453969 0.581637 0.349498 \n",
"26 bPLhV0PGR50.001.mp4 0.601943 0.593242 0.493392 \n",
"27 bYXRyimxh7A.001.mp4 0.58827 0.525422 0.485068 \n",
"28 ch2BcBv4SdQ.003.mp4 0.690328 0.647787 0.699549 \n",
"29 cpch8WDydcM.004.mp4 0.585724 0.567717 0.503909 \n",
"30 De4i7-FX9Og.002.mp4 0.64488 0.587383 0.618146 \n",
"\n",
" Agreeableness Non-Neuroticism \n",
"Person ID \n",
"1 0.541062 0.486505 \n",
"2 0.557368 0.520389 \n",
"3 0.493305 0.459734 \n",
"4 0.599828 0.637361 \n",
"5 0.585063 0.545633 \n",
"6 0.614309 0.64445 \n",
"7 0.497902 0.398648 \n",
"8 0.639257 0.59949 \n",
"9 0.481398 0.414833 \n",
"10 0.575848 0.526416 \n",
"11 0.520176 0.496661 \n",
"12 0.497522 0.459488 \n",
"13 0.375789 0.243581 \n",
"14 0.50723 0.556773 \n",
"15 0.710465 0.746347 \n",
"16 0.491327 0.560673 \n",
"17 0.617765 0.626578 \n",
"18 0.616268 0.576087 \n",
"19 0.6122 0.625547 \n",
"20 0.603371 0.628241 \n",
"21 0.557337 0.500925 \n",
"22 0.502522 0.461761 \n",
"23 0.428535 0.356066 \n",
"24 0.616067 0.608561 \n",
"25 0.528774 0.470935 \n",
"26 0.540426 0.504249 \n",
"27 0.532413 0.535188 \n",
"28 0.64751 0.689377 \n",
"29 0.556293 0.542365 \n",
"30 0.614909 0.62523 "
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 16:17:33] Точность по отдельным персональным качествам личности человека ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" Openness | \n",
" Conscientiousness | \n",
" Extraversion | \n",
" Agreeableness | \n",
" Non-Neuroticism | \n",
" Mean | \n",
"
\n",
" \n",
" | Metrics | \n",
" | \n",
" | \n",
" | \n",
" | \n",
" | \n",
" | \n",
"
\n",
" \n",
" \n",
" \n",
" | MAE | \n",
" 0.0844 | \n",
" 0.0802 | \n",
" 0.0793 | \n",
" 0.0858 | \n",
" 0.0848 | \n",
" 0.0829 | \n",
"
\n",
" \n",
" | Accuracy | \n",
" 0.9156 | \n",
" 0.9198 | \n",
" 0.9207 | \n",
" 0.9142 | \n",
" 0.9152 | \n",
" 0.9171 | \n",
"
\n",
" \n",
"
\n",
"
"
],
"text/plain": [
" Openness Conscientiousness Extraversion Agreeableness \\\n",
"Metrics \n",
"MAE 0.0844 0.0802 0.0793 0.0858 \n",
"Accuracy 0.9156 0.9198 0.9207 0.9142 \n",
"\n",
" Non-Neuroticism Mean \n",
"Metrics \n",
"MAE 0.0848 0.0829 \n",
"Accuracy 0.9152 0.9171 "
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**[2024-10-09 16:17:33] Средняя средних абсолютных ошибок: 0.0829, средняя точность: 0.9171 ...** "
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**Лог файлы успешно сохранены ...**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/markdown": [
"**--- Время выполнения: 5069.328 сек. ---**"
],
"text/plain": [
""
]
},
"metadata": {},
"output_type": "display_data"
},
{
"data": {
"text/plain": [
"True"
]
},
"execution_count": 17,
"metadata": {},
"output_type": "execute_result"
}
],
"source": [
"# Настройки ядра\n",
"_b5.path_to_dataset_ = 'E:/Databases/FirstImpressionsV2/test' # Директория набора данных\n",
"# Директории не входящие в выборку\n",
"_b5.ignore_dirs_ = []\n",
"# Названия ключей для DataFrame набора данных\n",
"_b5.keys_dataset_ = ['Path', 'Openness', 'Conscientiousness', 'Extraversion', 'Agreeableness', 'Non-Neuroticism']\n",
"_b5.ext_ = ['.mp4'] # Расширения искомых файлов\n",
"\n",
"# Полный путь к файлу с верными предсказаниями для подсчета точности\n",
"url_accuracy = _b5.true_traits_['fi']['googledisk']\n",
"\n",
"_b5.get_av_union_predictions(\n",
" depth = 1, # Глубина иерархии для получения аудио и видеоданных\n",
" recursive = False, # Рекурсивный поиск данных\n",
" sr = 44100, # Частота дискретизации\n",
" window_audio = 2, # Размер окна сегмента аудио сигнала (в секундах)\n",
" step_audio = 1, # Шаг сдвига окна сегмента аудио сигнала (в секундах)\n",
" reduction_fps = 5, # Понижение кадровой частоты\n",
" window_video = 10, # Размер окна сегмента видео сигнала (в секундах)\n",
" step_video = 5, # Шаг сдвига окна сегмента видео сигнала (в секундах)\n",
" lang = 'en',\n",
" accuracy = True, # Вычисление точности\n",
" url_accuracy = url_accuracy,\n",
" logs = True, # При необходимости формировать LOG файл\n",
" out = True, # Отображение\n",
" runtime = True, # Подсчет времени выполнения\n",
" run = True # Блокировка выполнения\n",
")"
]
}
],
"metadata": {
"kernelspec": {
"display_name": "Python 3 (ipykernel)",
"language": "python",
"name": "python3"
},
"language_info": {
"codemirror_mode": {
"name": "ipython",
"version": 3
},
"file_extension": ".py",
"mimetype": "text/x-python",
"name": "python",
"nbconvert_exporter": "python",
"pygments_lexer": "ipython3",
"version": "3.10.11"
}
},
"nbformat": 4,
"nbformat_minor": 4
}