Improved server performance

.github/workflows/main.yml

@@ -57,10 +57,6 @@ jobs:
 
       - uses: dtolnay/rust-toolchain@stable
       
-      - uses: mbrobbel/rustfmt-check@master
-        with:
-          token: ${{ secrets.GITHUB_TOKEN }}
-          
       - name: Install rust targets
         run: rustup target add ${{ matrix.build_target }}
         

src/db.rs

@@ -1,15 +1,15 @@
-use log::{info};
+use crate::server::SshKey;
+use log::info;
 use std::collections::HashMap;
 use std::collections::HashSet;
 use tokio_postgres::Client;
-use crate::server::SshKey;
 
 // Структура для хранения статистики обработки ключей
 pub struct KeyInsertStats {
-    pub total: usize,      // Общее количество полученных ключей
+    pub total: usize,                   // Общее количество полученных ключей
-    pub inserted: usize,   // Количество новых ключей
+    pub inserted: usize,                // Количество новых ключей
-    pub updated: usize,    // Количество обновленных ключей
+    pub updated: usize,                 // Количество обновленных ключей
-    pub unchanged: usize,  // Количество неизмененных ключей
+    pub unchanged: usize,               // Количество неизмененных ключей
     pub key_id_map: Vec<(SshKey, i32)>, // Связь ключей с их ID в базе
 }
 
@@ -119,7 +119,8 @@ pub async fn batch_insert_keys(
         key_query.push_str(&format!("(host = ${} AND key = ${})", i * 2 + 1, i * 2 + 2));
     }
 
-    let mut params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> = Vec::with_capacity(keys.len() * 2);
+    let mut params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> =
+        Vec::with_capacity(keys.len() * 2);
     for i in 0..keys.len() {
         params.push(&host_values[i]);
         params.push(&key_values[i]);
@@ -151,9 +152,7 @@ pub async fn batch_insert_keys(
 
     // Если есть ключи для вставки, выполняем вставку
     if !keys_to_insert.is_empty() {
-        let mut insert_sql = String::from(
+        let mut insert_sql = String::from("INSERT INTO public.keys (host, key, updated) VALUES ");
-            "INSERT INTO public.keys (host, key, updated) VALUES "
-        );
 
         let mut insert_params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> = Vec::new();
         let mut param_count = 1;
@@ -177,7 +176,10 @@ pub async fn batch_insert_keys(
             let key_text: String = row.get(2);
             let key_id: i32 = row.get(0);
 
-            if let Some(orig_key) = keys_to_insert.iter().find(|k| k.server == host && k.public_key == key_text) {
+            if let Some(orig_key) = keys_to_insert
+                .iter()
+                .find(|k| k.server == host && k.public_key == key_text)
+            {
                 inserted_keys.push((orig_key.clone(), key_id));
             }
         }
@@ -200,8 +202,10 @@ pub async fn batch_insert_keys(
         key_id_map,
     };
 
-    info!("Keys stats: received={}, new={}, unchanged={}", 
+    info!(
-          stats.total, stats.inserted, stats.unchanged);
+        "Keys stats: received={}, new={}, unchanged={}",
+        stats.total, stats.inserted, stats.unchanged
+    );
 
     Ok(stats)
 }
@@ -217,9 +221,8 @@ pub async fn batch_insert_flow_keys(
     }
 
     // Сначала проверим, какие связи уже существуют
-    let mut existing_query = String::from(
+    let mut existing_query =
-        "SELECT key_id FROM public.flows WHERE name = $1 AND key_id IN ("
+        String::from("SELECT key_id FROM public.flows WHERE name = $1 AND key_id IN (");
-    );
 
     for i in 0..key_ids.len() {
         if i > 0 {
@@ -229,7 +232,8 @@ pub async fn batch_insert_flow_keys(
     }
     existing_query.push_str(")");
 
-    let mut params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> = Vec::with_capacity(key_ids.len() + 1);
+    let mut params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> =
+        Vec::with_capacity(key_ids.len() + 1);
     params.push(&flow_name);
     for key_id in key_ids {
         params.push(key_id);
@@ -244,19 +248,22 @@ pub async fn batch_insert_flow_keys(
     }
 
     // Фильтруем только те ключи, которые еще не связаны с потоком
-    let new_key_ids: Vec<&i32> = key_ids.iter()
+    let new_key_ids: Vec<&i32> = key_ids
+        .iter()
         .filter(|&id| !existing_associations.contains(id))
         .collect();
 
     if new_key_ids.is_empty() {
-        info!("All {} keys are already associated with flow '{}'", key_ids.len(), flow_name);
+        info!(
+            "All {} keys are already associated with flow '{}'",
+            key_ids.len(),
+            flow_name
+        );
         return Ok(0);
     }
 
     // Строим SQL запрос с множественными значениями только для новых связей
-    let mut sql = String::from(
+    let mut sql = String::from("INSERT INTO public.flows (name, key_id) VALUES ");
-        "INSERT INTO public.flows (name, key_id) VALUES "
-    );
 
     for i in 0..new_key_ids.len() {
         if i > 0 {
@@ -268,7 +275,8 @@ pub async fn batch_insert_flow_keys(
     sql.push_str(" ON CONFLICT (name, key_id) DO NOTHING");
 
     // Подготавливаем параметры для запроса
-    let mut insert_params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> = Vec::with_capacity(new_key_ids.len() + 1);
+    let mut insert_params: Vec<&(dyn tokio_postgres::types::ToSql + Sync)> =
+        Vec::with_capacity(new_key_ids.len() + 1);
     insert_params.push(&flow_name);
     for key_id in &new_key_ids {
         insert_params.push(*key_id);
@@ -279,8 +287,12 @@ pub async fn batch_insert_flow_keys(
 
     let affected_usize = affected as usize;
 
-    info!("Added {} new key-flow associations for flow '{}' (skipped {} existing)",
+    info!(
-           affected_usize, flow_name, existing_associations.len());
+        "Added {} new key-flow associations for flow '{}' (skipped {} existing)",
+        affected_usize,
+        flow_name,
+        existing_associations.len()
+    );
 
     Ok(affected_usize)
 }

src/server.rs

@@ -163,7 +163,11 @@ pub async fn add_keys(
         valid_keys.push(new_key.clone());
     }
 
-    info!("Processing batch of {} keys for flow: {}", valid_keys.len(), flow_id_str);
+    info!(
+        "Processing batch of {} keys for flow: {}",
+        valid_keys.len(),
+        flow_id_str
+    );
 
     // Батчевая вставка ключей с получением статистики
     let key_stats = match crate::db::batch_insert_keys(&db_client, &valid_keys).await {
@@ -178,19 +182,21 @@ pub async fn add_keys(
     // Если нет новых ключей, нет необходимости обновлять связи с flow
     if key_stats.inserted > 0 {
         // Извлекаем только ID ключей из статистики
-        let key_ids: Vec<i32> = key_stats.key_id_map
+        let key_ids: Vec<i32> = key_stats.key_id_map.iter().map(|(_, id)| *id).collect();
-            .iter()
-            .map(|(_, id)| *id)
-            .collect();
 
         // Батчевая вставка связей ключей с flow
-        if let Err(e) = crate::db::batch_insert_flow_keys(&db_client, &flow_id_str, &key_ids).await {
+        if let Err(e) = crate::db::batch_insert_flow_keys(&db_client, &flow_id_str, &key_ids).await
+        {
             error!("Failed to batch insert flow keys into database: {}", e);
             return HttpResponse::InternalServerError()
                 .body("Failed to batch insert flow keys into database");
         }
 
-        info!("Added flow associations for {} keys in flow '{}'", key_ids.len(), flow_id_str);
+        info!(
+            "Added flow associations for {} keys in flow '{}'",
+            key_ids.len(),
+            flow_id_str
+        );
     } else {
         info!("No new keys to associate with flow '{}'", flow_id_str);
     }
@@ -211,8 +217,14 @@ pub async fn add_keys(
     let updated_flow = flows_guard.iter().find(|flow| flow.name == flow_id_str);
     if let Some(flow) = updated_flow {
         let servers: Vec<&SshKey> = flow.servers.iter().collect();
-        info!("Keys summary for flow '{}': total received={}, new={}, unchanged={}, total in flow={}",
+        info!(
-              flow_id_str, key_stats.total, key_stats.inserted, key_stats.unchanged, servers.len());
+            "Keys summary for flow '{}': total received={}, new={}, unchanged={}, total in flow={}",
+            flow_id_str,
+            key_stats.total,
+            key_stats.inserted,
+            key_stats.unchanged,
+            servers.len()
+        );
 
         // Добавляем статистику в HTTP заголовки ответа
         let mut response = HttpResponse::Ok();