单位电脑监控软件的 Node.js 哈希表日志去重算法

// 单位电脑监控软件日志数据模型
class MonitorLog {
  constructor(terminalId, operationType, timestamp, content) {
    this.terminalId = terminalId; // 终端ID
    this.operationType = operationType; // 操作类型：file/fileProcess/network
    this.timestamp = timestamp; // 毫秒级时间戳
    this.content = content; // 操作内容
  }
  // 生成日志唯一标识（用于哈希表键值）
  getUniqueKey() {
    return `${this.terminalId}|${this.timestamp}|${this.operationType}`;
  }
}
// 单位电脑监控软件日志去重哈希表类
class LogDeduplicationHash {
  constructor() {
    // 初始化哈希表（基于Node.js Map实现，支持高效键值查询）
    this.hashTable = new Map();
    this.duplicateCount = 0; // 重复日志计数
    this.validLogCount = 0; // 有效日志计数
  }
  // 日志去重核心方法：插入日志并判断是否重复
  insertLog(log) {
    const uniqueKey = log.getUniqueKey();
    if (this.hashTable.has(uniqueKey)) {
      // 存在重复日志，计数递增
      this.duplicateCount++;
      return false;
    } else {
      // 无重复日志，插入哈希表
      this.hashTable.set(uniqueKey, log);
      this.validLogCount++;
      return true;
    }
  }
  // 获取去重统计结果
  getDeduplicationStats() {
    return {
      totalProcessed: this.duplicateCount + this.validLogCount,
      duplicateCount: this.duplicateCount,
      validLogCount: this.validLogCount,
      duplicateRate: (this.duplicateCount / (this.duplicateCount + this.validLogCount) * 100).toFixed(2) + '%'
    };
  }
}
// 示例：单位电脑监控软件日志去重流程模拟
function simulateLogDeduplication() {
  const deduplicator = new LogDeduplicationHash();
  // 模拟生成1000条日志（含200条重复日志）
  const terminals = ['PC-2024-001', 'PC-2024-002', 'PC-2024-003', 'PC-2024-004', 'PC-2024-005'];
  const operations = ['fileRead', 'fileWrite', 'processStart', 'processStop', 'networkConnect'];
  for (let i = 0; i < 1000; i++) {
    const terminalId = terminals[Math.floor(Math.random() * terminals.length)];
    const operationType = operations[Math.floor(Math.random() * operations.length)];
    // 生成时间戳（模拟5分钟内的日志，每10秒一个时间点，制造重复）
    const baseTimestamp = Date.parse('2025-11-07 09:00:00');
    const timestamp = baseTimestamp + Math.floor(Math.random() * 30) * 10000;
    const content = `操作内容_${terminalId}_${operationType}_${Math.floor(Math.random() * 100)}`;
    const log = new MonitorLog(terminalId, operationType, timestamp, content);
    deduplicator.insertLog(log);
  }
  // 输出去重结果
  const stats = deduplicator.getDeduplicationStats();
  console.log('单位电脑监控软件日志去重结果统计：');
  console.log(`总处理日志数：${stats.totalProcessed}`);
  console.log(`重复日志数：${stats.duplicateCount}`);
  console.log(`有效日志数：${stats.validLogCount}`);
  console.log(`日志重复率：${stats.duplicateRate}`);
}
// 执行模拟
simulateLogDeduplication();