Bash 脚本？处理和绘制从 csv 文件收集的数据

Question

我正在尝试编写一个可以检测我在家的脚本。到目前为止，我已经编写了一个脚本，将数据从 hcitool lescan 输出到以下格式的 csv 文件中：

    TIMESTAMP MAC_ADDRESS_1 MAC_ADDRESS_2 AD_INFINITUM
    2018-09-22.11:48:34 FF:FF:FF:FF:FF:FF FF:FF:FF:FF:FF:FF FF:FF:FF:FF:FF:FF

我正在尝试弄清楚如何编写脚本以将数据转换为可图形格式 - gnuplot 是用于此的程序吗？我想这需要 bash？导入 csv 文件并保留所有时间戳的脚本，然后为每个唯一的 MAC 地址在数组中添加一个新列，然后用 1 或 0 填充条目，具体取决于每行是否检测到 Mac 地址。是否有任何内置命令可以 do/help 使用此命令，或者我必须自己编写脚本吗？

我用来生成 .csv 的代码在这里。抱歉，它可能不是最漂亮的，因为我刚刚开始使用 bash 脚本。

    cd /home/pi/projects/bluetooth_control;
    while true
    do
        echo 'reset hci0';
        sudo hciconfig hci0 down;
        sudo hciconfig hci0 up;
        echo 'timestamp';
        echo `date +%Y-%m-%d.%H:%M:%S` &> test1.csv;
        echo 'running scan';
        (sudo timeout 20 stdbuf -oL hcitool lescan | grep -Eo '(([A-Z]|[0-9]){2}:){5}([A-Z]|[0-9]){2}') &> test.csv;
        echo 'removing duplicates to test.csv';
        (sort test.csv | uniq) >> test1.csv;
        (paste -s test1.csv) >> data.csv;
        echo 'sleep for 60s';
        sleep 60;
    done

Answer 1

我有时间玩，为了完成这里的答案，我想出了解决方案。我不确定运行在 Bash 与 Python 中的效率如何，但这里是：

#!/bin/bash
cd /home/pi/projects/bluetooth_control;
while true
do
echo 'reset hci0';
sudo hciconfig hci0 down;
sudo hciconfig hci0 up;
echo 'timestamp';

# Create necessary temp files
echo "temp" &> test1.csv;
echo `date +%Y-%m-%d.%H:%M:%S` &> test2.csv;
echo 'running scan';

# Filter out only MAC addresses
(sudo timeout 20 stdbuf -oL hcitool lescan | grep -Eo '(([A-Z]|[0-9]){2}:){5}([A-Z]|[0-9]){2}') &> /home/pi/projects/bluetooth_control/test.csv;
echo 'removing duplicates to test.csv';

# Append each unique value to test1.csv
(sort test.csv | uniq) >> test1.csv;

# For each line in test1.csv, add text to mac_database if it doesn't exist 
while read line 
    do 
    grep -q -F $line mac_database || echo $line >> mac_database
done <test1.csv 

# For each line in mac_database, run an if loop
while read line 
    do 
    # If $line from mac_database exists in test1.csv, then
    if grep -Fxq "$line" test1.csv
        then
            echo '1' >> test2.csv
        else
            echo '0' >> test2.csv
    fi
done <mac_database

# Convert file to csv format, and append to data.csv
(paste -s test2.csv) >> data.csv;
echo 'sleep for 60s';
sleep 60;
done

希望这对将来可能选择这样做的人有所帮助。

Bash 脚本？处理和绘制从 csv 文件收集的数据

Bash script? Manipulating & graphing collected data from a csv file

csv

bash

bluetooth

monitor