Використання баєсового спам-фільтра для класифікації електронних листів у Python

Використання баєсового спам‑фільтру

Aspose.Email надає функціональність фільтрації електронної пошти за допомогою баєсового спам‑аналізатора. Він забезпечує SpamAnalyzer клас для цієї мети. У цій статті показано, як навчити фільтр розрізняти спам і звичайну пошту на основі словникової бази.

1. Вкажіть шляхи до папок для листів‑не‑спам (ham_folder), листів‑спам (spam_folder), тестових листів (test_folder) та файл бази даних (database_file) для спам‑фільтра.
2. Визначте допоміжну функцію print_result щоб вивести, чи повідомлення класифіковано як спам, чи ні, на основі розрахованої ймовірності спаму.
3. Створіть Spam Analyzer, використовуючи файл бази даних, навчіть його листами з ham_folder (не спам) та spam_folder (спам), потім збережіть натреновану базу даних.
4. Завантажте файли .eml з папки ’test_folder’, проаналізуйте кожен за допомогою SpamAnalyzer.test, щоб отримати ймовірність спаму, і виведіть тему листа та класифікацію за допомогою ‘print_result’.

from aspose.email import MailMessage, SaveOptions, MsgLoadOptions, MessageFormat, FileCompatibilityMode
from aspose.email.antispam import SpamAnalyzer
import os

ham_folder = "/hamFolder"
spam_folder = "/Spam"
test_folder = data_dir
database_file = "SpamFilterDatabase.txt"

def print_result(probability):
    if probability >= 0.5:
        print("The message is classified as spam.")
    else:
        print("The message is classified as not spam.")
    print("Spam Probability: " + str(probability))
    print()

def teach_and_create_database(ham_folder, spam_folder, database_file):
    analyzer = SpamAnalyzer(database_file)
    analyzer.teach_from_directory(ham_folder, True)
    analyzer.teach_from_directory(spam_folder, False)
    analyzer.save_database()

teach_and_create_database(ham_folder, spam_folder, database_file)

test_files = [f for f in os.listdir(test_folder) if f.endswith(".eml")]
analyzer = SpamAnalyzer(database_file)

for file in test_files:
    file_path = os.path.join(test_folder, file)
    msg = MailMessage.load(file_path)
    print(msg.subject)
    probability = analyzer.test(msg)
    print_result(probability)