report.ts

import * as fs from 'node:fs';
import * as path from 'node:path';

// De interface die we verwachten van de crawler
export interface ExtractedPageData {
    url: string;
    h1: string;
    first_paragraph: string;
    outgoing_links: string[];
    image_urls: string[];
}

// Helper functie uit de opdracht om karakters correct te escapen voor Excel/CSV
function csvEscape(field: string): string {
    const str = field ?? '';
    const needsQuoting = /[",\n\r]/.test(str); // Check op komma, quote of enter
    const escaped = str.replace(/"/g, '""'); // Dubbele quotes escapen
    return needsQuoting ? `"${escaped}"` : escaped;
}

export function writeCSVReport(
    pageData: Record<string, ExtractedPageData>,
    filename = 'report.csv',
): void {
    const headers = ['page_url', 'h1', 'first_paragraph', 'outgoing_link_urls', 'image_urls'];

    // Begin met de header rij
    const rows: string[] = [headers.join(',')];

    // Loop door alle data heen
    for (const page of Object.values(pageData)) {
        // Data voorbereiden
        const rowData = [
            page.url,
            page.h1,
            page.first_paragraph,
            page.outgoing_links.join(';'), // Lijsten scheiden met ;
            page.image_urls.join(';'), // Lijsten scheiden met ;
        ];

        // Elk veld escapen en samenvoegen met komma's
        const csvRow = rowData.map(csvEscape).join(',');
        rows.push(csvRow);
    }

    // Alles samenvoegen met nieuwe regels
    const csvContent = rows.join('\n');

    // Bestandspad bepalen en schrijven
    const filePath = path.resolve(process.cwd(), filename);
    try {
        fs.writeFileSync(filePath, csvContent);
        console.log(`Report written to ${filePath}`);
    } catch (err) {
        console.error(`Error writing report: ${err}`);
    }
}