Uso do TypeScript

O uso do TypeScript facilita o desenvolvimento, fornecendo realce automático de métodos e propriedades, bem como verificação de tipos:

Recomendamos o uso do editor Visual Studio Code para criar e editar scrapers

Instale a biblioteca de tipos do A-Parser:

cd files/
npm install a-parser-types

O A-Parser cria automaticamente um arquivo de configuração básico do TypeScript se ele estiver ausente:

files/tsconfig.json

{
    "compilerOptions": {
        "target": "esnext",
        "moduleResolution": "node",
        "module": "commonjs",
        "sourceMap": true,
        "baseUrl": ".",
        "paths": {
            "*": ["node_modules/*", "../dist/nodejs/node_modules/*"]
        }
    },
    "include": ["**/*.ts"]
}

Crie o arquivo do scraper:

mkdir files/parsers/Awesome-Parser/
touch files/parsers/Awesome-Parser/Awesome-Parser.ts

Use este modelo para iniciar o desenvolvimento:

files/parsers/Awesome-Parser/Awesome-Parser.ts

import { BaseParser } from 'a-parser-types';

export class JS_Awesome_Parser extends BaseParser {
    static defaultConf: typeof BaseParser.defaultConf = {
        version: '0.0.1',
        results: {
            flat: [
                ['title', 'Title'],
            ],
            arrays: {
            }
        },
        results_format: "Title: $title\n",
    };

    static editableConf: typeof BaseParser.editableConf = [
    ];

    async parse(set, results) {
        ...

        return results;
    }
}

nota

• Os geradores foram substituídos por async/await

Diferenças da API v1

• Geradores foram substituídos por async/await
• Os campos defaultConf e editableConf tornaram-se static
• A classe do scraper deve ser herdada de BaseParser
• TypeScript pode ser usado opcionalmente, recomendamos usá-lo por padrão para o realce de métodos e parâmetros disponíveis