djomobil/php-scrapyd

Package de communication avec l'API Scrapyd pour gérer les spiders et les tâches de scraping

1.0.0 2024-10-30 22:35 UTC

This package is auto-updated.

Last update: 2025-04-29 01:36:55 UTC


README

Latest Version on Packagist Total Downloads

Package de communication avec l'API Scrapyd pour gérer les spiders et les tâches de scraping.

Installation

Vous pouvez installer le package via Composer :

composer require Djomobil/php-scrapyd

Configuration

Ajoutez votre configuration Scrapyd dans .env ou directement dans le code :

SCRAPYD_BASE_URL=http://localhost:6800
SCRAPYD_USERNAME=your_username
SCRAPYD_PASSWORD=your_password

Utilisation

Exemples d'utilisation du package pour interagir avec l'API Scrapyd.

Initialisation du Service

use Djomobil\PhpScrapyd\Services\ScrapydService;
use Djomobil\PhpScrapyd\Helpers\HttpHelper;

$scrapydService = new ScrapydService(
    new HttpHelper(),
    'http://localhost:6800',
    'your_username',
    'your_password'
);

Planification d'un Job

$jobId = $scrapydService->job()->scheduleJob([
    'project' => 'my_project',
    'spider' => 'my_spider'
]);

echo "Job ID: $jobId";

Récupération du Statut du Daemon

$status = $scrapydService->daemon()->getDaemonStatus();
print_r($status);

Tests

Exécutez les tests avec :

vendor/bin/phpunit

Contribuer

Les contributions sont les bienvenues ! Merci de bien vouloir ouvrir une issue ou un pull request pour signaler un problème ou proposer une amélioration.

Linting

Assurez-vous que votre code respecte les standards de phpcs :

composer lint

Déploiement sur Packagist

Le package est déployé automatiquement sur Packagist à chaque nouvelle version taggée.