Boutique avec 40 000 produits en repricing

[mika]

Bonjour,

 

J'ai une boutique avec environ 40 000 produits qui s'exportent vers plusieurs marketplaces via un gestionnaire de flux ainsi qu'un module de repricing qui exporte chaque soir tout mon catalogue et enfin un autre module de drop shipping ( ce sont les 3 modules les plus importants ) .

Avant, j'avais moins de 10 000 produits et tout se passait plutôt bien, mais depuis que j'ai intégré les 30 000 produits supplémentaires, il n'y a plus d'export possible en repricing; cela fait planter le serveur mysql !

Le dev du module m'a alors indiqué que mon php et mysql n'étaient pas bien configurés pour la taille de mon catalogue . Malheureusement, je n'y connais pas grand chose et peu d'infos sur les config type sur le net . Pour infos, voici quelques variables actuellement en place :

 

Prestashop 1.6.1

40 000 produits

1 000 catégories 

Repricing du catalogue en entier sur 3 marketplaces 4x par jour + 1 export chaque soir

 

Serveur :

Processeur    Intel Xeon E3 1225v2
Cœurs / Threads    4 cores / 4 threads
Fréquence    3.2 GHz+
RAM    32Go DDR3
Disques    2x 2 To SATA

 

Php 5.6 :

Memory limit : 8192M

max_input_vars = 28000

max_execution_time = 600

max_input_time = 120

 

Mysql :

key_buffer              = 16M

max_allowed_packet      = 16M

thread_stack            = 192K

thread_cache_size       = 8

myisam-recover         = BACKUP

max_connections        = 500

thread_concurrency     = 10

read_rnd_buffer_size   = 1024M

sort_buffer_size       = 192M

max_heap_table_size    = 2048M

tmp_table_size         = 2048M

table_open_cache        = 250000

table_definition_cache  = 250000

open_files_limit       = 96000

query_cache_limit       = 3M

query_cache_size        = 96M

 

Les logs d'erreur ne me donnent pas grand chose, j'ai juste dû supprimer les warnings émis par le module de repricing qui s'accumulaient à chaque début d'export ( 3 millions de lignes en moins de 2 minutes ! )

 

Voilà, donc si une personne connaît une configuration type valable pour une boutique comme la mienne, je suis preneur de solution !

 

Merci d'avance .

Edited November 5, 2018 by mika (see edit history)

[doekia]

Déjà corriger ce warning afin qu'il ne génère pas 3millions d'I/O