Seuil d'utilisation de la mémoire par MySQL dépassé

[Archinformatique]

Tu peux aussi regarder le module suivant

Query Monitor

Cela devrait confirmer l’avis de @anon70622873

[Kris]

Merci Bruno !
Dans phpMyAdmin, je vois 108 tables pour un total de 272,5 Moi, on est loin de 1,74G utilisé par MySQL, n’est-ce pas ?

Infogéré : pardon, je me suis mal exprimé – c’est un VPS mais je n’ai pas pris l’option d’infogérance (faute moyens en ce moment).

Aucun plugin n’a été ajouté récemment, c’est toujours la même config depuis un moment. Est-ce que vraiment c’est un plugin, donc, qui en serait la cause ?

Le graph vient du Advanced Monitoring dans Plesk. Malheureusement il ne montre pas des connexions et des requêtes SQL – où est-ce que je peux me les procurer ?

@anon70622873

Il faudrait également vérifier la configuration de MySQL.

Je le ferai volontiers – quelles valeurs dois-je vérifier ?

Archinformatique :

que donne

free –m

Que cela veut dire, stp ?

[Archinformatique]

@Kris

que donne

free –m

Que cela veut dire, stp ?

En ligne de commande donne le retour de la requête suivante

free -m

Et tu devrais installer Query Monitor, cela devrait éclairer tes recherches

[Kris]

Je crois que j’ai trouvé les connections SQL (dans phpMyAdmin)

Le tableau continue encore mais les requesttes principales sont là.
Query Monitor est installé, qu’est-ce qu’il faut que regarde ?

@Archinformatique - qu’est-ce que je dois faire concrètement : écrire juste cela

free –m

mais où, et ensuite qu’est ce que cela va faire ?

Merci à vous

[Archinformatique]

ça c’est pour Query Monitor : Query Monitor

@Archinformatique - qu’est-ce que je dois faire concrètement : écrire juste cela

free –m

mais où, et ensuite qu’est ce que cela va faire ?

En ligne de commande veux dire dans le shell. Tu as accès à ton serveur autre que Plesk (je ne connais pas du tout). Si oui alors tu tapes juste cette requête après d’être connecté à ton serveur.
Cela donnera un tableau avec des données et rien d’autre. Aucun impact ailleurs.

[Kris]

Merci, c’est super sympa !

Juste 2 questions :

1. Qu’est-ce que je dois chercher dans Query Monitor qui pourra m’éclairer concernant l’utilisation excessive de la mémoire de MySQL ?

2. Je peux me connecter au serveur par Filezilla ou Plesk, mais à vrai dire je ne vois pas où je peux taper free-m… ?

[MicP]

Bonjour

@Kris

… je ne vois pas où je peux taper free-m …

michel@debT450:~$ free -m
              total       utilisé      libre     partagé tamp/cache   disponible
Mem:          15713        1102       13514         166        1097       14156
Partition d'échange:       16383           0       16383
michel@debT450:~$ 

[anon70622873]

Je ne connais pas Query Monitor, mais si le problème vient de WordPress ou de l’une de ses extensions, cela sera très utile. Il faudra indiquer aussi la version de WordPress et la liste complète des extensions utilisées.
En attendant je vois 79800 requêtes select par heure, , soit 22 par seconde, ce qui est relativement élevé : à voir suivant la fréquentation du site web. Cela explique l’occupation de la mémoire.

[Kris]

Bonjour,

La version de WordPress est 5.6. Une précision : il y a le site PROD mais aussi DEV, à 90% identique.

La fréquentation du site est très basse depuis que le covid est arrivé, 50-60 par jour. Dans ce cas, est-ce que la valeur Select est anormal ?

Voici la liste des plugins actifs

1. advanced-custom-fields
2. advanced-database-cleaner
3. all-404-redirect-to-homepage
4. all-in-one-favicon
5. amp
6. arfaly-press
7. backupbuddy
8. better-wp-security
9. categories-images
10. check-email
11. classic-editor
12. code-snippets
13. contact-form-7
14. cookie-law-info
15. cool-tag-cloud
16. duplicator
17. easy-digital-downloads
18. easy-digital-downloads-variable-defaults
19. edd-enhanced-ecommerce-tracking
20. edd-featured-downloads
21. edd-recommended-products
22. edd-stripe
23. edd-variable-pricing-descriptions
24. emailTag
25. gravityforms
26. head-footer-code
27. http-https-remover
28. lazy-loading-responsive-images
29. loco-translate
30. miniorange-2-factor-authentication
31. popup-maker
32. premium-seo-pack
33. query monitor
34. server-ip-memory-usage
35. simple-css
36. simple-download-monitor
37. simple-page-ordering
38. simple-taxonomy
39. taxonomy-terms-order
40. tiny-compress-images
41. turbo-widgets
42. use-any-font
43. waveplayerwordfence
44. wordpress-php-info
45. wp-crontrol
46. wp-file-manager
47. wp-rocket
48. wp-rocket-static-exclude-opt-css

Et je me rends compte qu’être débutant c’est vraiment ingrat ! je comprends 1 chose sur 10. Par ex. Query Monitor sera très utile – utile comment, qu’est-ce qu’il faut voir et comment l’interpreter ?

Et pour free-m : je vois le tableau de donnée présenté par MicP (merci à lui :- mais je ne sais toujours pas comment l’obtenir : j’ai essayé de taper free-m en l’ajoutant à l’url du site, j’ai regardé dans Plesk et Filezilla, sans succès. Damm…

[anon70622873]

@Kris

La fréquentation du site est très basse depuis que le covid est arrivé, 50-60 par jour. Dans ce cas, est-ce que la valeur Select est anormal ?

Non, ce n’est pas normal s’il y a un seul site WorpPress accessible publiquement. Je suppose que la version « dev » ne l’est pas.

Dans Query Monitor regarde « queries by component » cela devrait te permetre d’identifier l’extension qui génére toutes ces requêtes.

La commande free -m doit être exécutée dans une console, typiquement en te connectant en SSH à ton serveur.

[Archinformatique]

@anon70622873

La commande free -m doit être exécutée dans une console, typiquement en te connectant en SSH à ton serveur.

Et pour « completer » la réponse de @anon70622873, j’ai comme le sentiment que tu n’as jamais accédé à ton serveur en direct. Si tel est le cas, il te faudra installer Putty (car je suppose encore que ton ordinateur fonctionne avec un environnement Windows) qui te permettra de te connecter en SSH. Il te faut récupérer l’adresse IP du serveur et le MDP.

[Kris]

Dommage mais je ne peux toujours pas faire free-m, j’ai dû louper une étape mais directement dans Putty ça ne marche pas.

Par contre j’ai fait MySQLTuner check (dans Putty, youpi !), je donne le résultat plus bas. Mais là je me rends compte que les extraterrestres existent vraiment et ils parlent cette langue, malheureusement moi pas du tout du tout (je suis musicien et occasionnellement ingé-son).
A la limite je comprends que la mémoire de MySQL est de 871.4M (ligne 45) : sur le total de 8G de RAM et en sachant qu’il y a aussi le site DEV, est-ce que c’est envisageable d’augmenter cette limite ?

1. MySQLTuner 1.7.13 - Major Hayden major@mhtx.net

2. Bug reports, feature requests, and downloads at http://mysqltuner.com/

3. Run with ‹ –help › for additional options and output filtering

5. [–] Skipped version check for MySQLTuner script
6. [OK] Currently running supported MySQL version 10.3.27-MariaDB-0+deb10u1
7. [OK] Operating on 64-bit architecture
9. -------- Log file Recommendations ------------------------------------------------------------------
10. [–] Log file: /var/log/mysql/error.log(639B)
11. [OK] Log file /var/log/mysql/error.log exists
12. [OK] Log file /var/log/mysql/error.log is readable.
13. [OK] Log file /var/log/mysql/error.log is not empty
14. [OK] Log file /var/log/mysql/error.log is smaller than 32 Mb
15. [!!] /var/log/mysql/error.log contains 4 warning(s).
16. [!!] /var/log/mysql/error.log contains 3 error(s).
17. [–] 0 start(s) detected in /var/log/mysql/error.log
18. [–] 0 shutdown(s) detected in /var/log/mysql/error.log
20. -------- Storage Engine Statistics -----------------------------------------------------------------
21. [–] Status: +Aria +CSV +InnoDB +MEMORY +MRG_MyISAM +MyISAM +PERFORMANCE_SCHEMA +SEQUENCE
22. [–] Data in InnoDB tables: 476.5M (Tables: 447)
23. [–] Data in MyISAM tables: 40.0K (Tables: 14)
24. [OK] Total fragmented tables: 0
26. -------- Analysis Performance Metrics --------------------------------------------------------------
27. [–] innodb_stats_on_metadata: OFF
28. [OK] No stat updates during querying INFORMATION_SCHEMA.
30. -------- Security Recommendations ------------------------------------------------------------------
31. [OK] There are no anonymous accounts for any database users
32. [OK] All database users have passwords assigned
33. [!!] User ‹ wordpress_7@% › does not specify hostname restrictions.
34. [!!] User ‹ wp_clone_user@% › does not specify hostname restrictions.
35. [–] There are 618 basic passwords in the list.
37. -------- CVE Security Recommendations --------------------------------------------------------------
38. [OK] NO SECURITY CVE FOUND FOR YOUR VERSION
40. -------- Performance Metrics -----------------------------------------------------------------------
41. [–] Up for: 29d 1h 44m 27s (70M q [27.874 qps], 1M conn, TX: 5607G, RX: 21G)
42. [–] Reads / Writes: 92% / 8%
43. [–] Binary logging is disabled
44. [–] Physical Memory : 8.0G
45. [–] Max MySQL memory : 871.4M
46. [–] Other process memory: 1.2G
47. [–] Total buffers: 432.0M global + 2.9M per thread (151 max threads)
48. [–] P_S Max memory usage: 0B
49. [–] Galera GCache Max memory usage: 0B
50. [OK] Maximum reached memory usage: 496.0M (6.05% of installed RAM)
51. [OK] Maximum possible memory usage: 871.4M (10.64% of installed RAM)
52. [OK] Overall possible memory usage with other process is compatible with memory available
53. [OK] Slow queries: 0% (5/70M)
54. [OK] Highest usage of available connections: 14% (22/151)
55. [OK] Aborted connections: 0.00% (0/1141305)
56. [!!] name resolution is active : a reverse name resolution is made for each new connection and can reduce performance
57. [!!] Query cache may be disabled by default due to mutex contention.
58. [OK] Query cache efficiency: 24.6% (18M cached / 73M selects)
59. [!!] Query cache prunes per day: 225787
60. [OK] Sorts requiring temporary tables: 0% (56 temp sorts / 4M sorts)
61. [!!] Joins performed without indexes: 41121
62. [!!] Temporary tables created on disk: 82% (7M on disk / 9M total)
63. [OK] Thread cache hit rate: 99% (22 created / 1M connections)
64. [OK] Table cache hit rate: 81% (942 open / 1K opened)
65. [OK] Open file limit used: 0% (113/16K)
66. [OK] Table locks acquired immediately: 100% (1K immediate / 1K locks)
68. -------- Performance schema ------------------------------------------------------------------------
69. [–] Performance schema is disabled.
70. [–] Memory used by P_S: 0B
71. [–] Sys schema isn’t installed.
73. -------- ThreadPool Metrics ------------------------------------------------------------------------
74. [–] ThreadPool stat is enabled.
75. [–] Thread Pool Size: 6 thread(s).
76. [–] Using default value is good enough for your version (10.3.27-MariaDB-0+deb10u1)
78. -------- MyISAM Metrics ----------------------------------------------------------------------------
79. [!!] Key buffer used: 18.3% (24M used / 134M cache)
80. [OK] Key buffer size / total MyISAM indexes: 128.0M/164.0K
81. [OK] Read Key buffer hit rate: 99.1% (2K cached / 24 reads)
83. -------- InnoDB Metrics ----------------------------------------------------------------------------
84. [–] InnoDB is enabled.
85. [–] InnoDB Thread Concurrency: 0
86. [OK] InnoDB File per table is activated
87. [!!] InnoDB buffer pool / data size: 128.0M/476.5M
88. [!!] Ratio InnoDB log file size / InnoDB Buffer pool size (75 %): 48.0M * 2/128.0M should be equal 25%
89. [OK] InnoDB buffer pool instances: 1
90. [–] Number of InnoDB Buffer Pool Chunk : 1 for 1 Buffer Pool Instance(s)
91. [OK] Innodb_buffer_pool_size aligned with Innodb_buffer_pool_chunk_size & Innodb_buffer_pool_instances
92. [OK] InnoDB Read buffer efficiency: 99.97% (14545978885 hits/ 14550837280 total)
93. [OK] InnoDB Write log efficiency: 90.81% (33940926 hits/ 37375855 total)
94. [OK] InnoDB log waits: 0.00% (0 waits / 3434929 writes)
96. -------- AriaDB Metrics ----------------------------------------------------------------------------
97. [–] AriaDB is enabled.
98. [OK] Aria pagecache size / total Aria indexes: 128.0M/1B
99. [!!] Aria pagecache hit rate: 94.5% (141M cached / 7M reads)
101. -------- TokuDB Metrics ----------------------------------------------------------------------------
102. [–] TokuDB is disabled.
104. -------- XtraDB Metrics ----------------------------------------------------------------------------
105. [–] XtraDB is disabled.
107. -------- Galera Metrics ----------------------------------------------------------------------------
108. [–] Galera is disabled.
110. -------- Replication Metrics -----------------------------------------------------------------------
111. [–] Galera Synchronous replication: NO
112. [–] No replication slave(s) for this server.
113. [–] Binlog format: MIXED
114. [–] XA support enabled: ON
115. [–] Semi synchronous replication Master: OFF
116. [–] Semi synchronous replication Slave: OFF
117. [–] This is a standalone server
119. -------- Recommendations ---------------------------------------------------------------------------
120. General recommendations:

121.    Control warning line(s) into /var/log/mysql/error.log file
     

122.    Control error line(s) into /var/log/mysql/error.log file
     

123.    Restrict Host for user@% to user@SpecificDNSorIp
     

124.    Configure your accounts with ip or subnets only, then update your configuration with skip-name-resolve=1
     

125.    Adjust your join queries to always utilize indexes
     

126.    When making adjustments, make tmp_table_size/max_heap_table_size equal
     

127.    Reduce your SELECT DISTINCT queries which have no LIMIT clause
     

128.    Performance schema should be activated for better diagnostics
     

129.    Consider installing Sys schema from https://github.com/mysql/mysql-sys
     

130.    Before changing innodb_log_file_size and/or innodb_log_files_in_group read this: https://bit.ly/2TcGgtU
     

131. Variables to adjust:

132.    query_cache_size (=0)
     

133.    query_cache_type (=0)
     

134.    query_cache_size (> 16M)
     

135.    join_buffer_size (> 256.0K, or always use indexes with JOINs)
     

136.    tmp_table_size (> 16M)
     

137.    max_heap_table_size (> 16M)
     

138.    performance_schema = ON enable PFS
     

139.    innodb_buffer_pool_size (>= 476.5M) if possible.
     

140.    innodb_log_file_size should be (=16M) if possible, so InnoDB total log files size equals to 25% of buffer pool size.
     

[anon70622873]

C’est :

free -m

Avant de lancer MySQLTunner il faut comprendre pourquoi tu as autant de requête SQL. Et donc examiner Query Monitor comme je l’ai demandé.

Ensuite tu pourras effectivement ajuster les variables de configuration MySQL suivant les recommandations de MySQLTunner.

[Kris]

Oui, je comprends. Voici Queries by component.

Waveplayer est en 1ere place - c’est le player pour pouvoir écouter la musique. C’est vrai qu’il est très présent car c’est un site de musique.

Dans la ligne 127 myqltuner suggerait : reduce your SELECT DISTINCT queries which have no LIMIT clause. Est-ce que je dois faire ça avec waveplayer, et si oui, comment ?

[Archinformatique]

Tu peux essayer d’ajouter une photo plus nette. C’est difficile à lire.
Et par la même occasion poste free -m

[anon70622873]

Ton image est illisible pour moi.

[Kris]

Merci à vous, je sais que je prends sur votre temps. Voici juste le haut de la colonne, ce sera plus lisible. C’est surtout le plugin Waveplayer qui est mentionné (204 select).
Pour ce qui est de free-m: comme je l’ai dit plus haut, quand je tape cette commande directement après root@v2133, j’ai le message: commande introuvable. Donc visiblement il faut la taper ailleurs, mais où…

[anon70622873]

Je viens d’installer l’extension Query Monitor sur une instance de WordPress pour voir comment elle fonctionne.
Le rapport fourni dans ton image concerne le nombre de requêtes pour la page courante.
On voit donc que waveplayer, mais aussi categories-images et easy-digital-downloads produisent beaucoup trop de requêtes. L’idéal serait donc de remplacer ces extensions par d’autres mieux codées… surtout les deux premières.
Par ailleurs ton image montre : PHP Errors (83) ! Ce serait intéressant de voir cela.

Une dernière fois c’est :

free -m

avec une espace.
Il va falloir apprendre à utiliser la ligne de commande pour pouvoir modifier la configuration de MySQL comme suggéré par MySQLTunner. Mais tu peux le faire via phpmyadmin (onglet Variables) même si c’est beaucoup moins pratique.

[Kris]

Eureka, avec un espace ça marche ! -

Il semblerait qu’un paquet de mémoire est disponible, si ma lecture d’un néophyte est correcte.

Evidemment, il faudra trouver pourquoi MySQL se comporte comme ça. Mais dans l’immédiat, pensez-vous qu’il est envisageable d’augmenter simplement la limite max de la mémoire MySQL ?

Une autre question, svp : certains plugins montrent un chiffre très élevé de SELECT, qui apparemment n’est pas une bonne chose. Est-ce qu’on peut modifier quelque chose concernant ces plugins pour améliorer ce score ? Ou c’est le plugin qui est mal codé et on ne pourra rien faire ?

Merci :-

[Kris]

Bonjour,
Une mise à jour : depuis mon dernier poste la mémoire de MySQL est redevenue normale, toute seule apparemment.
Ensuite elle est de nouveau remontée très haut, jusqu’à 2,84GiB.
Puis cette nuit elle est retombée à 283MiB, donc à 1/10 de sa valeur de hier.

Je ne comprends toujours pas comment c’est possible, de quoi dépend l’utilisation de la mémoire de la bdd, pourquoi elle remonte aussi haut alors que le site peut fonctionner très bien avec seulement 1/10 de cette valeur, pourquoi elle retombe brusquement et toute seule – est-ce que le système la purge… ? Merci si vous avez des réponses…