Benchmarks on PIG.CENTER

Benchmark de l'utilisation de la mémoire de stockage

Mon, 01 Jan 0001 00:00:00 +0000

Deux composants du stockage etcd consomment de la mémoire physique. Le processus etcd alloue un index en mémoire afin d’accélérer la recherche des clés. La mémoire tampon de pages, gérée par le système d’exploitation, stocke les données récemment accessibles sur disque pour une réutilisation rapide.

L’index en mémoire stocke toutes les clés dans une structure de données arbre B , accompagnées de pointeurs vers les données sur disque (les valeurs). Chaque clé dans l’arbre B peut contenir plusieurs pointeurs, chacun faisant référence à une version différente de sa valeur. La consommation mémoire théorique de l’index en mémoire peut donc être approximée par la formule :

Benchmark de l'utilisation mémoire de la surveillance

Mon, 01 Jan 0001 00:00:00 +0000

Note

Les fonctionnalités de surveillance sont en développement actif, et leur utilisation mémoire peut évoluer au cours de ce développement. Nous ne prévoyons pas d’augmentation significative au-delà des valeurs indiquées ci-dessous.

Un objectif principal d’etcd est de prendre en charge un très grand nombre d’observateurs effectuant une surveillance massivement étendue. etcd vise à supporter O(10k) clients, O(100K) flux de surveillance (O(10) flux par client) et O(10M) surveillance totale (O(100) surveillance par flux). La mémoire consommée par chaque surveillance individuelle représente la plus grande partie de l’utilisation globale d’etcd, et constitue donc le point focal des optimisations actuelles et futures.

Benchmarking d'etcd v3

Mon, 01 Jan 0001 00:00:00 +0000

Machines physiques

Type de machine GCE n1-highcpu-2

1 disque SSD local dédiqué monté sous /var/lib/etcd
1 disque lent dédié pour le système d’exploitation
1,8 Go de mémoire
2 processeurs
version etcd 2.2.0

etcd cluster

1 membre etcd en mode démonstration v3

Test

Utilisez l’outil de benchmark etcd v3 .

Performances

lecture d’une seule clé

taille de la clé en octets	nombre de clients	QPS de lecture	latence au 90e percentile (ms)
256	1	2716	0,4
256	64	16623	6,1
256	256	16622	21,7

Les performances sont presque identiques à celles obtenues avec un gestionnaire de serveur vide.

Benchmarking etcd v2.2.0-rc-memory

Mon, 01 Jan 0001 00:00:00 +0000

Machine physique

Type de machine GCE n1-standard-2

1 disque SSD local dédié monté sous /var/lib/etcd
1 disque lent dédié pour le système d’exploitation
7,5 Go de mémoire
2 processeurs

etcd

etcd Version: 2.2.0-rc.0+git
Git SHA: 103cb5c
Go Version: go1.5
Go OS/Arch: linux/amd64

Test

Démarrez un cluster etcd composé de 3 membres, chacun utilisant 2 cœurs.

Benchmarking etcd v2.2.0-rc

Mon, 01 Jan 0001 00:00:00 +0000

Machine physique

Type de machine GCE n1-highcpu-2

1 disque SSD local dédié monté sous /var/lib/etcd
1 disque lent dédié pour le système d’exploitation
1,8 Go de mémoire
2 processeurs

etcd cluster

3 membres etcd 2.2.0-rc, chacun exécuté sur une seule machine.

Versions détaillées :

etcd Version: 2.2.0-alpha.1+git
Git SHA: 59a5a7e
Go Version: go1.4.2
Go OS/Arch: linux/amd64

En outre, nous utilisons 3 membres etcd 2.1.0 en phase alpha pour constituer le cluster et obtenir des performances de base. La tête du commit d’etcd est située à c7146bd5 , identique à celle utilisée dans benchmark etcd 2.1 .

Benchmarking d'etcd v2.2.0

Mon, 01 Jan 0001 00:00:00 +0000

Machines physiques

Type de machine GCE n1-highcpu-2

1 disque SSD local dédié monté en répertoire de données etcd
1 disque lent dédié pour le système d’exploitation
1,8 Go de mémoire
2 processeurs

etcd cluster

3 membres etcd 2.2.0, chacun exécuté sur une machine unique.

Versions détaillées :

etcd Version: 2.2.0
Git SHA: e4561dd
Go Version: go1.5
Go OS/Arch: linux/amd64

Test

Initialisez une autre machine, en dehors du cluster etcd, puis exécutez l’outil de benchmark HTTP hey avec un correctif de réutilisation de connexion pour envoyer des requêtes à chaque membre du cluster etcd. Consultez les instructions de benchmark pour obtenir le correctif et les étapes permettant de reproduire nos procédures.

Test de performance d'etcd v2.1.0

Mon, 01 Jan 0001 00:00:00 +0000

Machines physiques

Type de machine GCE n1-highcpu-2

1 disque SSD local dédié monté sous /var/lib/etcd
1 disque lent dédié pour le système d’exploitation
1,8 Go de mémoire
2 processeurs
version etcd 2.1.0 alpha

etcd cluster

3 membres etcd, chacun exécuté sur une machine unique

Test

Initialisez une autre machine et utilisez l’outil de benchmark HTTP hey pour envoyer des requêtes à chaque membre etcd. Consultez le guide de manipulation du benchmark pour des instructions détaillées.