Comment surveiller la disponibilité de 20 sites Web (ping ou http) dans Node.js / ror

Utilisez des outils de surveillance tels que Zabbix, Nagios, Blah Blah, qui peut métrique divers paramètres de vos serveurs en nombre de masse.

Si vous souhaitez l'implémenter dans JS, vous pouvez effectuer une requête HTTP intervalle de temps, puis pour déterminer le code d'état de retour HTTP et utiliser XPath ou Regex pour valider certains éléments est correct

Pour Ruby, un processus de démon et utilisez une piscine de thread (idée multithreading) et URI ouverte pour afficher le code HTTP et le contenu, utilisez XPath pour valider si le contenu est correct correctement.

GitHub

J'aime vraiment le nœud.js et je voudrais aborder ce problème et j'espère bientôt partager du code sur Github pour y parvenir. N'oubliez pas que je n'ai que très bien une configuration de base, hébergée à https://github.com/alfredwesterveld/freakinping

Quel est le meilleur moyen de ping une liste de 20 sites web toutes les 5 minutes (pour exemple) Afin de savoir si le site répond avec http 202 ou pas?

Ping (ICMP)

Tout d'abord, j'aimerais savoir si vous voulez vraiment faire un Ping (ICMP) ou si vous voulez simplement savoir si le site Web revient avec Code 200 (OK) et mesurez le temps nécessaire. Je crois que du contexte que vous ne voulez pas vraiment faire un ping, mais juste une requête HTTP et mesurer le temps. Je demande à cela parce que (je crois) de noeud.js / Ruby / Python ne peut pas être fait à partir d'un utilisateur normal, car nous avons besoin de prises brutes (utilisateur root) pour faire le pinging (ICMP) du langage de programmation. I Par exemple, j'ai trouvé ce ping script en python (je crois aussi que j'ai vu un simple Script rubis quelque part bien que je ne suis pas un très gros programmeur de rubis) mais nécessite un accès root. Je ne crois pas qu'il y ait encore un module de ping pour Node.js.

File d'attente de messages

Aussi, y a-t-il mieux mais pas d'évidence solution pour cela? J'ai bien peur la liste peut atteindre 20000 sites Web et ensuite Il n'y a pas assez de temps pour les ping Tous dans les 5 minutes, je dois être pinging.

essentiellement, je décris comment pingom, UPTIMEROBOT, et le travail de goûts.

Ce dont vous avez besoin pour atteindre ce type d'échelle consiste à utiliser un file d'attente de message comme par exemple < Un href = "http://redis.io"> Redis , beanstakkd ou engrenage. À l'échelle du processus de travailleur pingdom Un ouvrier ne va pas le couper, mais dans votre cas, un ouvrier fera. Je pense (supposer) Redis sera la file d'attente de messagerie la plus rapide à cause de l'extension C (nœud.jod.js), mais à nouveau, je devrais le repasser contre BeanStalkd, qui est une autre file d'attente de message populaire (mais ne dispose pas encore d'une extension C). < / p>

J'ai bien peur que la liste puisse atteindre 20000 Sites Web

Si vous obtenez à cette échelle, vous devrez peut-être avoir plusieurs cases à plusieurs boîtes (beaucoup de threads / traitements de travailleurs) pour gérer la charge, mais vous n'êtes pas encore à cette échelle et nœud.js est insensé rapidement . Il pourrait même être capable de gérer cette charge avec une seule boîte, bien que je ne sache pas à coup sûr (vous devez faire / exécuter des points de repère).

DataStore / Redis

Je pense que cela pourrait être accessible assez facilement dans Node.js (j'aime vraiment le nœud.js). La façon dont je le ferais est d'utiliser Redis comme mon magasin de données, car il est fou de Fast! xxx

en utilisant Node_redis (avec hredis (nœud.js) c bibliothèque). J'ajouterais les URL à ReDis en utilisant SADD .

Tâches d'exécution toutes les 5 minutes

Cela pourrait être atteint sans aucun effort. J'utiliserais le seinterval (rappel, délai, [arg], [...]) pour tester plusieurs fois le temps de réponse des serveurs. Obtenez toutes les URL sur Callback de REDIS en utilisant Smembres . Je mettrais toutes les URL (messages) sur la file d'attente de messages en utilisant RPUSH .

Vérification de la réponse (heure)

Cependant, ce qui se passe quand on ne réponses? Qu'advient-il de ceux qui Après cela?

Je ne comprendrais peut-être pas complètement cette phrase mais ici ça va. Si on échoue, ça échoue. Vous pouvez essayer de vérifier la réponse (heure) à nouveau en 5 secondes ou quelque chose à voir s'il est en ligne. Un algorithme précis pour cela devrait être conçu. Ceux après cela ne devraient avoir rien à voir avec les URL précédentes, à moins que le même serveur ne soit au même serveur. Aussi quelque chose que vous pensez clairement que je suppose que je suppose parce que vous ne devez pas ping toutes ces URL au même serveur en même temps, mais les festes les attentes ou quelque chose.

URL de traitement Du Processus de travailleurs (pour l'instant d'un seul serait suffisant) Fetch Message (URL) de Redis à l'aide de Commande BRPOP . Vérifiez le temps de réponse pour l'URL (message) et récupérez la prochaine URL (message) dans la liste. Je ferais probablement un couple de demande simultanée pour accélérer le processus.