Ce printemps, nous avons reçu l'autorisation d'exploiter notre nouveau centre de données. Le premier, pour lequel tout, même le bâtiment, a été conçu et construit de toutes pièces par l'équipe Yandex. Au cours des 18 années pendant lesquelles les gens recherchent sur Internet avec Yandex, nous avons parcouru un long chemin depuis un serveur sous le bureau d'un de nos développeurs jusqu'à la construction d'un centre de données où nous utilisons des équipements de notre propre conception. En cours de route, nous avons acquis plusieurs centres de données en Russie, dans lesquels nous avons reconstruit des usines et des ateliers qui avaient autrefois cessé leurs activités.

Lorsque nous avons choisi un endroit pour construire un centre de données de toutes pièces, le climat froid était l'un des facteurs les plus importants. Mais c’est au cours de ce processus de construction que nous avons trouvé une solution technologique qui nous permet d’exploiter les DC dans un climat plus chaud. Nous prévoyons désormais de construire notre prochain centre de données dans la région de Vladimir. Et maintenant, nous avons toutes les chances de créer en Russie un centre de données qui deviendra l'un des plus avancés au monde.

Dans cet article, nous souhaitons vous expliquer comment nous avons conçu le DC, quelles difficultés notre équipe a rencontrées pendant le processus de construction, comment s'est déroulée la mise en service, quelles sont les caractéristiques des centres de données Yandex et comment fonctionne la récupération de chaleur, dont vous avez peut-être déjà entendu parler. .

Nécessité

Comme nous, l'architecture de services de l'entreprise permet d'organiser la redondance au niveau des centres de données, plutôt qu'au niveau des sous-systèmes, ce qui offre une plus grande flexibilité dans le choix des solutions et réduit la redondance des systèmes et les coûts associés.

Le centre de données et l'architecture du serveur sont conçus comme un système unique, de sorte que les paramètres de fonctionnement des systèmes d'ingénierie peuvent différer de ceux généralement acceptés - en particulier, il est possible d'utiliser des alimentations alternatives sans interruption et d'abandonner les solutions de refroidissement techniques encombrantes en augmentant la température admissible. gamme. Tout cela conduit à une efficacité accrue et à une réduction du coût total de possession des infrastructures.

L'une des mesures de performance du centre de données est le PUE. Cependant, en parlant de nos DC, nous n’allons pas le mettre au premier plan. Premièrement, nous n'avons pas besoin de mesurer le PUE avec des collègues, et deuxièmement, les désaccords existants dans la méthodologie de mesure de ce paramètre ne nous permettent pas de faire des comparaisons même entre nos propres DC.

Cependant, l'essence même du paramètre PUE est extrêmement importante pour Yandex. Les centres de données commerciaux peuvent se permettre de dépenser beaucoup d’argent en construction et en équipement, sachant que le client paiera tout en fin de compte. Dans notre cas, nous sommes notre propre client, donc le faible coût total de possession du DC (TCO) est peut-être le critère le plus important lors du choix des solutions dans l'entreprise.

Et bien sûr, notre équipe souhaite non seulement augmenter la surface d'installation de nouveaux racks, mais aussi ressentir une fierté professionnelle de ce que nous faisons.

Idée

Avant le début de la conception du centre de données finlandais, nous avons réussi à construire (et à fermer partiellement) 10 centres de données. Lors de la construction du prochain DC, nous avons à chaque fois essayé d'utiliser les solutions les plus intéressantes apparues sur le marché à ce moment-là. Cela a conduit à une grande variété de mises en œuvre, mais nous permet désormais de choisir les meilleures solutions non pas sur la base de catalogues publicitaires, mais en utilisant l'expérience accumulée dans l'entreprise et les résultats de nos propres expériences.

L’idée principale du projet finlandais DC est simple : il s’agit d’utiliser le freecooling direct 100 % du temps. Le freecooling direct (refroidissement des serveurs avec air extérieur) permet d'abandonner non seulement l'utilisation d'échangeurs de chaleur à eau glacée ou autre liquide de refroidissement approprié, mais également des appareils plus simples, comme la roue de Kyoto, installée dans l'un de nos DC. Dans le nouveau centre de données, nous prenons l'air de la rue, le faisons passer par des serveurs et le rejetons à l'extérieur, tout en en sélectionnant une partie pour le mélanger pendant la saison froide. Aujourd'hui, nos équipements de serveur fonctionnent calmement non seulement dans la plage de 20 à 24 degrés, ce qui était récemment la même « fenêtre ASHRAE » autorisée, mais également à des températures plus élevées et plus basses. Il n'est donc pas nécessaire d'installer des systèmes de refroidissement capricieux et coûteux ; vous pouvez simplement choisir une région dans laquelle la température annuelle moyenne est plus basse, et les jours les plus chauds, pulvériser de l'eau pour ajouter de l'humidité afin de réduire de plusieurs plusieurs la température de l'air d'entrée. degrés - c'est ce qu'on appelle le refroidissement adiabatique.

Chambre adiabatique et éliminateurs de gouttes derrière elle

Ceux d’entre vous qui ont étudié la conception du Facebook DC, qui a été publié à plusieurs reprises sur Internet, trouveront de nombreuses analogies. Mais il faut immédiatement préciser qu'il ne s'agit que d'une coïncidence. Alors que le concept de notre DC était déjà prêt, nous avons eu la chance d'aller visiter l'un des DC du réseau social, et nous avons été surpris d'apprendre que nos confrères venaient de mettre en place un projet quasiment identique au nôtre.

Bien sûr, les spécificités de l'Oregon et de la Finlande ont influencé les différences, mais le principe consistant à souffler de l'air de la rue est si simple et évident que la similitude des concepts n'est pas surprenante. En revanche, nous avons été heureux de constater que, à certains égards, notre projet sera encore plus intéressant.

Générateurs diesel et UPS dynamiques

Par exemple, un système de refroidissement adiabatique moins complexe et l'utilisation d'onduleurs rotatifs dynamiques (DRIUP) au lieu d'une combinaison de moteurs diesel et d'onduleurs à batterie classiques.

Comme le montre l'illustration, l'air froid entre de la rue (à droite de l'image) dans les chambres de mélange, d'où, après filtration, il est forcé à travers les parois du ventilateur à travers le module d'humidification jusqu'aux couloirs froids. .

Première rangée de filtres

Deuxième rangée de filtres et ventilateurs d'alimentation

Depuis les couloirs chauds, l'air pénètre dans l'espace du deuxième étage, qui joue le rôle d'une sorte de tampon, d'où une partie est dirigée vers les chambres de mélange.

Chambre de mélange de l'air extérieur et de l'air évacué pour obtenir une température optimale

L'air chaud non utilisé pour le mélange est évacué par des ventilateurs d'extraction de l'autre côté du bâtiment.

Dans le couloir chaud

La solution est en effet très simple, mais elle nécessite l’utilisation d’équipements capables de fonctionner à la température et à l’humidité appropriées, ce qui est difficile à réaliser pour les centres de données commerciaux.

Serveurs en opération

Comme l’a montré notre première expérience opérationnelle, nous disposons encore d’un potentiel d’amélioration important. Nous avons réalisé qu'il était possible de simplifier la conception du bâtiment, d'abandonner complètement l'utilisation de l'eau dans le DC et, enfin, d'étendre la géographie de la construction jusqu'aux régions centrales de la Russie. Grâce à cela, nous pourrons construire notre prochain centre de données dans la région de Vladimir, dont le climat est beaucoup plus chaud que celui de la Finlande.

Pourquoi la Finlande ?

Cette question est la deuxième plus populaire à laquelle nous devons répondre. La réponse est si simple qu’il est même un peu gênant d’en parler.

Le fait est que la mascotte non officielle de Yandex est un élan (« Notre élan ! »). Il existe deux pays dans le monde où ces animaux sont appréciés et chéris : la Suède et la Finlande. Mais comme Facebook était déjà créé en Suède, nous nous sommes retrouvés avec nos voisins du nord. Parmi tout le pays, nous avons choisi une ville dont les armoiries comportaient un élan. Les dés étaient donc jetés et nous avons décidé de construire à Mäntsälä.

Cependant, un seul élan ne suffit toujours pas. Les critères de sélection les plus importants à l'époque étaient la disponibilité de l'énergie électrique (le réseau électrique finlandais très stable a été construit il y a de nombreuses années pour les usines de pâte à papier et de papier, sensibles à la qualité de la tension d'alimentation), la bonne disponibilité des lignes optiques, des ingénieurs enthousiastes et, bien sûr, le climat froid du nord, sous lequel il était possible d'abandonner les refroidisseurs et d'utiliser honnêtement votre refroidissement gratuit préféré.

A noter que travailler avec des partenaires locaux s'est avéré être un réel plaisir. Ainsi, un permis de construire est obtenu en un mois (sic !), et une route, des conduites d'eau, de chaleur et des lignes électriques apparaissent aux limites du site dans un délai incroyablement court.

De plus, nous avons mis en place un projet de récupération de chaleur avec les autorités locales, pour ainsi dire pour le plaisir. En installant des échangeurs de chaleur à l'endroit où l'air chaud est évacué, nous chauffons le liquide de refroidissement et le transférons au système de chauffage urbain. Pour la municipalité, il s'est avéré moins coûteux d'amener l'eau ainsi chauffée avec des pompes à chaleur à la température requise que de construire une chaufferie supplémentaire pour les nouveaux quartiers de la ville.

Les échangeurs de chaleur proprement dits

Nous avons présenté cette solution en mars au salon CeBit (cette année en combinaison avec Datacenter Dynamics) et elle a attiré une grande attention - le sujet des technologies économes en énergie est très actuel aujourd'hui. Le 27 mai, Mäntsälä a reçu le prix de la meilleure ville avec pompes à chaleur d'Europe.

Conception

Si nous n'abordons pas le contenu de la documentation, nous avons déjà rencontré, dès le processus de conception, des caractéristiques intéressantes du travail en Finlande.

Il n'existe pas de formalisation aussi stricte de la conception et de la composition des documents à laquelle nous sommes habitués. En termes simples, le détail de la documentation doit être exactement tel que l'entrepreneur puisse obtenir toutes les informations nécessaires. Dans une certaine mesure, il était plus facile de communiquer avec les autorités chargées des licences, qui exprimaient leur approbation en fonction de la façon dont elles comprenaient le document, sans prêter attention à l'exhaustivité et au formatage.

Sous le toit où l'air est aspiré

Certains représentants du gouvernement n'ont pas du tout essayé d'exprimer leur opinion personnelle sur le projet. Un inspecteur des incendies, par exemple, était satisfait si le dossier soumis comprenait un visa d'une société de conseil certifiée. Une telle signature signifiait pour lui que le projet avait déjà été vérifié et était conforme à toutes les réglementations locales.

D’un autre côté, la plupart des petits entrepreneurs refusaient même d’estimer le coût des travaux à moins que chaque vis ne soit précisée dans les dessins. Cette approche a intrigué non seulement nous, mais aussi nos partenaires d'autres pays. En conséquence, de nombreux dessins contiennent beaucoup plus d’informations que ce à quoi on pourrait s’attendre.

Lors de la mise en œuvre du projet, nous avons utilisé un modèle tridimensionnel du bâtiment, dans lequel tous les équipements ont été placés, des chemins de câbles ont été posés, etc. Il a fallu un certain temps pour s'habituer à cet outil, mais ensuite travailler avec le modèle s'est avéré très pratique - nous avons pu résoudre rapidement certains problèmes lors du regroupement de systèmes qui n'étaient pas immédiatement évidents dans une représentation bidimensionnelle.

Nos collègues nous ont également appris à utiliser un système en ligne pour recueillir des commentaires sur le projet, afin que nous puissions être sûrs que les commentaires ne seraient pas perdus et seraient examinés régulièrement lors des réunions de projet.

Construction

Un grand article séparé pourrait être écrit sur les aventures extraordinaires des clients russes en Finlande. Mais la conclusion principale est simple : le succès de tels projets est déterminé par la capacité à surmonter les différences de mentalité et de culture des participants. Et la plus grande responsabilité nous incombe au moment de choisir un partenaire capable de concilier ces différences. De nombreux exemples peuvent être donnés. Les plus drôles sont probablement les suivants.

Début du chantier

Les travaux de construction finlandais s'étendent de sept heures du matin jusqu'à trois ou quatre heures de l'après-midi. Imaginez notre perplexité lorsque l'équipe russe, de retour du déjeuner, voit une foule amicale d'ouvriers du bâtiment qui ont déjà terminé leur journée de travail. Pendant la demi-journée restante, nous observons un chantier de construction presque désert, et dans ce contexte, les déclarations des partenaires finlandais semblent quelque peu étranges, se plaignant de ne pas pouvoir respecter les délais, même s'ils font de gros efforts.

Construction de structures en acier

Au niveau du travailleur moyen, la qualité de la construction finlandaise n’est pas très différente de celle à laquelle nous sommes habitués. Une augmentation significative de la qualité se produit avec l'ajout de plusieurs niveaux de contremaîtres, de superviseurs et de gestionnaires professionnels. Et bien que le prix de la « composante managériale » soit choquant, le résultat est très bon.

Et bien sûr, on ne peut manquer de mentionner le légendaire juillet finlandais, lorsque tout le pays arrête de travailler et commence à se détendre. Cela ne sert à rien d'appeler certaines entreprises - il n'y a personne au bureau. Comme nous sommes habitués à considérer ces rares belles journées comme le moment idéal pour achever de nombreux travaux de construction, une telle attitude de la part des entrepreneurs nous a semblé être un pur sabotage.

Le cadre est prêt

Mais la leçon la plus importante de cette construction a été la prise de conscience que des projets de cette envergure nécessitent une approche très particulière. La façon dont vous organisez la construction a un effet disproportionnellement plus important sur le résultat du projet que ce que vous construisez. Nous avons vu que dans un autre pays, les gens travaillent différemment. Cela ne veut pas dire qu’ils font quelque chose de mal, mais simplement différemment. Il semble que nous ayons réussi à nous comprendre, et l'essentiel est que nous ayons obtenu un excellent résultat ensemble.

Mise en service

La principale chose qui distingue ce projet de tous les précédents est peut-être la compréhension dès le début de l'importance d'une mise en service complète. Afin d'assurer une livraison de haute qualité de l'installation, et donc de minimiser les problèmes lors de l'exploitation, nous avons gardé à l'esprit toute une phase du projet appelée Commissioning, même pendant la période de conception. À contrecœur, nous avons donné deux mois à la mise en service, sachant que la mise en service d'un DC prêt à l'emploi serait retardée de ces deux mois, et en même temps réalisant qu'à l'avenir, cela rapporterait largement. En effet, lors du processus de mise en service, un certain nombre de lacunes ont été constatées. Rien de grave, mais cela apporterait des problèmes supplémentaires au service des opérations.

L'expérience non seulement russe, mais aussi mondiale, montre que la mise en service du courant continu reste un phénomène inhabituel. Dans le meilleur des cas, des fournisseurs disparates proposent des programmes de tests individuels, puis le groupe d'exploitation, en collaboration avec l'entrepreneur général, passe en revue les cinq ou six situations les plus critiques, généralement associées au démarrage des moteurs diesel et au changement d'entrées.

Une description complète du processus mérite une histoire à part, c'est pourquoi nous mentionnerons ici seulement que nous avons planifié et réalisé les cinq étapes du processus de mise en service avec une documentation minutieuse des résultats.

La mise en service a été réalisée par une équipe spécialement formée. Formellement, ils étaient des employés de l'entrepreneur général, mais en réalité ils agissaient de manière indépendante, évaluant la qualité du travail, y compris celui de leurs collègues. Le service d'exploitation, déjà constitué à cette époque, a également joué un rôle important dans la mise en service. Naturellement, les représentants du bureau de Moscou ont suivi de près les résultats des tests.

Cette approche était relativement nouvelle pour nous. Nous avons apprécié ses capacités et maintenant nous ne pouvons même plus imaginer comment lancer sans lui.

Exploitation

Il est intéressant de noter que nous avons commencé à recruter et à former le service d'exploitation bien avant l'installation des systèmes d'ingénierie. Cela nous a permis de passer plus de temps à rechercher de très bons spécialistes, et de les impliquer partiellement même pendant la période de conception : malheureusement, cela a conduit à des changements dans le projet au tout dernier moment, mais cela a réduit l'isolement du projet par rapport aux besoins de des personnes vivantes qui passeront plus d'une fois au cours de cette année à Washington. À certaines étapes de la mise en service, le service exploitation a effectué lui-même les tests sous la supervision du responsable.

Entrée de la partie bureau

En Finlande, une grande attention est accordée aux questions de certification des spécialistes - il est tout simplement illégal d'effectuer certains types de travaux sans qualifications confirmées. Le deuxième point sérieux est le respect des normes de protection du travail et de l'environnement. Par conséquent, le spécialiste correspondant est apparu en deuxième position dans notre équipe et nous pouvions être sûrs que nous ne violerions pas les normes juridiques strictes, même par accident. De plus, un décalage temporel important nous a permis de réaliser toutes les formations et certifications requises avant même le début de l’exploitation, c’est-à-dire généralement « sur le tas ».

Face arrière du bâtiment du centre de données

De manière générale, je voudrais souligner le grand intérêt des futurs officiers de service pour leur travail. Nous avons confiance dans l'équipe que nous avons recrutée, même si la plupart des gars ont vu pour la première fois un centre de données, surtout de ce niveau.

Il convient de noter que le département des opérations de Yandex est désormais en train de devenir une véritable équipe internationale. Cela permettra non seulement à l'entreprise de continuer à développer de nouvelles compétences en matière de collaboration, mais cela lui demandera également de placer la barre plus haut pour son service existant.

Et après?

Nos prochains projets consistent à agrandir les sites déjà construits, ainsi qu'à construire un nouveau centre de données, qui s'annonce encore plus évolutif. Notre objectif est d'en faire l'un des meilleurs au monde.

Le bureau principal à Moscou occupe un bâtiment de 7 étages, actuellement en construction. Le bâtiment est un périmètre presque fermé avec une cour. La question de la navigation pour les centaines de personnes qui y travaillent n’est donc pas du tout superflue. Des poutres peintes vous aident à vous repérer, indiquant quelles pièces se situent de quel côté. Même des plafonds suspendus sont utilisés, au bout desquels des inscriptions de navigation sont également appliquées. D’ailleurs, c’est une excellente idée : de tels panneaux sont toujours clairement visibles et mènent à des emplacements de bureaux fréquemment utilisés et populaires – ascenseurs, cafés, etc.

A chaque étage il y a des toilettes, un café, où vous pouvez vous servir du thé ou du café, manger des fruits ou des légumes et des biscuits entièrement gratuitement. Il existe également deux types de locaux : les salles de réunion (il y en a plusieurs dizaines dans le bureau de différentes tailles, des petites pièces avec une table pour 3-4 personnes aux salles de conférence) et les salles open space pour les équipes de développement (en règle générale , une équipe travaillant sur un projet est assise l'une à côté de l'autre).

Toutes les chambres ont leur propre nom, lié au numéro d'étage. Au 7ème étage il y a « 7 nounous » (un enfant sans œil n'y a d'ailleurs pas été vu), 7h40, 7ème ciel et une grande salle de conférence appelée « 7 n'en attendez pas ». Au 5ème étage il y a « 5ème point », « 5ème colonne », « 5ème roue » et simplement « 5. excellent ». Au 4ème étage, il y a une chambre avec le joli nom des Beatles et elle ne peut vraiment pas accueillir plus de 4 personnes.

Balcons Yandex

Le bureau dispose de six balcons, activement utilisés en été. Vous pourrez à la fois vous y détendre et y travailler. Il y a des tentes, des bancs et des tables avec cendriers pour les fumeurs. Il y a un immense jeu d'échecs sur l'un des balcons. Et les vues, bien sûr, sont merveilleuses de là, puisque le bureau est situé dans un endroit d'où l'on peut voir la cathédrale du Christ Sauveur, le nouveau monument à Pierre (une création vraiment laide de Tsereteli) et même un morceau de le Kremlin. Et depuis les fenêtres des escaliers et des balcons, vous pouvez voir les murs intérieurs du bâtiment lui-même (vous souvenez-vous encore qu'il a été construit comme périmètre ?) Une partie du bâtiment est encore en cours d'achèvement et attend que l'équipe Yandex s'agrandisse .

Panneaux dans le bureau Yandex

Vous pouvez trouver une variété de panneaux dans tout le bureau Yandex. Par exemple, celui-ci est sérieux, vous rappelle la sécurité des informations et la nécessité de fermer les portes derrière vous. À propos, une carte magnétique est nécessaire non seulement pour entrer dans le bâtiment, mais également pour s'y déplacer. Même pour ouvrir la porte du balcon et entrer dans le bâtiment, vous aurez peut-être besoin d'une carte-clé.

Et ce panneau avec une recette pour la monétisation la plus simple se trouve à côté de la salle où sont assis les développeurs de la page de démarrage de Yandex. Ils sont assez excentriques et accueillent les visiteurs comme nous avec des gestes et des lanternes lumineuses. Certes, ils préfèrent le faire derrière la vitre de leurs locaux.

À l’intérieur du bureau se trouvent un magasin d’entreprise et un café du studio de Lebedev. Vous pouvez également voir une pancarte inhabituelle sur sa porte d’entrée.

Et c'est une autre caractéristique distinctive de Yandex - en raison de la tradition établie, l'entreprise a un poste officiel appelé hôtesse. Les responsabilités des femmes au foyer incluent l'alimentation des créatifs (designers, programmeurs), qui peuvent très bien rester au bureau jusqu'à tard (le bureau est ouvert 24 heures sur 24) et oublier de manger. En réalité, bien entendu, les femmes au foyer ont la responsabilité de veiller à ce que les réserves alimentaires soient toujours réapprovisionnées dans les cafés.

Une plaque illustrée sur un pare-feu. On ne sait pas pourquoi le lapin était caché dans une cage.

Les murs des bureaux sont en verre. Bien que maintenant ils aient un design qui couvre la pièce au niveau de la hauteur humaine. On raconte qu'avant, lorsqu'il n'y avait pas de dessin, les visiteurs rencontraient trop souvent des murs de verre. Cette tablette reste apparemment de cette époque.

Bibliothèque Yandex

La bibliothèque Yandex est située dans une pièce appelée « 7 Nains », qui, comme vous pouvez le deviner, est située au 7ème étage. Chaque employé peut y prendre n'importe quel livre, pour ce faire, il doit enregistrer l'opération dans une application spéciale sur l'écran tactile. Dans une armoire avec une porte vitrée verte se trouvent des livres personnels des Yandexoïdes (comme s'appellent eux-mêmes les employés de l'entreprise), qu'ils échangent entre eux pour les lire.

Et c'est une rareté - une application avec une recherche biblique, créée par les fondateurs de Yandex à l'aube d'Internet et de Yandex lui-même. Il a été distribué sur disquettes.

Chapeaux

Dans le bureau du directeur financier de Yandex.Money, vous pouvez trouver toute une collection de chapeaux du monde entier. Plus précisément, toute la collection ne rentre même pas ici. Chaque chapeau peut être essayé - ce ne sont pas des expositions de musée auxquelles il est interdit de toucher.

Même le lustre de cette pièce a la forme d’un chapeau.

Même si j'ai surtout aimé le casque de chantier inesthétique. Je suppose que c'est évident pourquoi – à cause de ses capacités défensives.

En plus de la réception à l'entrée, il y a une réception séparée au 7ème étage. Apparemment, parce que cet étage est le plus souvent visité par les visiteurs. Ce n'est pas surprenant - après tout, le marketing, les relations publiques (dont nous étions invités) et la direction de l'entreprise se trouvent ici.

Près de la réception se trouvent des parapluies de marque Yandex. Le segment avec le texte est allongé de manière disproportionnée par rapport aux autres segments du parapluie.

À chaque étage, un écran tactile vous permet de visualiser l'occupation des salles de réunion et d'en réserver une. Bien sûr, tout cela peut être fait depuis un ordinateur de travail, mais cela peut aussi être fait ici si la décision de tenir une réunion surprenait un employé dans le couloir.

Et ceci, comme ils nous l'ont expliqué, est le symbole d'un bug de développement - tous les programmeurs devraient simplement adorer ce totem.

Une autre peluche amusante. Juste pour la beauté, apparemment.

A l'un des étages il y a... un hamac. Pour les amateurs de détente non conventionnelle.

Un autre design qui doit être montré aux invités Yandex. Surtout pour ceux qui sont intéressés par l'algorithme de recherche Yandex et les méthodes de sa gestion. Ainsi est née l'histoire selon laquelle la recherche Yandex peut être contrôlée en ouvrant l'une ou l'autre vanne. Donc, si vous arrivez à gg en effectuant une recherche depuis Yandex, sachez : j'ai peaufiné le moteur de recherche.

Toutes sortes de cadeaux et de diplômes donnés à Yandex.

Autre cadeau : un télescope. À travers elle, vous pouvez voir, par exemple, la cathédrale Saint-Basile, située près du Kremlin.

Et voici le parking sous l'entrée du bureau. Il existe un grand nombre de motos (y compris les plus chères) et de vélos. Bien entendu, tous appartiennent aux employés de Yandex.

Le bureau Yandex possède également sa propre salle de sport. Où vous pourrez jouer au tennis de table, au billard et siroter du fer.

Yandex.Coffee Maker fait partie intégrante de chaque salle de café Yandex.

P.S. Très bientôt, vous trouverez un autre document sur Yandex. Reste en contact.

Le 5 septembre, un nouveau centre de données de la société Yandex a ouvert ses portes dans le microdistrict Energetik de la ville de Vladimir. La première étape d'un centre de traitement de données d'une capacité de 10 mégawatts a été mise en service. Au total, quatre phases du centre de données seront mises en service, leur capacité totale sera de 40 mégawatts.

Photo du service de presse de la société Yandex

L'inauguration s'est déroulée en présence de la gouverneure de la région de Vladimir Svetlana Orlova, des vice-gouverneurs Alexeï Konychev et Sergueï Nevzorov, du recteur de l'Université d'État de Vladimir Anzor Saralidze, du président de l'Assemblée législative régionale Vladimir Kiselyov et de son adjointe Olga Khokhlova, maire de la ville. de Vladimir Olga Deeva et directeur de la branche Vladimirenergo Roman Sorokin.

Le directeur général du centre de données Vladimir Yandex, Nikolai Ivanov, a expliqué que la principale raison de l'implantation du centre de données dans la région de Vladimir est la position active des autorités, et seulement alors la présence d'une sous-station capable d'assurer un approvisionnement ininterrompu en énergie :

«Pourquoi avons-nous construit ce centre de données dans la région de Vladimir. Bien sûr, je peux dire beaucoup de mots chaleureux sur Svetlana Yuryevna et l'administration de la ville et de la région, qui nous ont vraiment beaucoup aidés à construire en très peu de temps. Pour ceux qui ne le savent pas, en mai 2016, il y avait un champ ouvert et un marécage. Maintenant, cet objet se trouve ici, et c'est notre réalisation commune.

Lorsque nous avons choisi ce site, le critère principal était bien sûr l'électricité et la sous-station qui se trouve ici et qui nous permet de connecter nos capacités et d'obtenir la quantité d'énergie nécessaire. Et puis il y a eu des questions de logistique, de climat et de volonté de l’administration de travailler avec nous.

Il y a deux ans et demi, Inna Khromenkova (directrice du Département des investissements et des affaires économiques étrangères) et Nikolai Ivanov se trouvaient dans ce domaine précis. Et Inna a demandé : « Ce domaine vous convient-il ? », et j'ai répondu évasivement : « Nous devons y réfléchir. » Mais en même temps, je savais que ce domaine nous conviendrait parfaitement.

Nikolaï Ivanov

Selon Nikolai Ivanov, le centre de données de Vladimir est l'une des installations de cette classe les plus avancées en termes d'efficacité et d'automatisation, non seulement en Russie, mais aussi dans le monde. Dans le centre de données de Vladimir, la technologie Full Free Cooling est utilisée pour refroidir les serveurs - la zone des serveurs n'est pas refroidie par des climatiseurs industriels, mais par l'air extérieur ordinaire grâce à un système de ventilation spécial. La chaleur dégagée par les serveurs lors du refroidissement sera en partie utilisée pour chauffer le centre de données lui-même, le reste de la chaleur devrait être utilisé soit pour chauffer les maisons du microdistrict Energetik, soit pour chauffer les entreprises voisines.

Cependant, la société Yandex n'a pas encore décidé où ira la chaleur dégagée. Marina Yanina, vice-présidente des relations d'entreprise de Yandex, a expliqué que le projet sur les économies d'énergie et le transfert de chaleur est au stade des négociations. L’énergie thermique peut être utilisée, par exemple, pour chauffer des complexes de serres destinés à la culture de légumes. Encore faut-il trouver un investisseur pour la construction de serres.

Le gouverneur Orlova a déclaré que les autorités de la région de Vladimir étaient prêtes à attribuer plus d'un champ à Yandex et même à construire une route vers de nouveaux sites. Svetlana Orlova a souligné que pour les habitants de la 33e région, l'ouverture d'une entreprise innovante n'est pas seulement un prestige, mais aussi de nouveaux emplois.

Le chef de la région a remercié l'équipe Yandex, qui n'a pas abandonné le projet pendant la crise, ainsi que l'équipe de l'administration de la région de Vladimir pour la mise en œuvre réussie du projet.

« C'est un grand événement pour notre ville. Le centre de données repose sur les dernières technologies nécessaires à la construction d'une économie numérique, qui deviendra un élément important du développement du pays. Yandex devrait être partout. Vous venez de vous réveiller - Yandex. Vous êtes allé - Yandex. Vous vouliez proposer quelque chose - "Yandex". Voulez-vous gagner quelque chose - Yandex. Il y a beaucoup de sujets à aborder. Grâce à votre valeur informative, nous avons pu promouvoir de nombreux projets intéressants.

Le président de l'Assemblée législative de la région de Vladimir, Vladimir Kiselyov, a qualifié la société Yandex de « pionnier dans le domaine des technologies informatiques » et a admis qu'il n'utilisait lui-même que le moteur de recherche Yandex :

"Personnellement, j'utilise Yandex depuis le tout début ; par défaut, Yandex est installé sur tous mes ordinateurs. Je pense que la grande majorité des habitants de la région et des Russes travaillent de cette façon. Ce n'est plus seulement un moteur de recherche : Yandex.Maps, Yandex.Traffic, Yandex.Taxi, Yandex.Weather et même Yandex.Airplanes et Yandex.Trains sont apparus.

Vladimir Kisselev

Après l’appui cérémonial sur le bouton symbolique de démarrage du centre de données, les mêmes cadeaux symboliques ont été échangés. Le gouverneur Orlova a reçu un certificat de la société informatique pour l'espace sur Yandex.Disk pour le stockage de données et "le travail conjoint de l'administration régionale sur les documents et le contrôle du travail partout dans le monde". Orlova a noté qu'elle peut déjà « contrôler tout ce qui se fait dans la région et dans certaines villes de la région » grâce à un programme spécial sur son iPad personnel.

En cadeau de la Maison Blanche de Vladimir, le centre de données Yandex a reçu une image stylisée du logo Yandex - une lettre en verre « I » réalisée par les verriers Gusev et une peinture représentant la cathédrale de l'Assomption, afin que les partenaires de l'entreprise sachent que Yandex est « dans le lieu le plus saint de Russie. »

Les invités de haut rang de la cérémonie ont été invités à visiter le nouveau bâtiment du centre de données. (Les journalistes n'étaient pas autorisés à accompagner le gouverneur). Nikolaï Ivanov a personnellement fait visiter le centre de données à Svetlana Orlova.

À en juger par les clips vidéo diffusés par le service de presse de l'administration de la région de Vladimir, le gouverneur a pu découvrir la conception d'un système de ventilation automatisé, de générateurs conçus pour assurer un fonctionnement ininterrompu en cas d'éventuelle panne de courant et d'autres technologies innovantes qui distinguent le Centre de données de Vladimir.

Photo du service de presse de l'administration de la région de Vladimir

Rappelons que les premières informations envisagées par la société Yandex dans la région de Vladimir sont apparues en novembre 2014. C'est ce qu'a annoncé le vice-gouverneur de la région de Vladimir, Alexeï Marchenko, qui a quitté l'équipe du gouverneur Orlova en février 2016.

Plus tard, on a appris que dans le microdistrict Energetik de la ville de Vladimir sur une superficie d'environ 6 hectares. L'entreprise a signé un accord pour la construction d'un centre de données en février 2015. Un représentant de la société Yandex a ensuite déclaré à Zebra TV que l'ouverture de l'entreprise était prévue fin 2017. Et il n’y a eu aucun écart par rapport aux délais. On ne peut pas en dire autant des autres investisseurs qui se trouvent dans la région de Vladimir ou qui ont fait des progrès significatifs dans la mise en œuvre (Volgobas, Mercedes-Benz, centre logistique du port sec).

Centre de données de Vladimir "Yandex" en chiffres

Le volume des investissements pendant la phase de construction de la première étape s'est élevé à plus de 2,5 milliards de roubles

Le nombre d'emplois est supérieur à 18. Les diplômés des facultés techniques des universités locales travaillent déjà dans 16 places

Le montant des contributions fiscales au budget de la région de Vladimir est d'environ 40 millions de roubles

La puissance du data center est de 40 MW. Selon le projet, la puissance de chacune des quatre étapes prévues sera de 10 MW

Le coût de l'électricité est d'environ 2 roubles (hors TVA) par kilowattheure

Le PUE (Power Usage Effectiveness) pour un module déjà rempli est de 1,07

Yandex possède plusieurs de ses propres centres de données. La plupart d'entre eux sont situés en Russie, le plus grand se trouvant dans la ville de Sasovo (région de Riazan). L'entreprise utilise également les services d'un certain nombre de centres de données à l'étranger, mais ceux-ci ne lui appartiennent pas. L'exception est le centre de données en Finlande, que Yandex a conçu et construit à partir de zéro. La Finlande a été choisie en raison de son climat froid, de la disponibilité de lignes optiques et de la disponibilité d'une capacité énergétique fiable. Le centre de données est situé à Mäntsälä, une ville de 20 000 habitants, située non loin d'Helsinki.

Le centre de données a commencé à fonctionner l'année dernière, mais n'est pas encore entièrement construit. Alexey Zhumykin, chef du département des opérations du centre de données Yandex, a déclaré à Telecomblog qu'en général, le projetsuppose quatre étapes (chacune - 10 MW de puissance utile). Jusqu'à présent, la première étape a été construite et mise en service.L'entreprise ne divulgue pas le nombre de racks dans le centre de données.

Plan du centre de données Yandex à Mäntsälä

"Mais généralement, des dizaines de milliers de serveurs fonctionnent dans un centre de données de cette envergure", explique Alexey Zhumykin.

En règle générale, les centres de données utilisent des refroidisseurs pour le refroidissement - des machines de climatisation industrielles dans lesquelles des liquides ou des gaz agissent comme agent de refroidissement. Cependant, dans le centre de données finlandais Yandex, les serveurs sont refroidis naturellement toute l'année - avec l'air de la rue. Lors des journées chaudes, qui ne sont pas nombreuses, de l'humidité pulvérisée est ajoutée à l'air, ce qui abaisse la température. L'air traversant la zone des serveurs est chauffé et, à l'aide de ventilateurs, est forcé dans d'immenses chambres - des échangeurs de chaleur, où l'eau est fournie par le réseau de la ville de Mäntsälä.

"L'un des composants les plus importants d'un centre de données est le système de refroidissement", disent-ils dans Yandex. "Pendant le fonctionnement, les serveurs génèrent beaucoup de chaleur, qui doit être évacuée pour éviter une surchauffe. Le système de refroidissement, qui est utilisé dans notre centre de données à Mäntsälä, nous permet d'utiliser la chaleur des serveurs à des fins utiles - pour chauffer des bâtiments résidentiels. En fournissant de la chaleur à la ville, Yandex est en mesure de rembourser une partie des coûts d'électricité - l'une des dépenses les plus importantes pour un centre de données ".

La température de l'eau sortant de l'échangeur de chaleur est, selon la saison, de 30 à 45 degrés. Cela ne suffit pas pour alimenter directement en eau les robinets et les batteries. C'est pourquoi, en accord avec l'administration de Mäntsylä, une station de préchauffage a été construite sur le territoire du centre de données. Dans celui-ci, l'eau est portée à une température standard à l'aide de pompes à chaleur et de là, elle entre dans le réseau de la ville.

La population de Mäntsälä compte un peu plus de 20 000 personnes ; environ la moitié des citadins vivent dans des maisons dotées du chauffage central. Initialement, la ville allait construire une chaufferie pour chauffer de nouvelles zones, mais les calculs ont montré qu'il était moins coûteux d'utiliser l'eau chaude du centre de données et de la porter à une température standard dans une station de réchauffage.

Les services publics de Mäntsylä ont calculé que grâce à l'approvisionnement en chaleur « serveur » en 2016, les coûts de chauffage pour les habitants de Mäntsylä seront réduits de 5 %, la consommation de gaz pour alimenter le réseau de la ville sera réduite de moitié et les émissions de CO2 (un paramètre qui fait l'objet d'une attention particulière dans les pays européens) sera réduite jusqu’à 40 %.

Yandex, en fournissant de la chaleur à la ville, espère réduire ses coûts d'électricité jusqu'à 30 %.

Un projet similaire pourrait fonctionner en Russie.

"Nous continuons d'améliorer le système de refroidissement des serveurs avec l'air de la rue. Il peut être utilisé non seulement dans les pays au climat froid, mais également dans les régions plus chaudes. Yandex prévoit d'utiliser le système dans le centre de données que nous avons commencé à construire dans le Région de Vladimir. La chaleur générée par les serveurs peut être utilisée pour chauffer non seulement des bâtiments résidentiels et publics, mais aussi des entreprises industrielles ou, par exemple, des serres et des foyers », indique le blog de l'entreprise.

Alexey Zhumykin dit que le centre de données de Mäntsälä est utilisé pourPour les tâches liées au traitement des requêtes de recherche, y compris celles des utilisateurs des services Yandex non originaires de Russie (Turquie, Ukraine, Europe). De plus, la capacité du centre de données sera utilisée Division Yandex engagée dans le traitement du Big Data et l'apprentissage automatique- Usine de données Yandex.

Selon Alexey Zhumykin, Yandex p prévoit de transférer l'essentiel de la charge de traitement des données des centres de données étrangers loués vers un centre de données en Finlande.

La société ne divulgue pas les investissements dans la construction d'un centre de données à Mäntsälä.

Rappelons que le réseau social Facebook a lancé son centre de données, dans lequel les serveurs sont également refroidis à l'air froid de la rue. Son centre de données est situé non loin du centre de données finlandais Yandex, dans la ville de Luleå en Suède. Luleå est à seulement 60 km. du cercle polaire arctique.

Aux Pays-Bas, cependant, après la mise en service de son propre grand centre de données en Finlande en 2015, la nécessité de louer ces sites a disparu, a déclaré l'entreprise à TAdviser.

Développement de l'infrastructure informatique Yandex

2017 : sur cinq ans, le coût de l'infrastructure TIC de Yandex a été multiplié par 3,5

Le coût total des serveurs et de l'infrastructure réseau appartenant à Yandex, de 2013 à 2017. augmenté de plus de 3,5 fois : de 9,739 milliards de roubles à 34,165 milliards de roubles. Cela découle des rapports annuels de Yandex sur le formulaire 20-F. Les données de coût sont indiquées moins les charges d'amortissement cumulées, comme indiqué dans les rapports.

Le coût des « systèmes d’ingénierie » de Yandex a également augmenté : de 3,409 milliards de roubles en 2013 à 7,621 milliards de roubles en 2017. Les rapports ne précisent pas à quels systèmes d’infrastructure il est fait référence. Yandex dit qu'il s'agit des centres de données de l'entreprise.

En 2017, Yandex a dépensé environ 10 milliards de roubles pour l'achat de serveurs et l'expansion des centres de données, ce qui représentait 81 % des dépenses d'investissement totales de l'entreprise. Au même moment, aussi bien en 2017 qu’en 2016. ils sont en grande partie liés à la création d'un nouveau data center à Vladimir, dont le lancement a été annoncé en septembre.

Le montant des coûts des serveurs et des équipements fluctue d'année en année : par exemple, en 2013, leur volume était de 3,850 milliards de roubles et en 2015, d'environ 11 milliards de roubles.

Le rapport parle également des risques infrastructurels auxquels Yandex est confronté. La société souligne que son succès futur dépend de la disponibilité, du développement et du support continus de l'infrastructure Internet à l'échelle mondiale et sur les marchés où Yandex opère. Cela implique de maintenir un réseau fédérateur fiable doté de la vitesse, de la capacité et de la sécurité appropriées pour fournir des services Internet fiables. Toute interruption de l'accès au réseau fourni par des tiers, ou leur incapacité à prendre en charge les volumes d'utilisation actuels ou futurs, pourrait nuire considérablement aux activités de Yandex. Cependant, la société a connu et continue de connaître des interruptions et des retards dans ces services de temps à autre.

L'infrastructure Internet peut également ne pas être en mesure de répondre aux demandes d'un nombre croissant d'utilisateurs, au temps passé en ligne ou à l'augmentation des demandes de bande passante. La réglementation gouvernementale peut également limiter l'accès d'une entreprise à une infrastructure Internet adéquate et fiable, indique le rapport Yandex, sans plus de détails.

2016 : Yandex réduit les centres de données à Moscou

Yandex envisage de transférer une partie de la puissance de calcul de ses centres de données à Moscou vers un nouveau centre de données à Vladimir, a déclaré Pavel Melnikov, chef du groupe de recherche et développement du département des opérations de Yandex, s'exprimant lors d'un événement Mellanox en mars 2016.

Pour expliquer cela, il a évoqué le coût élevé de l'entretien des centres de données à Moscou, principalement dû au coût élevé de l'électricité.

Le service de presse Yandex a préféré ne pas entrer dans les détails de la migration, notant seulement que "la construction de nouveaux sites de centres de données à Moscou n'est désormais pas rentable, et le coût de l'électricité ici n'est qu'un des facteurs". Par conséquent, Yandex « optimise » l’infrastructure du centre de données.

Selon le rapport annuel de Yandex sur formulaire 20-F, en 2015, les dépenses en capital de l'entreprise se sont élevées à 13,045 millions de roubles, dont environ 84 % étaient des dépenses liées à l'expansion de l'infrastructure du centre de données et des serveurs afin de soutenir la croissance actuelle des activités de l'entreprise.

2015

Construction d'un centre de données à Vladimir

En 2015, Yandex a commencé à mettre en œuvre un projet de construction d'un centre de données dans le village d'Energetik, dans la région de Vladimir. Les représentants de l'administration régionale ont indiqué que le volume des investissements dans le projet s'élèvera à environ 4,5 milliards de roubles.

L'un des blogs de Yandex indique qu'avant le début de la conception du centre de données finlandais, l'entreprise a réussi à construire et à fermer partiellement 10 centres de données.

2013 : Planifier la grande migration des serveurs

Yandex prévoit de construire de nouveaux centres de données très efficaces, dans lesquels l'alimentation électrique migrera progressivement à partir d'anciens sites, a déclaré Sergey Krupin, directeur adjoint du département des systèmes de construction et d'ingénierie de la société Internet, à TAdviser le 19 mars 2013. Ils prévoient d'introduire des technologies avancées, dont le choix sera basé sur l'expérience acquise dans la construction et l'exploitation de centres de données antérieurs, dit-il.

Selon Krupin, lors de la construction de nouveaux sites, Yandex se concentrera sur les régions dans lesquelles, sur la base de paramètres climatiques, il pourra construire le système de refroidissement du centre de données le plus efficace.

Yandex affirme que tous les derniers centres de données de l'entreprise sont construits à l'aide de l'un ou l'autre système de refroidissement doté de technologies de refroidissement gratuit, y compris les systèmes dits de refroidissement gratuit complet, qui impliquent le refroidissement des salles de serveurs en utilisant l'air de la rue. La capacité totale de ces centres de données d’entreprise dépasse 15 MW. Des technologies similaires devraient être utilisées dans les futurs centres de données où les ressources informatiques seront migrées.

La technologie de refroidissement entièrement gratuit, en particulier, est désormais utilisée dans le centre de données Yandex construit en 2011 dans la ville d'Ivanteevka près de Moscou, ainsi que dans un nouveau centre de données dans la région de Riazan, dont la construction a été achevée en 2012.

Il utilise une machine frigorifique à absorption fonctionnant au gaz naturel comme équipement de refroidissement supplémentaire. Selon les représentants du moteur de recherche Internet, cela permet d'augmenter l'efficacité de l'utilisation de l'énergie et de réduire la consommation d'électricité.

Sergueï Krupnine note que l'introduction de toute technologie économe en énergie, innovante ou « verte » implique des coûts d'investissement élevés, mais peut réduire considérablement les coûts d'exploitation. La durée de vie du data center devient donc le facteur déterminant. S'il s'agit d'un projet à long terme (plus de 10 ans), les technologies d'économie d'énergie s'avèrent payantes.

La société a choisi de ne pas divulguer où exactement les nouveaux sites seront situés et quels seront leurs paramètres, notant seulement qu'en mars 2013, Yandex disposait de six centres de données situés en Russie et à l'étranger. L'entreprise met gratuitement à disposition du Centre européen pour la recherche nucléaire (CERN) une partie des serveurs de ses centres de données.

2011 : Construction d'un centre de données à Ivanteevka

Depuis 2011, Yandex possède cinq centres de données en Russie, dont le plus grand est situé dans la ville d'Ivanteevka, près de Moscou. En septembre 2011, Yandex a annoncé le lancement de la deuxième étape de son centre de données dans la ville d'Ivanteevka, près de Moscou. La superficie totale de ses deux phases est de 4,5 mille mètres carrés. m, dont 2,2 mille m². tombe sur la deuxième ligne.

La deuxième phase du nouveau centre de données utilise un système de refroidissement développé en Russie – Full Free Cooling (FFC). Il est basé sur la technologie de refroidissement gratuit, dans laquelle la salle du centre de données est refroidie par l'air plus frais de la rue.

Le développeur de ce système est la société moscovite Ayaks Engineering. Son représentant Andrey Nesterov a déclaré à CNews que Yandex était devenu leur premier client à utiliser le système FFC dans son centre de données.

Au total, le centre de données hébergera plus de 10 000 serveurs et la consommation électrique totale sera de 8 MW. Yandex a précisé que le chiffre de la consommation d'énergie est donné en tenant compte du nouveau système de refroidissement. "Nous pouvons utiliser l'électricité que nous économisons en refroidissement pour des choses plus utiles - pour l'alimentation informatique dans le même centre de données, par exemple", affirme le moteur de recherche.

Selon la norme TIA-942, la température qui doit être maintenue dans les salles de serveurs est de +22 degrés Celsius ± 2 degrés. Sous une forme ou une autre, la technologie de refroidissement gratuit est utilisée dans de nombreux centres de données russes, mais Ayaks Engineering appelle la principale caractéristique de son système le seuil de température auquel l'équipement est utilisé pour refroidir l'air extérieur - il est de +22 degrés. Ceux. Le système de refroidissement ne s'allumera qu'une fois que la température de l'air dépassera cette valeur.

Dans les unités de réfrigération standard avec refroidissement gratuit, le refroidissement commence entre +5 et +12 degrés Celsius.

Yandex affirme qu'en utilisant le système Ayaks Engineering, le nouveau centre de données nécessite deux fois moins d'électricité par an pour prendre en charge le même nombre de serveurs. Cependant, certains experts estiment que dans ce cas, il s'agit d'un avantage douteux.

Evgeniy Gromov, directeur technique du Data Storage Center, propriétaire du centre de données SafeData, a déclaré à CNews que leur entreprise avait également envisagé ce système : « Son plus est de réduire le coût de l'alimentation électrique, le moins est quatre fois le prix par rapport au système classique. systèmes et une maintenance plus coûteuse. Aux prix actuels de l’électricité en Russie, un tel système n’est pas justifié dans un centre de données commercial. »

Le système FFC se compose de deux circuits séparés en boucle ouverte, externe et interne. L'air du centre de données circule dans le circuit interne et l'air de la rue est fourni au circuit externe. L'élément principal du système est un régénérateur rotatif, dans lequel un échange de chaleur se produit entre l'air extérieur de l'environnement et l'air des locaux du centre de données. La tâche du régénérateur rotatif est de refroidir l'air du centre de données de +37 à +24 degrés avec de l'air extérieur à une température allant jusqu'à +22 degrés.

Nous avons commencé à expérimenter diverses technologies de refroidissement fin 2009. L'objectif principal était d'augmenter le seuil de température autant que possible. En conséquence, il a été possible de l'augmenter de +13 à +22 degrés Celsius, explique Gennady Vahutinsky, directeur de la construction de systèmes d'ingénierie chez Yandex. - Non seulement l'entreprise, mais aussi l'environnement bénéficieront de l'utilisation d'un système de refroidissement économique dans le nouveau centre de données : moins d'électricité signifie moins de ressources naturelles pour sa production.

Parmi les systèmes de refroidissement connus en Russie, un principe de fonctionnement similaire au FFC basé sur un échangeur de chaleur rotatif est également utilisé, par exemple dans le système de refroidissement Kyoto, développé aux Pays-Bas.

Début des années 2000 : les premiers centres de données Yandex

Lorsque le site www.yandex.ru a été ouvert en 1997, un seul serveur sous le bureau de l'un des premiers développeurs suffisait à son fonctionnement. Peu de temps après l'annonce de l'ouverture, un deuxième serveur est apparu, et lorsqu'il a fallu en installer un autre, il s'est avéré qu'il n'y avait pas assez d'espace sous la table.

À ce moment-là, Yandex était encore loin de penser à créer ses propres centres de données - l'intégralité de l'index Internet en langue russe tenait sur un disque SCSI de 4 Go, et toute l'équipe du portail était composée d'une dizaine de personnes travaillant chez CompTek. Par conséquent, au cours des trois premières années de son fonctionnement, l'équipement du serveur Yandex était situé dans le centre de données de la société MTU-Intel. Au moment de la création de Yandex LLC en 2000, Yandex louait quatre racks chez MTU-Intel, qui abritaient environ 40 des propres serveurs de Yandex.

Ces plusieurs dizaines de serveurs sont devenus la base du premier centre de données Yandex indépendant, situé dans le premier bureau de l'entreprise, à Moscou, rue Vavilova, dans le centre informatique de l'Académie des sciences de Russie.