Кластерна комп’ютерна система

Кластерна комп'ютерна система, що містить щонайменше два кластерних вузли й підсистему транспорту даних, з'єднану за допомогою каналів внутрішньосистемного обміну з кожним із кластерних вузлів, що мають комутатор каналів внутрішньосистемного обміну, внутрішній комутатор, процесорний блок і блок запам'ятовуючого пристрою, причому входи-виходи даних комутатора каналів внутрішньосистемного обміну з'єднані із зазначеними каналами внутрішньосистемного обміну, а керуючі входи-виходи - із першими керуючими входами-виходами процесорного блока, входи-виходи даних якого підключені до перших ВХОДІВ-ВИХОДІВ даних внутрішнього комутатора, чиї другі входи-виходи даних з'єднані з входамивиходами даних блока запам'ятовуючого пристрою, а керуючі входи-виходи - із другими керуючими входами-виходами процесорного блока, треті керуючі входи-виходи якого підключені до керуючого входу-виходу блока запам'ятовуючого пристрою, яка відрізняється тим, що кожен кластерний вузол додатково зв'язаний з каналами даних КЛІЄНТІВ і ЗОВНІШНІМИ каналами даних і оснащений ВІДПОВІДНИМИ комутаторами каналів да них КЛІЄНТІВ і ЗОВНІШНІХ каналів і трьома міжмережними екранами, при цьому перші входи-виходи даних комутатора даних КЛІЄНТІВ підключені до каналів даних КЛІЄНТІВ, перші входи-виходи даних Винахід відноситься до галузі інформаційних технологій і може застосовуватись для побудови штернет - вузлів Інтернет Сервіс Провайдерів, для побудови корпоративних мереж за штранет та екстранет технологією, а також у розподілених системах збору і передачі інформації Традиційна схема забезпечення роботи Інтернет Сервіс Провайдера припускає розгалужену мережу комутаторів (наприклад, АТС), маршрутизаторів і наявність централізованих вузлів на яких розмішени сервери Інтернет служб Перетворення мнемонічних імен адрес в ін тернет адреси та визначення маршруту проходження даних (DNS.NIS), Авторизації КЛІЄНТІВ і обліку персонального трафіка, Перетворення фізичних адрес КЛІЄНТІВ у ЛОГІЧ комутатора ЗОВНІШНІХ каналів - до ЗОВНІШНІХ ка налів даних, другі входи-виходи даних комутатора внутрішньосистемного обміну підключені до перших ВХОДІВ-ВИХОДІВ даних першого і другого міжмережних екранів, треті входи-виходи даних комутатора внутрішньосистемного обміну підключені до других ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана і до перших ВХОДІВ-ВИХОДІВ даних третього міжмережного екрана, другі входивиходи даних комутатора даних КЛІЄНТІВ підключені до других ВХОДІВ-ВИХОДІВ даних першого міжмережного екрана і до третіх ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана, другі входивиходи даних комутатора ЗОВНІШНІХ каналів підключені до других ВХОДІВ-ВИХОДІВ даних третього міжмережного екрана і до четвертих ВХОДІВВИХОДІВ даних другого міжмережного екрана, п'яті входи-виходи даних якого підключені до третіх ВХОДІВ-ВИХОДІВ даних внутрішнього комутатора, а керуючі входи-виходи - до четвертих керуючих ВХОДІВ-ВИХОДІВ процесорного блока, при цьому п'яті І ШОСТІ керуючі входи-виходи процесорного блока з'єднані, ВІДПОВІДНО, З керуючими входамивиходами першого і третього міжмережних екранів, а сьомі і восьмі керуючі входи-виходи ВІДПОВІДНО, з комутатором каналів даних КЛІЄНТІВ І комутатором ЗОВНІШНІХ каналів НІ, Обміну адресованими даними (Електронна пошта), Доступу до структурованих даних (WWW), Доступу до неструктурованих даних (FTP), Асоціативної буферної пам'яті (PROXY) У великих провайдерів таких серверів може (О о ю 51026 бути кілька При великій КІЛЬКОСТІ КЛІЄНТІВ мережі при чому входи- виходи -даних комутатора канаістотно зростають вимоги до продуктивності і налів внутрішньосистемного обміну з'єднані із зазнадійності серверів ченими каналами внутрішньосистемного обміну, а Цю проблему вирішують шляхом додаткових керуючі входи-виходи - з першими керуючими інвестицій (витрат) на модернізацію устаткування і входами-виходами процесорного блоку, входипрограмного забезпечення вузлів Процес модервиходи даних якого підключені до перших входівнізації носить східчастий характер, тому розміри виходів даних внутрішнього комутатора, чиї другі інвестицій, як правило, значно перевищує потревходи -виходи даних з'єднані з входами- виходами би, що існують на даний момент згідно потребам даних блоку запам'ятовуючого пристрою, а керуюрозширення мережі чі входи-виходи - із другими керуючими входамивиходами процесорного блоку, треті керуючі вхоДруга проблема пов'язана з каналами передади-виходи якого підключені до керуючих входівчі даних від КЛІЄНТІВ до вузла 3 одного боку, відвиходів блоку запам'ятовуючого пристрою Голодаленість КЛІЄНТІВ від вузлів збільшує накладні вною особливістю даної системи є можливість витрати на організацію комутації і маршрутизації одержання значної продуктивності шляхом об'єдданих, що приводить до зниження пропускної зданання великої КІЛЬКОСТІ низько продуктивних, детності каналів зв'язку і погіршенню якості обслугошевих елементів До недоліків даної системи варвування 3 іншого, - оскільки, як правило, провайто віднести те, що вона розрахована на рішення дер використовує орендовані канали зв'язку, однорідної, попередньо структурованої задачі збільшення їхньої пропускної здатності і поліпшенСистема не може забезпечувати обслуговування ня якості не завжди можливе або вимагає дуже обміну великого числа КЛІЄНТІВ мережі між собою великих витрат Крім того, у таких мережах гостро та із ЗОВНІШНІМ світом, а, також, надаючи їм послустоїть проблема забезпечення захисту від несанкги штернет служб та забезпечувати належний ріціонованого доступу і підробки, як даних, що перевень безпеки даются так і даних, що зберігаються в пам'яті серверов та компьютеров КЛІЄНТІВ В основу пропонованого винаходу поставлена задача удосконалення комп'ютерної системи для Існує велика КІЛЬКІСТЬ варіантів і пристроїв орвикористання її як розподіленого штернет-вузла ганізації каналів зв'язку між окремими сегментами при зниженні вимог до пропускної здатності канамереж [1] В усіх розглянутих випадках вирішуєтьлів зв'язку і продуктивності обладнання, що комуся тільки задача транспортування даних Усі питує та маршрутизує потоки даних на ділянках між тання, пов'язані з обслуговуванням КЛІЄНТІВ мережі клієнтом і сервером, при одночасному підвищенні та підготовкою даних до транспортування повинні надійності кластерної комп'ютерної системи в цівизначатись за межами цих систем лому та підвищенні безпеки потоків даних і даних у Відома система, що містить сервер av 25000 пам'яті серверів та комп'ютерів КЛІЄНТІВ ШЛЯХОМ ccnuma, яка складається з 16 однотипних модулів, розподілу і перерозподілу навантаження по обслуоптичні засоби зберігання даних сіапюп fcSOOO, говуванню запитів на обмін даними в системі між операційну систему DG/UX Головними особливокластерними вузлами стями цієї системи є можливість поступового нарощування продуктивності та розподіли ресурсів Поставлена задача вирішена шляхом того, що сервера між декількома різними операційними в кластерной комп'ютерній системі, що містить системами [2] Недоліком даної системи є те, що щонайменше два кластерних вузли і підсистему вона забезпечує розширюваність тільки серверної транспорту даних, з'єднану за допомогою каналів частини систем і не вирішує проблему перевантавнутрішньосистемного обміну з кожним із кластерженості каналів зв'язку них вузлів, що мають комутатор каналів внутрішньосистемного обміну, внутрішній комутатор, проТакож відома система, що містить керуючий цесорний блок і блок запам'ятовуючого пристрою, сервер (Tivoh Management Server), до 200-т керуюпри чому входи-виходи даних комутатора каналів чих шлюзів (gateway), кілька тисяч агентів (endвнутрішньосистемного обміну з'єднані із зазначеpoint) і сукупність розподілених інформаційних ними каналами внутрішньосистемного обміну, а вузлів, що керуються з одного центру [3] Кожен керуючі входи-виходи - з першими керуючими вузол обслуговує КЛІЄНТІВ мережі, яки до нього входами-виходами препроцесорного блока, входипідключені, розподіляючи навантаження між вузвиходи даних якого підключені до перших входівлами і, знижуючи, таким чином, вимоги до продуквиходів даних внутрішнього комутатора, чиї другі тивності окремих елементів системи До недоліків входи-виходи даних з'єднані з входами-виходами такої системи варто віднести наявність центра даних блока запам'ятовуючого пристрою, а керуюкерування вихід, з ладу якого, чи втрата зв'язку з чі входи-виходи - із другими керуючими входами ним, приводить до непрацездатності системи в виходами процесорного блока, треті керуючі вхоцілому Крім того, високі вимоги пред'являються до ди-виходи якого підключені до керуючого входаканалів зв'язку між центром керування і вузлами вихода блока запам'ятовуючого пристрою, ВІДПОВідома система [4], яка містить, щонайменше, ВІДНО до винаходу, для зниження вимог по пропусдва однотипних кластерних вузла, підсистему кній здатності каналів зв'язку і продуктивності обтранспорту даних, яка забезпечує обмін даними ладнання, що комутує та маршрутизує на ділянках між кластерними вузлами і які з'єднані з підсистеміж клієнтом і сервером, кожен кластерний вузол мою транспорту даних через канали внутрішньододатково зв'язаний з каналами даних КЛІЄНТІВ І системного обміну Кожен кластерний вузол, у ЗОВНІШНІМИ каналами даних і постачений ВІДПОВІДсвою чергу, містить комутатор каналів внутрішньоНИМИ комутаторами каналів даних КЛІЄНТІВ І ЗОВНІсистемного обміну, внутрішній комутатор, процеШНІХ каналів, а для підвищення безпеки потоків сорний блок, блок запам'ятовуючого пристрою, 51026 даних і даних у памяті серверів і КЛІЄНТІВ І підвищення надійності кластерної комп'ютерної системи трьома міжмережевими екранами, при цьому перші входи-виходи даних комутатора даних КЛІЄНТІВ підключені до каналів даних КЛІЄНТІВ, перші входивиходи даних комутатора ЗОВНІШНІХ каналів - до ЗОВНІШНІХ каналів даних, другі входи-виходи даних комутатора внутрішньосистемного обміну підключені до перших ВХОДІВ-ВИХОДІВ даних першого і другого міжмережних екранів, треті входи-виходи даних комутатора внутрішньосистемного обміну підключені до других ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана і до перших ВХОДІВ-ВИХОДІВ даних третього міжмережного екрана, другі входивиходи даних комутатора даних КЛІЄНТІВ підключені до других ВХОДІВ-ВИХОДІВ даних першого міжмережного екрана і до третіх ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана, другі входи-виходи даних комутатора ЗОВНІШНІХ каналів підключені до других ВХОДІВ-ВИХОДІВ даних третього міжмережного екрана і до четвергах ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана, п'яті входи-виходи даних якого підключені до третіх ВХОДІВ-ВИХОДІВ даних внутрішнього комутатора, а керуючі входи виходи - до четвертих керуючих ВХОДІВ-ВИХОДІВ процесорного блока, при цьому п'яті і шості керуючі входи-виходи процесорного блока з'єднані, ВІДПОВІДНО, з керуючими входами-виходами першого і третього міжмережних екранів, а сьомі і восьмі керуючі входи-виходи - ВІДПОВІДНО, з комутатором каналів даних КЛІЄНТІВ І комутатором ЗОВНІШНІХ каналів На фіг 1 приведена структурна схема пропонованої системи, а на фіг 2,-структурна схема одного з кластерних вузлів системи Кластерна комп'ютерна система містить, щонайменше два кластерних вузли 1 і підсистему транспорту даних 2, з'єднану за допомогою каналів 3 внутрішньосистемного обміну з кожним із кластерних вузлів, що мають комутатор 4 каналів внутрішньосистемного обміну, внутрішній комутатор 5, процесорний блок 6 і блок 7 запам'ятовуючого пристрою, при чому входи - виходи даних комутатора 4 каналів вяутршшьосистемного обміну з'єднані із зазначеними каналами 3 внутрішньосистемного обміну, а керуючі входи-виходи - з першими керуючими входами-виходами процесорного блока 6, входи-виходи даних якого підключені до перших ВХОДІВ-ВИХОДІВ даних внутрішнього комутатора 5, чиї другі входи-виходи даних з'єднані з входами-виходами даних блока 7 запам'ятовуючого пристрою, а керуючі входи - виходи - із другими керуючими входами - виходами процесорного блока 6, треті керуючі входи-виходи якого підключені до керуючого входа-вихода блока 7 запам'ятовуючого пристрою, кожен кластерний вузол 1 додатково зв'язаний з каналами 8 даних КЛІЄНТІВ і ЗОВНІШНІХ каналів 9 даних і постачений ВІДПОВІДНИМИ комутаторами 10 і 11 каналів даних КЛІЄНТІВ і ЗОВНІШНІХ каналів ВІДПОВІДНО І трьома міжмережними екранами 12, 13 і 14, при цьому перші входи-виходи даних комутатора 10 даних КЛІЄНТІВ підключені до каналів 8 даних КЛІЄНТІВ, перші входи-виходи даних комутатора 11 ЗОВНІШНІХ каналів - до ЗОВНІШНІХ каналів 9 даних, другі входи-виходи даних комутатора 4 внутрішньосис темного обміну підключені до перших ВХОДІВВИХОДІВ даних першого 12 і другого 13 міжмережних екранів, треті входи-виходи даних комутатора 4 внутрішньосистемного обміну підключені до других ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана 13 і до перших входам-виходам даних третього міжмережного екрана 14, другі входи-виходи даних комутатора 10 даних КЛІЄНТІВ підключені до других ВХОДІВ-ВИХОДІВ даних першого міжмережного екрана 12 і до третіх ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана 13, другі входи-виходи даних комутатора 11 ЗОВНІШНІХ каналів підключені до других ВХОДІВ-ВИХОДІВ даних третього міжмережного екрана 14 і до четвертих ВХОДІВ-ВИХОДІВ даних другого міжмережного екрана 13, п'яті входивиходи даних якого підключені до третіх ВХОДІВВИХОДІВ даних внутрішнього комутатора 5, а керуючі входи-виходи - до четвертих керуючих входахвиходах процесорного блока 6, при цьому п'яті і шості керуючі входи-виходи процесорного блока 6 з'єднані, ВІДПОВІДНО, з керуючими входамивиходами першого 12 і третього 14 міжмережних екранів, а сьомі і восьмі керуючі входи-виходи ВІДПОВІДНО, з комутатором 10 каналів даних КЛІЄНТІВ І комутатором 11 ЗОВНІШНІХ каналів Комутатор 4 внутрішньосистемного обміну призначений для перенаправленя потоків даних у штатному режимі - між каналами 3 внутрішньосистемного обміну і другим міжмережн им екраном 13, в аварійному - між каналами 3 внутрішньосистемного обміну і першим міжмережним екраном 12 і між каналами 3 внутріпшьосистемного обміну і третім міжмережним екраном 14 Комутатор 10 каналів даних КЛІЄНТІВ призначений для перенаправленя потоків даних із каналів 8 даних КЛІЄНТІВ до другого міжмережн ого екрана 13 і першого міжмережного екрана 14 Комутатор 11 ЗОВНІШНІХ каналів призначений для перенаправленя потоків даних із ЗОВНІШНІХ каналів 9 до другого міжмережмого екрана 13 та третього міжмережного екрана 14 Комутатори 4, 10 і 11 можуть бути виконані, наприклад, на базі комутаторів Super Stack II виробництва фірми "3COM" Перший міжмережнии екран 12 призначений у штатному режимі - для блокування обміну даними між комутатором 4 внутрішньосистемного обміну і комутатором 10 каналів даних КЛІЄНТІВ, В аварійному - для забезпечення обміну даними між комутатором 4 внутрішньосистемного обміну й комутатором 10 каналів даних КЛІЄНТІВ І блокування 51026 ЗОВНІШНІХ каналів 11 і блокування проходження даних між каналами 8 даних КЛІЄНТІВ І ЗОВНІШНІМИ каналами 9 через комутатор 4 внутрішньосистемного обміну Міжмережні екрани 12, 13 і 14 можуть бути виконані, наприклад, на базі системного блоку персонального комп'ютера, який працює під керуванням операційної системи UNIX з установленою програмою - firewoll Внутрішній комутатор 5 призначений для перенаправленя потоків даних між другим міжмережним екраном 13, процесорним блоком 6 і блоком запам'ятовуючого пристрою 5 Комутатор може бути виконаний, наприклад, на базі комутатора Super Stack II виробництва фірми "3COM" Процесорний блок 6 призначений для виконання наступних функцій обчислення IP адреси одержувача за його символічним ім'ям, визначення маршруту проходження даних від відправника до одержувача, формування правил керування другим міжмережним екраном, визначення прав КЛІЄНТІВ на обмін даними з конкретними одержувачами, обліку загального й миттєвого трафіку для всіх каналів проходження даних, контролю за ЛІМІТОМ клієнта на обмін інформацією, обчислення логічної адреси клієнта за його фізичною адресою, обчислення адреси й визначення маршруту проходження, даних, що адресуються, формування й забезпечення ЦІЛІСНОСТІ структурованих даних, обчислення адреси елементів структурованих даних і забезпечення доступу до них, персоніфікації структурованих даних, призначено для керування усіма елементами вузла, у режимах ініціалізації та штатному режимі, реалізації політики резервування даних у системі, діагностики працездатності кластерної комп'ютерної системи в цілому, переключення вузла в аварійний режим Процесорний блок може бути виконаний, наприклад, на базі системного блоку персонального комп'ютера, який працює під керуванням операційної системи UNIX Блок 7 запам'ятовуючого пристрою призначений для забезпечення буферизацм даних у пам'яті даних у залежності від частоти звертання до них, для зберігання таблиць маршрутизації, для зберігання правил проходження даних, для зберігання списків адрес КЛІЄНТІВ І ЇХНІХ паролів та прав доступу, для зберігання статистичної інформації про проходження даних, для зберігання інформації про стан системи, для зберігання даних, що адресуються, для зберігання структурованих та неструктурованих даних та буферизаци інших даних Блок 7 запам'ятовуючого пристрою може бути виконаний, наприклад, на базі RAID Server V-12 виробництва фірми "RAID Tec" 8 У функціонуючій системі кожний кластерний вузол 1 може знаходиться в одному з трьох режимів При цьому кластерна комп'ютерна система повинна мати принаймні два кластерних вузли 1, один ЗОВНІШНІЙ канал даних 9 і як мінімум по одному каналу 8 даних КЛІЄНТІВ на кожен кластерний вузол 1 Режим ініціалізації Ініціалізація кластерного вузла 1 може відбуватися при двох станах системи Першій стан такий коли до ініціалізації система не мала жодного ініціалізованого кластерного вузла 1 У цьому випадку до каналу даних КЛІЄНТІВ 8 кластерного вузла 1, що шіціалізуєгься, має бути підключений привілейований клієнт, тобто клієнт, що має права доступу до всіх інформаційних каналів і ресурсів системи При ініціалізації кластерного вузла 1 привілейований клієнт через комутатор 10 каналів даних КЛІЄНТІВ, другий мережний екран ІЗ, внутрішній комутатор 5 пересилає в блок 7 запам'ятовуючого пристрою таблицю маршрутизації, правила проходження даних, списки адрес КЛІЄНТІВ їхніх паролів і прав доступу Аналогічні дії відбуваються з другим кластерним вузлом 1 Після цього два кластерних вузли 1, що ініціалі зовани обмінюються між собою своїми настройками Ініціалізація завершується тим, що процесорний блок 6 кожного вузла формує запит через внутрішній комутатор 5 другий міжмережний екран 13 і комутатор 4 ЗОВНІШНІХ каналів на одержання обновленої таблиці маршрутизації, що через комутатор 4 ЗОВНІШНІХ каналів другий міжмережиий екран 13 і внутрішній комутатор 5 записується в блок 7 запам'ятовуючого пристрою Після ЦЬОГО кластерна комп'ютерна система готова до роботи У варіанті, коли в системі вже є два чи більш кластерних вузли 1, що були ініціалізовані, новий кластерний вузол 1 підключається до системи і його ініціалізація відбувається, так само як і в першому варіанті, за тим винятком, що кластерний вузол 1, що шіціалізуегься, обмінюється своїми настройками з іншими кластерними вузлами 1 кластерної комп'ютерної системи ВІДПОВІДНО ДО визначеної політики резервування При цьому процесорний блок 6 нового кластерного вузла 1 через внутрішній комутатор 5, другий міжмережн ий екран 13, комутатор 4 внутрішньосистемного обміну надсилає запит на отримання від іншого кластерного вузла 1 настроювань, що завантажуються в блок 7 запам'ятовуючого пристрою кластерного вузла 1, що ініціалізується Після цього новий кластерний вузол 1 до роботи готовий Нормальний режим У цьому режимі кластерна комп'ютерна система працює таким чином Запит від клієнта через комутатор 10 даних КЛІЄНТІВ надходить у другий міжмережний екран 13, де відбувається перевірка запиту клієнта шляхом порівняння параметрів запиту з настройками, що зберігаються в блоці 7 запам'ятовуючого пристрою Якщо протиріч у запиті не виявлено, запит, через внутрішній комутатор надходить у процесорний блок Процесорний блок перевіряє клієнта на наявність у нього повноважень на запит такого типу Якщо повноваження не підтверджуються, запит анулюється Якщо підтверджуються - процесорний блок за таблицею 51026 10 маршрутизації, яка розміщена у блоці запам'ятоновлений чи поки унаслідок виходу з ладу інших вуючого пристрою, обчислює маршрут і пересилає кластерних вузлів 1 не будуть вичерпані можливозапит клієнта по призначенню в ЗОВНІШНІ канали сті кластерний комп'ютерної системи по резервуданих 9, канали даних КЛІЄНТІВ 8 цього вузла чи ванню через канали 3 внутршньосистемного обміну й Висновок підсистему транспорту даних 2 до іншого вузла Представлена в даному винаході кластерна системи Аналогічним чином обробляються запикомп'ютерна система системи призначена для ти, що надходять із ЗОВНІШНІХ каналів даних 9 чи з використання II у якості розподіленого штернетканалів 3 внутрішньосистемного обміну ВІДМІНвузла Крім того, вона може бути основою для поНІСТЬ полягає в тому, що вони надходять у другий будови розподілених корпоративних мереж переміжмережний екран 13 через комутатор 11 ЗОВНІШдачі даних Застосування даного винаходу дозвоНІХ каналів чи комутатор 4 каналів внутрішньосисляє істотно знизити вимоги по продуктивності до темного обміну ВІДПОВІДНО застосовуваного устаткування знизити навантаження на канали зв'язку при збереженні загальної Аварійний режим пропускної здатності й продуктивності систем анаУ випадку, якщо у процесі діагностики процелогічного призначення Одночасно з цим підвищусорний блок 6 не генерує сигналів справності клається надійність кластерное комп'ютерної системи стерного вузла 1, другий міжмережний екран 13 в цілому і підвищується безпеки потоків даних і блокує проходження через нього будь-яких обміданих у пам'яті системи, що зберігається нів У той же час перший міжмережний екран 12 Література дозволяє проходження обмінів даними між комутатором 10 даних КЛІЄНТІВ, комутатором 4 внутріш1 Транспортная система неоднородных сетей ньосистемного обміну в канали 3 внутрішньосисhttp //www mfocity kiev htm/ темного обміну й обробку запитів, що поступають 2 Вычислительная среда AVFlex по цих каналах приймає на себе інший кластерний http //www dq com/ вузол 1 ВІДПОВІДНО до визначеної політики резер3 Управление информационной средой корпоравування Аналогічно третій міжмережний екран 14 ции дозволяє проходження обмінів між комутатором 11 http //www osp ru/os/ ЗОВНІШНІХ каналів і комутатором 4 внутрішньосис4 Сборка кластерной компьютерной системы на темного обміну Кпастерна комп'ютерна система базе стандартных комплектующих продовжує функціонування в такому режимі доти, http //www mfocity kiev ua/lan003 htm/ поки несправний кластерний вузол 1 не буде від8 10 11 12 14 13 ДП «Український інститут промислової власності» (Укрпатент) вул Сім'ї Хохлових, 15, м Київ, 04119, Україна ( 0 4 4 ) 4 5 6 - 2 0 - 90 ТОВ "Міжнародний науковий комітет" вул Артема, 77, м Київ, 04050, Україна (044)216-32-71