Какие спецификации сервера искать для планировщика в стеке данных?

Aradyan

15.06.2023, 21:12

Я нахожусь в процессе создания стека данных для небольшой компании: был сделан выбор в пользу того, чтобы сервер UNIX работал как «Планировщик». Цель этого планировщика — просто извлекать данные из разных приложений и отправлять их обратно в облачное хранилище данных. В ближайшее время ожидаются и встречные потоки.

Конкретно сервер будет просто размещать Airflow и запускать скрипты Python и Bash. Вполне вероятно, что на сервере также будут размещаться другие приложения Flasks только для внутреннего использования (данные, мониторинг и т. д.). У компании в этом случае действительно «маленькие» потоки: мы не говорим о больших данных.

Теперь, когда мне нужно выбрать хост и аппаратные характеристики, я немного запутался, что мне искать и какие дескриминанты придумывать? Есть ли какой-либо обязательный вариант/возможность или что-то, чего я должен избегать любой ценой?

Спасибо !

0 + 0

питон

запланированная задача

технические характеристики

расход воздуха

Tero Kilkanen

15.06.2023, 21:32

Требования к серверу полностью зависят от приложения и того, как вы его используете. Вы можете получить соответствующую информацию, только проведя собственный бенчмаркинг.

Ответить

Tero Kilkanen

15.06.2023, 21:32

Отвечает ли это на ваш вопрос? [Можете ли вы помочь мне с планированием емкости?](https://serverfault.com/questions/384686/can-you-help-me-with-my-capacity-planning)

Ответить

Admin

Этот вопрос на других языках:

EN: Which server specs to look for for a Scheduler in a data stack?

TH: เซิร์ฟเวอร์ใดที่จะมองหาตัวกำหนดตารางเวลาในสแต็กข้อมูล

RO: Ce specificații de server să căutați pentru un planificator într-o stivă de date?

RU: Какие спецификации сервера искать для планировщика в стеке данных?

VI: Thông số kỹ thuật máy chủ nào cần tìm cho Trình lập lịch biểu trong ngăn xếp dữ liệu?

Ответить или комментировать

Большинство людей не понимают, что склонность к познанию нового открывает путь к обучению и улучшает межличностные связи. В исследованиях Элисон, например, хотя люди могли точно вспомнить, сколько вопросов было задано в их разговорах, они не чувствовали интуитивно связи между вопросами и симпатиями. В четырех исследованиях, в которых участники сами участвовали в разговорах или читали стенограммы чужих разговоров, люди, как правило, не осознавали, что задаваемый вопрос повлияет — или повлиял — на уровень дружбы между собеседниками.