Дело не в сложности, а в представлении данных и разрешении. Классический терминал работает только с текстом, а полноценный графический интерфейс основан на пикселях, рисуя любой текст пикселями.
В классическом терминале могут отображаться только символы. Можно сделать полные «графические» меню и даже жесты мыши только текстом, но иногда это несколько неудобно по сравнению с полным графическим интерфейсом, но все же очень удобно и может быть очень сложным.
Однако отображение изображений, как в GIMP, не может быть выполнено только в виде текста. Вы можете представлять изображения с помощью ascii-арта, но это не совсем то же самое, и разрешения просто нет.
Точно так же вы можете реализовать что-то вроде gimp в необработанном графическом буфере кадра без полного графического интерфейса, но при этом получить все преимущества представления пикселей и разрешения, но при этом будут отсутствовать такие вещи, как манипуляции с окном, поэтому вы можете быть ограничены одним окном с одно приложение, иначе вам придется заново реализовать весь графический интерфейс. Кроме того, инструментарий графического интерфейса пользователя, на котором основан gimp, должен быть перенесен на фреймбуфер, поскольку он был разработан для использования поддержки, доступной в полном графическом интерфейсе.
