Как построить график на заданной области определения? например, y=4-1/4x^2, где -4 больше или равно х больше или равно 2.

Нужно построить сам график, потом убрать части графика, где х выходит за рамки данного промежутка.
В Вашем случае это будет парабола вида -1/4*x^2 с точкой начала координат (0;4), ветви вниз. Рисуете эту параболу, потом стираете части ветвей: слева до пересечения с осью х, справа до точки (2;3).
Это и будет заданный график.