Можно ли избежать использования material в определенных условиях?

Да, можно. В Flutter виджеты MaterialApp и другие из пакета material предоставляют стили и поведение в стиле Material Design, но если вы хотите создать приложение с другим стилем или минималистичным интерфейсом, можно использовать виджеты из пакета cupertino (для iOS-стиля) или просто базовые виджеты Flutter без Material. Например, если не нужен AppBar или стандартные кнопки Material, можно обойтись без MaterialApp и использовать WidgetsApp или просто Scaffold без Material.

Пример без MaterialApp:

import 'package:flutter/widgets.dart';

void main() {
  runApp(Directionality(
    textDirection: TextDirection.ltr,
    child: Center(child: Text('Привет, Flutter!')),
  ));
}

Таким образом, использование Material не обязательно, если дизайн и функционал не требуют его компонентов.