Не получается отключить стили плагина

Вы пытаетесь удалить скрипт с ID, которого нет в системе. Изучаем код плагина, точнее его класс Media:

/**
 * Add shortcode css
 *
 * @param array $params
 */
public function add_shortcode_css() {
	$this->enqueue_style( 'font-awesome', 'frontend/font-awesome.min.css' );
	$this->enqueue_style( 'material-icons', 'material-icons.css' );
	$this->enqueue_style( 'fontello', 'frontend/fontello.css' );
	$this->enqueue_style( 'lightgallery', 'frontend/lightgallery.css' );
	$this->enqueue_style( 'style-frontend', 'frontend/style-frontend.css', array( self::PREFIX . 'material-icons' ) );
	$this->enqueue_style( 'grid', 'frontend/grid.css' );
}

Смотрим дальше код метода enqueue_style():

/**
 * Enqueue style
 *
 * @param type $name
 * @param type $path
 * @param type $parent
 */
public function enqueue_style( $name, $path, $parent = array(), $version = false ) {
	if ( empty( $version ) ) {
		$version = $this->get_version();
	}
	// check url path
	if ( ! preg_match( '/^http/', $path ) ) {
		$path = TM_PG_CSS_URL . $path;
	}
	return wp_enqueue_style( self::PREFIX . $name, $path, $parent, $version );
}

Видим, что он добавляет к ID ещё и префикс свой личный self::PREFIX. Узнать ID легко на самом деле. Просто смотрим, как выводится CSS на странице:

<link rel='stylesheet' id='tm-pg-font-awesome-css'  href='http://wp-test.ru/wp-content/plugins/tm-photo-gallery/media/css/frontend/font-awesome.min.css' type='text/css' media='all' />

Тут в ID tm-pg-font-awesome-css всё как раз и указано, только что WordPress всегда при выводе к нему добавляет -css. Резумирруя, ID стиля tm-pg-font-awesome.

Потому удалять надо так:

add_action( 'wp_enqueue_scripts', function () {
	wp_dequeue_style( 'tm-pg-font-awesome' );
} );