Частичной специализации функций в C++ не существует — такие вещи решаются перегрузкой. Почти всегда этого достаточно, если же нет, то заводят фиктивные структуры, которые затем и специализируют.
Ваша задача решается элементарной перегрузкой с примесью небольшой шаблонной магии:
template <typename T, size_t D>
class vector
{
public:
template<typename = typename std::enable_if<D == 3, void>::type>
vector<T, 3> operator * (const vector<T, 3>& rhs)
{
return *this;
}
};
Для C++14 запись может быть несколько сокращена:
template<typename = std::enable_if_t<D == 3, void>>
vector<T, 3> operator * (const vector<T, 3>& rhs)
{
return *this;
}
Но, в целом, если для трёх измерений у Вас отличается обработка, то, возможно, имеет смысл специализировать весь класс, т.к. если отличия не только в одной операции, то это очень быстро станет неуправляемым.
Если надо вне класса определение вынести:
template <typename T, size_t D>
class vector
{
public:
template<typename = typename std::enable_if<D == 3, void>::type>
vector<T, 3> operator * (const vector<T, 3>& rhs);
};
template <typename T, size_t D>
template<typename>
vector<T, 3> vector<T, D>::operator * (const vector<T, 3>& rhs)
{
return *this;
}
D
поменяли на3
у вас вначале идёт D а потом 3. (в первой строчке перегрузки)