Перечисленные вами способы относятся к разным видам тестирования. Создание базы и запросы к ней — интеграционное тестирование. Создание базы, её наполнение, прохождение тестов — всё это будет отнимать много времени и вы не захотите запускать эти тесты ежеминутно. С другой стороны, эти тесты можно включить в процесс сборки (интеграции, непрерывной интеграции). Если у вас нет сервера непрерывной интеграции, запускайте их вручную, просто реже. Чтобы сделать это, пометьте их атрибутом TestCategory
, или разместите все в одной сборке: Visual Studio позволит вам запускать тесты только из отдельного проекта или только одной категории.
Второй вариант — модульное тестирование (unit testing). Именно модульные тесты запускаются постоянно и они, естественно, не должны выполнять длительные операции: обращаться к файлам, обращаться к сетевым ресурсам, к серверу баз данных. Именно в этих тестах используют mock и stub-объекты (они же fake).
Поэтому мой ответ: вам придётся делать и те, и другие тесты. Теперь о том, как это делать.
Модульные тесты (unit tests)
Очень часто программисты задают вопрос — как мне модульно протестировать Entity Framework? Ответ: никак, модульные тесты на Entity Framework пишут его разработчики, а вы пишите тесты на свой код. Ошибкой также будет написание сложных тестов, которые значительно сложнее вашего кода.
public class EfUserRepository : IUserRepository
{
private readonly IDbContextFactory dbContextFactory;
public EfUserRepository(IDbContextFactory dbContextFactory)
{
this.dbContextFactory = dbContextFactory;
}
public UserData ReadById(int id)
{
using (var dbContext = _dbContextFactory.Create())
{
return dbContext.Users.Single(u => u.Id == id);
}
}
}
Что вы действительно можете протестировать в этом коде? Сразу хочется протестировать работу Single
и убедиться, что метод вернёт один-единственный ответ или выдаст исключение. Но Single
— не ваш код, более того, по некоторым причинам, довольно трудно проверить его вызов, поскольку это метод расширения, а не метод интерфейса IQueryable
. Но вы можете проверить, что у dbContextFactory
будет вызыван метод Create
и у созданного контекста будет обращение к свойству Users
. Вот как это можно сделать просто, с помощью библиотеки Moq
public void ReadById_WhenCalled_CallsDbContextFactoryCreate()
{
var dbContextFactoryMock = new Mock<IDbContextFactory>();
var dbContextFactory = dbContextFactoryMock.Object;
var userRepository = new EfUserRepository(dbContextFactory);
var user = userRepository.ReadById(1);
dbContextFactoryMock.Verify(x => x.Create());
}
Интеграционное тестирование (integrating testing)
Здесь вам потребуется база и реальные запросы. Именно в интеграционном тестировании вы проверяете код в целом — создаете запись в таблице, потом читаете и убеждаетесь, что она там есть.
Ваш вопрос — как заполнить эту базу, и основных отета здесь два: вы можете либо отдельно заполнить базу тестовыми данными и отдельно писать тесты, и вы можете в каждом тесте создавать свой тестовый набор данных (создавать нужные записи в таблицах). Второй вариант кажется плохим — будет много лишних записей, тесты будут работать долго. Но, если ваш проект большой, это единственное решение, поскольку вы довольно быстро запутаетесь, потому что заполнение базы будет в одном месте, а использование — в нескольких других местах.
Но сейчас, как я понимаю, вы работаете над проектом один и таблиц там в пределах десяти-пятнадцати? Подойдёт первый вариант.
Надо ли чистить базу после тестов? Можно, но в большинстве работающих проектов удаление данные приводит к проблемам. Обычное решение — всё-таки запускать тесты на отдельной базе, может быть даже на каждый раз новой.
Лучше всего навесить интеграционное тестирование на макроопределение, похожее на DEBUG
, например, на DB_INTEGRATION
. В миграциях Entity Framework (в папке Migrations
) лежит класс Configuration
, у которого есть метод Seed
. Этот метод вызывается для заполнения данных.
internal sealed class Configuration : DbMigrationsConfiguration<DispatcherDbContext>
{
public Configuration()
{
AutomaticMigrationsEnabled = false;
}
protected override void Seed(DbContext context)
{
FillTestData(context);
}
[Conditional("DB_INTEGRATION")]
private void FillTestData(DbContext context)
{
// с помощью context.AddOrUpdate добавляем тестовые записи
// во все таблицы
context.SaveChanges();
}
}
Вставляем метод FillTestData
и навешиваем на него атрибут Conditional
, благодаря которому метод будет вызываться и вставляться в сборку только в том случае, если объявлено макроопределение DB_INTEGRATION
.
Точно такой же атрибут надо добавить на все интеграционные тестовые методы, которые будут обращаться к этим данным.
[TestMethod]
[TestCategory("Integration")]
[Conditional("DB_INTEGRATION")]
public void UserCreation()
{
var dbContextFactory = new DbContextFactory();
var userRepository = new EfUserRepository(dbContextFactory);
var username = Utils.GenerateRandomString(200);
var user1 = userRepository.Create(username);
var user2 = userRepository.ReadById(user1.Id);
Assert.AreEqual(user1.Name, user2.Name);
}
Теперь зайдите на страницу свойств тестового проекта, и на вкладке Build впишите DB_INTEGRATION
в список Conditional compilation symbols. После перекомпиляции проекта, в базе появятся тестовые данные, а в панели тестов — тесты. В Test Explorer левая верхняя кнопка Group By, выбирайте Group By Traits и тесты категории Integration
будут показаны в отдельной группе, которую и можно будет запустить. Обычные модульные тесты окажутся в группе No Traits, так что их удобно будет запускать отдельно от интеграционных тестов и часто.
Можно ли сделать интеграционное тестирование быстрым?
Вот если очень хочется сделать реальный тест обращений к базе, но чтобы работало быстро? Да, возможно.
Второй вопрос: модульные тесты должны работать даже в случае, если у вас нет никаких внешних сервисов и баз данных, можно ли проводить тестирование без внешнего сервера БД? Тоже да.
Многие современные СУБД позволяют хранить базы в памяти. Некоторые СУБД специально спроектированы так, чтобы эмулировать работу внешнего сервера, хотя они встроены в ваше приложение, см. например SQLite и SQL Server Compact Edition.
Эти тесты всё ещё не будут модульными по сути, но по быстродействию будут на уровне модульных, и их можно будет запускать часто.
Начните изучения вопроса с
http://weblogs.asp.net/scottgu/vs-2010-sp1-and-sql-ce
https://www.nuget.org/packages/EntityFramework.SqlServerCompact/