parser

src/test/java/kz/konturai/parser/scheduler/SchedulerTest.java

@@ -0,0 +1,50 @@
+package kz.konturai.parser.scheduler;
+
+import kz.konturai.parser.service.KursivParserService;
+import org.junit.jupiter.api.Test;
+import org.springframework.beans.factory.annotation.Autowired;
+import org.springframework.boot.test.context.SpringBootTest;
+import org.springframework.test.context.TestPropertySource;
+
+import static org.junit.jupiter.api.Assertions.*;
+
+@SpringBootTest
+@TestPropertySource(properties = {
+        "spring.data.mongodb.host=localhost",
+        "spring.data.mongodb.port=27017",
+        "spring.data.mongodb.database=parser_test_db",
+        "rss.feed.url=https://kursiv.media/feed/"
+})
+public class SchedulerTest {
+
+    @Autowired
+    private KursivParserService kursivParserService;
+
+    @Test
+    public void testScheduledMethodExists() {
+        // Проверяем, что метод scheduledParseAndStoreNews существует и доступен
+        assertDoesNotThrow(() -> {
+            // Используем рефлексию для проверки существования метода
+            kursivParserService.getClass().getMethod("scheduledParseAndStoreNews");
+        }, "Метод scheduledParseAndStoreNews должен существовать");
+    }
+
+    @Test
+    public void testScheduledMethodCanBeCalled() {
+        // Проверяем, что метод можно вызвать без ошибок
+        assertDoesNotThrow(() -> {
+            kursivParserService.scheduledParseAndStoreNews();
+        }, "Метод scheduledParseAndStoreNews должен выполняться без ошибок");
+    }
+
+    @Test
+    public void testSchedulerConfiguration() {
+        // Проверяем, что сервис существует и настроен
+        assertNotNull(kursivParserService, "KursivParserService должен быть настроен");
+
+        // Проверяем, что основной метод парсинга работает
+        assertDoesNotThrow(() -> {
+            kursivParserService.parseAndSaveRssFeed();
+        }, "Основной метод парсинга должен работать");
+    }
+}

src/test/java/kz/konturai/parser/service/KursivParserServiceTest.java

@@ -0,0 +1,88 @@
+package kz.konturai.parser.service;
+
+import kz.konturai.parser.model.MarketItem;
+import kz.konturai.parser.repository.MarketItemRepository;
+import org.junit.jupiter.api.Test;
+import org.springframework.beans.factory.annotation.Autowired;
+import org.springframework.boot.test.context.SpringBootTest;
+import org.springframework.test.context.TestPropertySource;
+
+import java.util.List;
+
+import static org.junit.jupiter.api.Assertions.*;
+
+@SpringBootTest
+@TestPropertySource(properties = {
+        "spring.data.mongodb.host=localhost",
+        "spring.data.mongodb.port=27017",
+        "spring.data.mongodb.database=parser_test_db",
+        "rss.feed.url=https://kursiv.media/feed/"
+})
+public class KursivParserServiceTest {
+
+    @Autowired
+    private KursivParserService kursivParserService;
+
+    @Autowired
+    private MarketItemRepository marketItemRepository;
+
+    @Test
+    public void testParseAndSaveRssFeed() {
+        // Очищаем базу данных перед тестом
+        marketItemRepository.deleteAll();
+
+        // Запускаем парсинг
+        List<MarketItem> savedItems = kursivParserService.parseAndSaveRssFeed();
+
+        // Проверяем результаты
+        assertNotNull(savedItems, "Список сохраненных элементов не должен быть null");
+
+        // Проверяем, что хотя бы одна запись была обработана
+        assertTrue(savedItems.size() > 0, "Должна быть обработана хотя бы одна запись");
+
+        // Проверяем структуру первой записи
+        MarketItem firstItem = savedItems.get(0);
+        assertNotNull(firstItem.getTitle(), "Заголовок не должен быть null");
+        assertNotNull(firstItem.getUrl(), "URL не должен быть null");
+        assertNotNull(firstItem.getHash(), "Хэш не должен быть null");
+        assertNotNull(firstItem.getPublishedAt(), "Дата публикации не должна быть null");
+        assertNotNull(firstItem.getRawText(), "Текст не должен быть null");
+
+        // Проверяем, что запись сохранилась в базе данных
+        long totalCount = marketItemRepository.count();
+        assertTrue(totalCount > 0, "В базе данных должны быть записи");
+
+        // Проверяем дедупликацию - повторный запуск не должен создавать дубликаты
+        List<MarketItem> secondRun = kursivParserService.parseAndSaveRssFeed();
+        long secondCount = marketItemRepository.count();
+
+        // Количество записей должно остаться тем же или увеличиться незначительно
+        assertTrue(secondCount >= totalCount, "Количество записей не должно уменьшиться");
+
+        System.out.println("Тест прошел успешно:");
+        System.out.println("- Обработано записей в первом запуске: " + savedItems.size());
+        System.out.println("- Обработано записей во втором запуске: " + secondRun.size());
+        System.out.println("- Общее количество записей в БД: " + secondCount);
+    }
+
+    @Test
+    public void testGetTotalItemsCount() {
+        long count = kursivParserService.getTotalItemsCount();
+        assertTrue(count >= 0, "Количество записей должно быть неотрицательным");
+    }
+
+    @Test
+    public void testGetAllItems() {
+        List<MarketItem> items = kursivParserService.getAllItems();
+        assertNotNull(items, "Список элементов не должен быть null");
+
+        // Проверяем структуру элементов
+        for (MarketItem item : items) {
+            assertNotNull(item.getId(), "ID элемента не должен быть null");
+            assertNotNull(item.getHash(), "Хэш элемента не должен быть null");
+            assertNotNull(item.getSourceName(), "Название источника не должно быть null");
+            assertEquals("Kursiv (Бизнес/экономика)", item.getSourceName(),
+                    "Название источника должно соответствовать ожидаемому");
+        }
+    }
+}