Kokiais būdais ir įrankiais rinkote duomenis iš įvairių šaltinių savo projekte?

Projektuose dažnai naudoju šiuos metodus ir įrankius duomenų rinkimui iš įvairių šaltinių:

• API naudojimas: užklausos REST arba SOAP paslaugoms naudojant HTTP klientus (pvz., HttpClient Java kalboje).
• Failų analizė: CSV, JSON, XML failų skaitymas naudojant bibliotekas (pvz., Jackson JSON, OpenCSV CSV formatui).
• Duomenų bazių integracija: JDBC naudojimas jungiantis ir užklausiant duomenis iš reliacinių duomenų bazių.
• Sudėtingesnių duomenų srautų valdymui naudojami ETL įrankiai (pvz., Apache NiFi, Talend).
• Skriptų rašymas ir automatizavimas: Java kalboje rašomi skriptai ir naudojami užduočių planuotojai (Quartz) reguliariam duomenų rinkimui.

Pavyzdys paprasto užklausos REST API Java kalba naudojant HttpClient:

HttpClient client = HttpClient.newHttpClient();
HttpRequest request = HttpRequest.newBuilder()
    .uri(URI.create("https://api.example.com/data"))
    .build();

HttpResponse<String> response = client.send(request, HttpResponse.BodyHandlers.ofString());
String responseBody = response.body();
// vėliau analizuojame responseBody ir apdorojame duomenis