Big Data-ban, nagy mennyiségű szöveg feldolgozásában és hasonlókban otthon van valaki? Egy projekthez keresek valami elosztott queue-t, amibe nagy mennyiségű adatot tölthetek (word doksikat, weboldalakat, e-maileket, akár komplett ebook-okat, stb.), a queue-ra feliratkozhatnak szolgáltatások (amik több gépen futhatnak párhuzamosan), amik feldolgozzák ezeket, és az eredményt visszaköphetik a queue-ba, ahonnan aztán más szolgáltatások dolgozhatnak velük. Szóval a lényeg, hogy elosztott rendszer, konkurens írás/olvasás, és nagy mennyiségű adat. Mit ajánlanátok? Szóba került pl. Apache Kafka, az jó lehet ilyesmire?
Shared publicly