О тотале

2020-03-29 • big data, web, db, offset, pagination

— Дай мне тотал!
— Тотала не будет!

Вот так мы полтора года спорили с фронтенд разработчиком.

Всё дело в том, как в нашем вебе принято выгребать большие списки данных. Постранично. А типовые переключатели страниц последние пятнадцать лет показывают общее количество страниц. Как правило, точно. Но в мире больших данных узнать общее …


    Read...    

Об Apache Spark

2017-10-30 • Apache Spark, Apache, Scala, Kotlin, Big Data

А вот вам заметки полного нуба об Apache Spark.

Apache Spark Logo

Именно Apache Spark™. А то есть ещё какой-то веб-фреймворк Spark. Не говоря уже о Twilight Sparkle. Плохое название. Гуглите осторожнее.

Apache Spark — это такая штука для распределённых вычислений. Эту всякую бигдату обрабатывать. Причём это не платформа для распределённых вычислений, типа Hadoop …


    Read...