Разработка • habr.com • 15 мая 2024 г. 8:51
Апрель 2024 года ознаменовался особым событием для строительной отрасли: два ведущих производителя CAD (BIM) систем, чьи инструменты используются для создания значительной части документации по строительным проектам, объявили в совместном коммюнике о...... читать далее
cad/cam строительство bim revit autocad история bigdata software reverse-engineering open sourceРазработка • dev.to • 13 мая 2024 г. 3:29
When it comes to healthcare, precision promises personalized treatments tailored to individual patients' genetic makeup, environment, and lifestyle. At the heart of this lies data integration, combining diverse healthcare data sources to unlock insig...... читать далее
dataintegration healthcare datascience bigdataРазработка • habr.com • 10 мая 2024 г. 9:19
Напоминаем всем, что самый лучший вариант, это попробовать продукт самому. Но, в случае с нашим сегодняшним гостем, этот вопрос не так прост. В наших обзорах мы делаем фокусировку только на минусах платформ, все плюсы можно изучить на сайте вендоров...... читать далее
форсайт аналитика business intelligence bigdata исследование анализ данных визуализация self-service olap-кубы рейтингиРазработка • dev.to • 8 мая 2024 г. 2:13
Auto-increment column is a bread-and-butter feature of single-node transactional databases. It assigns a unique identifier for each row in a way that requires the least manual effort from users. With an auto-increment column in the table, whenever a...... читать далее
database dataegnineering tutorial bigdataРазработка • dev.to • 7 мая 2024 г. 10:07
History of Parquet File: A Big Data Storage Revolution The Parquet file format has emerged as a dominant force in the realm of big data storage and analytics. Here's a glimpse into its fascinating journey: Origins (Pre-2013) The groundw...... читать далее
datascience database python bigdataРазработка • dev.to • 2 мая 2024 г. 18:49
Three weeks ago, VeloxCon took place in San Jose. The event was a great opportunity for people who are interested in execution engines and data processing at scale to learn about the current state of the project. Most importantly, though, it was an...... читать далее
database bigdata snowflake sparkРазработка • habr.com • 26 апреля 2024 г. 14:08
Спойлер к проблеме из сегодняшнего заголовка: «Никак». Об этом мы и поговорим.Кевин Митник — специалист по компьютерной безопасности. Тот самый человек, который способен научить сохранять конфиденциальность в интернете настолько, насколько это возмож...... читать далее
что почитать книга bigdataРазработка • dev.to • 25 апреля 2024 г. 18:38
I have had the privilege of talking with several folks over the past few weeks around the state of the world. Well, the tech world to be precise. I was inspired by my chat this morning with the wonderful Beth Glenfield. We talked about Product, trend...... читать далее
devops llm ai bigdataРазработка • habr.com • 25 апреля 2024 г. 10:27
В статье описывается практическое применение популярных Open-Source технологий в области интеграции, хранения и обработки больших данных: Apache NiFi, Apache Airflow и Greenplum для проекта по аналитике учета вывоза отходов строительства.Статья полез...... читать далее
данные в компании хранилище хранение данных хранилище данных airflow greenplum nifi bigdataРазработка • dev.to • 25 апреля 2024 г. 7:14
Apache Kafka, a popular distributed streaming platform, enables the building of scalable and fault-tolerant real-time data pipelines and applications. However, like any distributed system, Kafka is not immune to message loss, which can lead to data i...... читать далее
bigdata datareliability streamprocessing distributedРазработка • dev.to • 23 апреля 2024 г. 17:17
In today's data-driven world, managing and analyzing vast amounts of data efficiently and effectively is paramount for businesses of all sizes. Among the myriad of tools and platforms available, Snowflake has emerged as a game-changer, offering a rev...... читать далее
virtualdatawarehouse snowflake bigdata datacloudРазработка • habr.com • 15 апреля 2024 г. 6:12
Всем привет!В этой статье возьмем за основу пару таблиц и пройдемся по планам запросов по нарастающей: от обычного селекта до джойнов, оконок и репартиционирования. Посмотрим, чем отличаются виды планов друг от друга, что в них изменяется от запроса...... читать далее
apache spark pyspark sql python bigdata data engineering explain execution plan план запроса dataframeРазработка • dev.to • 13 апреля 2024 г. 11:43
We often hear about the advertisements for the performance of a big data product, saying that it is capable of running “queries over trillion-row tables in seconds”, which means they can get and return data meeting the specified condition from one tr...... читать далее
sql performance bigdata databaseРазработка • dev.to • 10 апреля 2024 г. 19:53
We're going to build an app that can handle filtering and sorting large amounts of data with AgGrid. Sending all of your data to the browser is a quick way to get started with AgGrid, but what if you have a million rows? That's when server-side filt...... читать далее
python django aggridРазработка • dev.to • 5 апреля 2024 г. 10:12
We're working on an enhancement to SciChart.js - our WebAssembly & WebGL Big Data JavaScript Chart library to push the boundaries of performance. Recently we blogged that an internal build of SciChart.js can now plot 10 Million Datapoints in unde...... читать далее
webdev javascript assembly beginnersРазработка • dev.to • 29 марта 2024 г. 7:08
As I was working on another email part of my Modern Ruby course via email I wanted to make some micro benchmarks on Data.define vs Struct vs OpenStruct They are not a production-level benchmark, so take them with a grain of salt. I added all code a...... читать далее
ruby performance benchmarkРазработка • dev.to • 27 марта 2024 г. 3:19
In a previous post, we studied the data streaming architecture basics, now we are going to set up AWS services to enable speed layer capabilities to ingest, aggregate, and store the streaming data. Each AWS service belongs to one or many stages of th...... читать далее
aws bigdata architectureРазработка • habr.com • 22 марта 2024 г. 17:35
О плюсах платформы можно узнать на сайте производителя, по открытым материалам с конференций. Данный материал делает акцент на минусах системы, но это не значит, что платформа не заслуживает внимания клиен...... читать далее
bi Luxms bigdata business intelligence etl analytics data dwh обзор обзорыРазработка • habr.com • 18 марта 2024 г. 13:25
Руководство DataDrivenConstruction, воплотившее в себе исследования и изучения интеграции данных в строительстве, опубликовано.В книге представлено более 200 уникальных иллюстраций, объясняющих тему данных в строительстве. Книга охватывает более 80 т...... читать далее
строительство bim cad chatgpt data analytics bigdata machinelearning erp erp-системыРазработка • dev.to • 9 марта 2024 г. 19:46
In the field of data management, two distinct threads, SQL and NoSQL databases, intertwine to shape the foundation of our digital existence. Like the warp and weft of a loom, these two technologies interlace to form the backbone of modern information...... читать далее
database nosql sql devops
