Разработка • habr.com • 7 мая 2024 г. 8:03

Airflow в Lamoda Tech играет роль оркестратора процессов обработки данных. Ежедневно с его помощью мы запускаем 1 800+ тасок на проде, примерно половина из которых являются Spark-приложениями.Все Spark-приложения сабмитятся из Docker-контейнеров. И з...... читать далее

apache airflow spark hocon docker data engineering big data python

Разработка • habr.com • 7 мая 2024 г. 7:41

На днях была опубликована новая версия языка программирования Mojo, теперь это 24.3. Новинка получила несколько важных компонентов, которые требуются для создания приложений на этом языке. Например, компилятор, интерактивная REPL-оболочка для сборки...... читать далее

программирование машинное+обучение искуственный интеллект python

Разработка • dev.to • 6 мая 2024 г. 23:11

I started to work with WordPress in 2015, while in physics college, just to get some money. At first, as a freelancer, I was just a plugin/theme installer, with no clue about how things worked under the hood. Over time, I needed to understand how Wo...... читать далее

wordpress careerdevelopment learning webdev

Разработка • dev.to • 6 мая 2024 г. 17:47

Technology is growing every day and so is the use of mobile phones in our lives. For as little as ordering groceries for our homes to handling our finances through banking and other financial apps, mobile applications are an integral part of our dail...... читать далее

mobileapptesting testgrid

Разработка • dev.to • 6 мая 2024 г. 3:51

We know we all have different habits to browse, navigate, and manage your online community, support center, or knowledge base. We built Apache Answer to stay out of your way, so you can focus and do everything in the way you want, with features and i...... читать далее

opensource go showdev tooling

Разработка • dev.to • 6 мая 2024 г. 3:02

Intro AREX is an open-source API testing platform developed by Trip.com using the concept of production traffic replication. It focuses on the construction of core linkages for recording and playback, evolving from basic solution architecture to de...... читать далее

programming opensource testing

Разработка • dev.to • 6 мая 2024 г. 2:38

JuiceFS v1.2-beta1 is released, featuring significant improvements in user experience, bug fixes, and three new features: Enhanced gateway capabilities: Introduces Identity and Access Management (IAM) and event notifications to provide users with m...... читать далее

DevOps • OpenNET • 5 мая 2024 г. 13:12

Представлен релиз операционной системы Chrome OS 124, основанной на ядре Linux, системном менеджере upstart, сборочном инструментарии ebuild/portage, открытых компонентах и web-браузере Chrome 124. Пользовательское окружение Chrome OS ограничивается...... читать далее

Разработка • dev.to • 5 мая 2024 г. 6:49

In a previous post, we saw how we can read and write data through an instant API provided by DB2Rest. It would be nice to have a way to automatically create chronological sequences of our written data so we do not have to code anything extra in our...... читать далее

nocode restapi database opensource

Разработка • dev.to • 4 мая 2024 г. 18:24

Introduction Ruby is a dynamic, object-oriented programming language celebrated for its simplicity, elegance, and productivity. Conceived by Yukihiro Matsumoto, or "Matz," in the mid-1990s, Ruby was designed with the principle of prioritizing the hap...... читать далее

ruby programming beginners rails

Разработка • dev.to • 4 мая 2024 г. 6:30

Installing multiple versions of PHP on your Ubuntu or Debian system can be incredibly useful for development and testing purposes. It allows you to seamlessly switch between different PHP versions to ensure compatibility with various projects or fram...... читать далее

Разработка • dev.to • 3 мая 2024 г. 22:00

Many applications built on event streaming systems like Apache Kafka need exactly-once semantics for data integrity. In other words, they need to guarantee that events are processed exactly one time and are never under- or over-counted. However, exac...... читать далее

kafka typescript database node

Разработка • dev.to • 3 мая 2024 г. 18:43

Being able to quickly analyze and gain insights from your data is crucial. Excel is widely used for data storage, but when it comes to complex queries and analytics, SQL is often the preferred tool. Dremio, a data lakehouse platform, bridges this gap...... читать далее

Разработка • dev.to • 3 мая 2024 г. 18:34

In my day to day work one of the most common use cases for Apache Airflow is to run hundreds of scheduled BigQuery SQL scripts. Developers who start with Airflow often ask the following questions   How to use airflow to orchestrate sql? This post ai...... читать далее

airflow bigquery dataengineering sql

DevOps • OpenNET • 3 мая 2024 г. 17:01

Опубликован выпуск инструментария языка программирования Mojo 24.3, позволяющего компилировать проекты на локальной системе. В состав включены компоненты, необходимые для разработки приложений на языке Mojo, включая компилятор, runtime, интерактивну...... читать далее

Разработка • dev.to • 3 мая 2024 г. 10:27

Recently went through some study for one of my project for making choice NoSQL vs relational DB, so thought to share with everyone. Have you ever been faced the same situation choosing between a NoSQL or a relational database for your project? Unde...... читать далее

Разработка • IntelliJ IDEA • 3 мая 2024 г. 10:00

Welcome to the latest edition of Java Annotated Monthly! This time around, we’re thrilled to have Holly Cummins on board for our featured content section. As usual, we’ve gathered a bunch of fresh updates, insights, and interesting discus...... читать далее

java kotlin tutorials ai java-annotated spring

Разработка • dev.to • 2 мая 2024 г. 18:49

Three weeks ago, VeloxCon took place in San Jose. The event was a great opportunity for people who are interested in execution engines and data processing at scale to learn about the current state of the project. Most importantly, though, it was an...... читать далее

database bigdata snowflake spark

Разработка • dev.to • 2 мая 2024 г. 18:44

When choosing software for a project, developers have a number of factors to consider. Prime on the list is if it can accomplish a particular function and help them get their project to production faster. Hopefully, they are also considering the secu...... читать далее

development opensource sca security

Разработка • habr.com • 2 мая 2024 г. 17:48

Сегодня в статье разберем, как Kafka обрабатывает оффсеты сообщений и какие существуют стратегии их сохранения и обновления. Оффсет в Kafka — это числовой идентификатор, который указывает позицию каждого сообщения внутри партиции топика. Оффсеты пред...... читать далее

apache оффсеты