Forwarded from GPT | ChatGPT | Midjourney — GPTMain News
This media is not supported in your browser
VIEW IN TELEGRAM
Сценарий автор придумал и написал от руки сам. А озвучить и визуализировать идею помогли нейросети ElevenLabs (голос), Midjourney (картинки) и D-ID (анимация изображений).
@GPTMainNews
Please open Telegram to view this post
VIEW IN TELEGRAM
Интересное исследование от MIT в области ИИ-агентов. Они разработали метод моделирования поведения агента, будь то человек или машина, учитывающий неизвестные вычислительные ограничения (я так понимаю, что имеется ввиду пространство вероятных следующих действий), которые могут препятствовать решению задач. Их модель может автоматически выводить вычислительные ограничения агента, основываясь только на нескольких следах его предыдущих действий. Результат можно использовать для прогнозирования его будущего поведения.
Исследование показало, что этот метод может быть использован для прогнозирования действий игроков в шахматных матчах и определения целей навигации по предыдущим маршрутам. Этот подход может помочь создать более эффективных ИИ-агентов, способных лучше взаимодействовать с человеком.
https://news.mit.edu/2024/building-better-ai-helper-starts-with-modeling-irrational-behavior-0419?utm_source=pocket_saves
Исследование показало, что этот метод может быть использован для прогнозирования действий игроков в шахматных матчах и определения целей навигации по предыдущим маршрутам. Этот подход может помочь создать более эффективных ИИ-агентов, способных лучше взаимодействовать с человеком.
https://news.mit.edu/2024/building-better-ai-helper-starts-with-modeling-irrational-behavior-0419?utm_source=pocket_saves
MIT News
To build a better AI helper, start by modeling the irrational behavior of humans
MIT and other researchers developed a framework that models irrational or suboptimal behavior of a human or AI agent, based on their computational constraints. Their technique can help predict an agent’s future actions.
Кстати, кто то пробовал Mojo? Не первый раз встречаю описание, везде заявляется и подтверждается кратное увеличение производительности по сравнению с Python и совместимость с ним же. Но я так понимаю, что эта производительность проявляется именно в работе с ML моделями и подобными параллезуемыми задачами, а с точки зрения general development вроде как не должно быть кардинальных отличий?
https://habr.com/ru/companies/raft/articles/808517/
https://habr.com/ru/companies/raft/articles/808517/
Хабр
Mojo: убийца Python и будущее AI
AI технологии в последнее время на вершине хайпа, вы и сами знаете. В особенности популярные большие языковые модели, но и компьютерное зрение не остается в стороне. Эти и другие области ML объединяет...
А вот вопрос ко всем - что какие AI Copilot для написания кода использует? Я вот в основном by default хожу в ChatGPT просто, ну и в VS стоит слагин GitHub Copilot.
Но думаю что надо бы повнимательнее посмотреть вот эти:
- codium
- tabnine
Есть какие то у кого уже выводы по этой теме?
https://habr.com/ru/companies/bothub/articles/809421/
Но думаю что надо бы повнимательнее посмотреть вот эти:
- codium
- tabnine
Есть какие то у кого уже выводы по этой теме?
https://habr.com/ru/companies/bothub/articles/809421/
Хабр
На какие AI Coding Assistants стоит обратить внимание в 2024?
Не секрет, что LLM в настоящее время являются неотъемлемой частью нашего рабочего процесса. Особое внимание заслуживает AI Coding Assistant — программный помощник, который поддерживает разработчиков,...
Клуб CDO
А вот вопрос ко всем - что какие AI Copilot для написания кода использует? Я вот в основном by default хожу в ChatGPT просто, ну и в VS стоит слагин GitHub Copilot. Но думаю что надо бы повнимательнее посмотреть вот эти: - codium - tabnine Есть какие то…
Bloomberg.com
Gold-Medalist Coders Build an AI That Can Do Their Job for Them
A new startup called Cognition AI can turn a user’s prompt into a website or video game.
Коллеги из АЭРО проводят иследование на тему использования данных в ecomm и просят всех, кому тема близка, поучастсовать в исследовании и пройти опрос. Внесите свой вклад в развитие культуры данных 🚀!
Предоставляю слово коллегам: "Последние несколько лет АЭРО уделяет всё больше внимания тому, как компании работают с данными. Вместе с Universe Ecom Convention мы решили провести исследование — оцифровать опыт людей и брендов и узнать об особенностях, с которыми сталкиваются сотрудники при использовании данных.
Предлагаем принять участие в опросе — это займет не более 10 минут. Результаты исследования презентуем 23 мая на Международном Форуме Universe Ecom Convention 2024. "
➡️Переходите по ссылке и внесите свой вклад в развитие культуры данных!
Мы будем вам очень признательны!💜
https://docs.google.com/forms/d/e/1FAIpQLSe6yoMH0M9_EzrC9mQW75VxHJi7eEyPt_PcdZBOLOciv99SKg/viewform
Предоставляю слово коллегам: "Последние несколько лет АЭРО уделяет всё больше внимания тому, как компании работают с данными. Вместе с Universe Ecom Convention мы решили провести исследование — оцифровать опыт людей и брендов и узнать об особенностях, с которыми сталкиваются сотрудники при использовании данных.
Предлагаем принять участие в опросе — это займет не более 10 минут. Результаты исследования презентуем 23 мая на Международном Форуме Universe Ecom Convention 2024. "
➡️Переходите по ссылке и внесите свой вклад в развитие культуры данных!
Мы будем вам очень признательны!💜
https://docs.google.com/forms/d/e/1FAIpQLSe6yoMH0M9_EzrC9mQW75VxHJi7eEyPt_PcdZBOLOciv99SKg/viewform
Google Docs
Data-driven в российском e-com — миф или реальность? / Исследование АЭРО
Привет! Мы АЭРО — разработчик e-com & data решений для крупного бизнеса.
Последние несколько лет наша команда много внимания уделяет теме данных в России, общается с компаниями и проводит тематические митапы. Все это помогло нам понять, что проблемы в работе…
Последние несколько лет наша команда много внимания уделяет теме данных в России, общается с компаниями и проводит тематические митапы. Все это помогло нам понять, что проблемы в работе…
Forwarded from Открытые системы www.osp.ru (Издательство "Открытые системы")
📢 Премия Data Award 2024 вышла на финишную прямую
Работа по определению лауреатов премии для data-driven организаций и директоров по данным Data Award 2024 входит в завершающую стадию. Публикация конкурсных работ завершена, экспертный совет провел процедуру голосования. В итоге в шорт-лист вошли 55 номинантов. Результаты будут объявлены 16 мая на торжественной церемонии награждения.
✔️ Читайте интервью со всеми номинантами на портале "Директор информационной службы"▶️
Работа по определению лауреатов премии для data-driven организаций и директоров по данным Data Award 2024 входит в завершающую стадию. Публикация конкурсных работ завершена, экспертный совет провел процедуру голосования. В итоге в шорт-лист вошли 55 номинантов. Результаты будут объявлены 16 мая на торжественной церемонии награждения.
Please open Telegram to view this post
VIEW IN TELEGRAM
Уже через час начнется эфир с исторического автодрома Яс Марина 27 апреля на уникальную гонку автономных транспортных средств. Самые передовые автономные автомобили мира, управляемые AI, пройдут 5-километровую трассу, преодолевая 16 сложных поворотов на протяжении 16 кругов.
Трансляция достпна по ссылке: https://www.youtube.com/watch?v=TPzBH-7ckO0
Трансляция достпна по ссылке: https://www.youtube.com/watch?v=TPzBH-7ckO0
YouTube
Abu Dhabi Autonomous Racing League
Join us live from the iconic Yas Marina Circuit on April 27th for the ultimate autonomous race. Watch as the world’s most advanced autonomous vehicles naviga...
Apple зарелизили open-source языковые модели, которые работают на устройстве.
https://www.macrumors.com/2024/04/24/apple-ai-open-source-models/
https://www.macrumors.com/2024/04/24/apple-ai-open-source-models/
MacRumors
Apple Releases Open Source AI Models That Run On-Device
Apple today released several open source large language models (LLMs) that are designed to run on-device rather than through cloud servers. Called...
Дайджест статей
How AI Is Changing Data Analytics in 2024
https://www.smartdatacollective.com/how-ai-is-changing-data-analytics/?utm_source=pocket_saves
Временное хранилище данных на Apache Druid: почему это эффективно сработало для загрузки табличных файлов
https://habr.com/ru/articles/809751/
Эволюция обработки данных: от MapReduce к стриминговому движку
https://habr.com/ru/companies/yandex/articles/808059/
Креативность для аналитика данных: нужна ли, как проявляется и как развивать
https://habr.com/ru/companies/yandex_praktikum/articles/809497/
ClearML Data Management
https://habr.com/ru/companies/magnus-tech/articles/810435/
Как и почему мы построили Единую историю операций на Citus DB
https://habr.com/ru/companies/gazprombank/articles/810477/
Как Figma удалось открыть себе путь к почти бесконечному масштабированию баз данных
https://habr.com/ru/articles/810185/
How to implement big data for your company
https://www.datasciencecentral.com/how-to-implement-big-data-for-your-company/?utm_source=pocket_saves
How AI Is Changing Data Analytics in 2024
https://www.smartdatacollective.com/how-ai-is-changing-data-analytics/?utm_source=pocket_saves
Временное хранилище данных на Apache Druid: почему это эффективно сработало для загрузки табличных файлов
https://habr.com/ru/articles/809751/
Эволюция обработки данных: от MapReduce к стриминговому движку
https://habr.com/ru/companies/yandex/articles/808059/
Креативность для аналитика данных: нужна ли, как проявляется и как развивать
https://habr.com/ru/companies/yandex_praktikum/articles/809497/
ClearML Data Management
https://habr.com/ru/companies/magnus-tech/articles/810435/
Как и почему мы построили Единую историю операций на Citus DB
https://habr.com/ru/companies/gazprombank/articles/810477/
Как Figma удалось открыть себе путь к почти бесконечному масштабированию баз данных
https://habr.com/ru/articles/810185/
How to implement big data for your company
https://www.datasciencecentral.com/how-to-implement-big-data-for-your-company/?utm_source=pocket_saves
SmartData Collective
How AI Is Changing Data Analytics in 2024
Transform your data analytics with AI in 2024. Discover the future of insights and innovation today!
Если кто то пропустил просмотр исторического события - первой гонки AI, то вот нарезка самый выдающихся моментов эпического заезда 🙂
Forwarded from Формула-1
This media is not supported in your browser
VIEW IN TELEGRAM
🤖 Так выглядит первая в истории гонка болидов под управлением искусственного интеллекта.
Даже они быстрее «Альпин» 😆
🏎 Подписывайтесь на @f1_sports
Даже они быстрее «Альпин» 😆
Please open Telegram to view this post
VIEW IN TELEGRAM
My key takeaways after building a data engineering platform
Небольшая, но интересная статья про практический опыт построения платформы данных. Тут нет описания особенностей, связанных непосредственно с данными, но тем не менее есть несколько любопытных моментов, связанных с разработкой.
В частности, очень правильное утверждение, что удалять код - необходимая и правильная практика для поддержания качества продукта. Хотя общепринятый в индустрии подход в оценке производительности разработчиков построен в основном на добавлении кода. Продукт состоит из функциональности, которая призвана решить конкретную проблему для клиента. Именно поэтому многие инженеры, а также руководители инженерных подразделений считают, что только написание кода считается работой с добавленной стоимостью. Однако автор твердо убежден (и я тут его поддерживаю), что продукт может оставаться актуальным в долгосрочной перспективе только в том случае, если вы также умеете удалять код.
https://medium.com/datamindedbe/my-key-takeaways-for-building-a-data-product-307ad06e529f
Небольшая, но интересная статья про практический опыт построения платформы данных. Тут нет описания особенностей, связанных непосредственно с данными, но тем не менее есть несколько любопытных моментов, связанных с разработкой.
В частности, очень правильное утверждение, что удалять код - необходимая и правильная практика для поддержания качества продукта. Хотя общепринятый в индустрии подход в оценке производительности разработчиков построен в основном на добавлении кода. Продукт состоит из функциональности, которая призвана решить конкретную проблему для клиента. Именно поэтому многие инженеры, а также руководители инженерных подразделений считают, что только написание кода считается работой с добавленной стоимостью. Однако автор твердо убежден (и я тут его поддерживаю), что продукт может оставаться актуальным в долгосрочной перспективе только в том случае, если вы также умеете удалять код.
https://medium.com/datamindedbe/my-key-takeaways-for-building-a-data-product-307ad06e529f
Medium
My key takeaways for building a data engineering platform
Having been a member of a product team for two years, I aim to share three valuable insights that I have gained.
Основные принципы разработки (SOLID, KISS и т. д.)
Статья, что бы освежить (или ознакомиться) с основными принципами проектирования ПО, систем, архитектур, орг структур и тд :)
Тут хороший свод и особенно он хорош примерами. Если вы только знакомитесь с этими принципами - обратите внимание на примеры. Такие утверждения, как:Принцип подстановки Барбары Лисков (LSP) - это принцип объектно-ориентированного программирования, введенный Барбарой Лисков в 1987 году. Он утверждает, что объекты в программе должны быть заменяемыми на экземпляры их подтипов без изменения правильности выполнения программы.Просто из определения понять очень сложно. Но в статье приводится очень понятные и наглядные примеры, которые сразу все проясняют.
https://habr.com/ru/articles/810941/
Статья, что бы освежить (или ознакомиться) с основными принципами проектирования ПО, систем, архитектур, орг структур и тд :)
Тут хороший свод и особенно он хорош примерами. Если вы только знакомитесь с этими принципами - обратите внимание на примеры. Такие утверждения, как:Принцип подстановки Барбары Лисков (LSP) - это принцип объектно-ориентированного программирования, введенный Барбарой Лисков в 1987 году. Он утверждает, что объекты в программе должны быть заменяемыми на экземпляры их подтипов без изменения правильности выполнения программы.Просто из определения понять очень сложно. Но в статье приводится очень понятные и наглядные примеры, которые сразу все проясняют.
https://habr.com/ru/articles/810941/
Хабр
Основные принципы разработки (SOLID, KISS и т. д.)
SOLID SOLID - это аббревиатура, представляющая собой пять основных принципов объектно-ориентированного программирования и проектирования. Эти принципы были сформулированы Робертом Мартином (Uncle Bob)...
How does Uber build real-time infrastructure to handle petabytes of data every day?
В 2023 году 137 миллионов человек пользовались Uber или Uber Eats хотя бы раз в месяц. Также в 2023 году водители Uber завершили 9,44 миллиарда поездок. Для поддержки бизнеса Uber агрессивно использует аналитику данных и модели машинного обучения для операций.
Uber строит большую часть стека аналитики в реальном времени на компонентах с открытым исходным кодом. Однако этосталкивается с некоторыми проблемами:
- По их опыту, большинство технологий с открытым исходным кодом были созданы для конкретных целей.
- Uber пришлось проделать много работы, чтобы адаптировать решения с открытым исходным кодом для широкого спектра использования и языков программирования.
Основные компоненты архитектурного стека Uber:
- Apache Kafka - это, вероятно, самая важная часть всей платформы обработки данных, с огромной инсталляцией.
- Apache Helix для управления кластером uReplicator
- Apache Flink - Uber использует Apache Flink для построения платформы обработки потоков, которая обрабатывает все данные в реальном времени из Kafka. Flink предоставляет распределенную платформу обработки потоков с высокой пропускной способностью и низкой задержкой.
- Flink SQL - Uber добавляет слой поверх Flink, называемый Flink SQL. Он может преобразовывать входные данные Apache Calcite SQL в задания Flink. Процессор компилирует запрос в распределенное приложение Flink и управляет его жизненным циклом, позволяя пользователям сосредоточиться на логике процесса.
- Apache Pinot - это распределенная система OLAP с открытым исходным кодом для выполнения аналитических запросов с низкой задержкой. Она была создана в LinkedIn "после того, как инженеры определили, что нет готовых решений, которые соответствовали бы требованиям социальной сети". Pinot имеет лямбда-архитектуру, которая представляет единое представление между онлайн (в реальном времени) и офлайн (историческими) данными.
- Presto - распределенный движок запросов с открытым исходным кодом, разработанный в Facebook. Он был создан для быстрых аналитических запросов к крупномасштабным наборам данных, используя движок массового параллелизма (MPP) и выполняя все вычисления в памяти, тем самым избегая записи промежуточных результатов на диск.
Инфраструктура: HDFS, Amazon S3 или Google Cloud Storage (GCS)
https://blog.det.life/how-does-uber-build-real-time-infrastructure-to-handle-petabytes-of-data-every-day-ddf5fe9b5d2c
В 2023 году 137 миллионов человек пользовались Uber или Uber Eats хотя бы раз в месяц. Также в 2023 году водители Uber завершили 9,44 миллиарда поездок. Для поддержки бизнеса Uber агрессивно использует аналитику данных и модели машинного обучения для операций.
Uber строит большую часть стека аналитики в реальном времени на компонентах с открытым исходным кодом. Однако этосталкивается с некоторыми проблемами:
- По их опыту, большинство технологий с открытым исходным кодом были созданы для конкретных целей.
- Uber пришлось проделать много работы, чтобы адаптировать решения с открытым исходным кодом для широкого спектра использования и языков программирования.
Основные компоненты архитектурного стека Uber:
- Apache Kafka - это, вероятно, самая важная часть всей платформы обработки данных, с огромной инсталляцией.
- Apache Helix для управления кластером uReplicator
- Apache Flink - Uber использует Apache Flink для построения платформы обработки потоков, которая обрабатывает все данные в реальном времени из Kafka. Flink предоставляет распределенную платформу обработки потоков с высокой пропускной способностью и низкой задержкой.
- Flink SQL - Uber добавляет слой поверх Flink, называемый Flink SQL. Он может преобразовывать входные данные Apache Calcite SQL в задания Flink. Процессор компилирует запрос в распределенное приложение Flink и управляет его жизненным циклом, позволяя пользователям сосредоточиться на логике процесса.
- Apache Pinot - это распределенная система OLAP с открытым исходным кодом для выполнения аналитических запросов с низкой задержкой. Она была создана в LinkedIn "после того, как инженеры определили, что нет готовых решений, которые соответствовали бы требованиям социальной сети". Pinot имеет лямбда-архитектуру, которая представляет единое представление между онлайн (в реальном времени) и офлайн (историческими) данными.
- Presto - распределенный движок запросов с открытым исходным кодом, разработанный в Facebook. Он был создан для быстрых аналитических запросов к крупномасштабным наборам данных, используя движок массового параллелизма (MPP) и выполняя все вычисления в памяти, тем самым избегая записи промежуточных результатов на диск.
Инфраструктура: HDFS, Amazon S3 или Google Cloud Storage (GCS)
https://blog.det.life/how-does-uber-build-real-time-infrastructure-to-handle-petabytes-of-data-every-day-ddf5fe9b5d2c
Medium
How does Uber build real-time infrastructure to handle petabytes of data every day?
All insights from the paper: Real-time data infrastructure at Uber
Дайджест статей
Data сontract: давайте попробуем договориться
https://habr.com/ru/articles/812149/
Data Governance: Key takeaways from the Gartner Data & Analytics Summit
https://medium.com/selectstar/data-governance-key-takeaways-from-the-gartner-data-analytics-summit-41572285a7d9
Roadmap to Learn AI in 2024
https://medium.com/bitgrit-data-science-publication/a-roadmap-to-learn-ai-in-2024-cc30c6aa6e16
Как LLM учат понимать синтаксис
https://habr.com/ru/companies/ntr/articles/812107/
Как стать BI-аналитиком? Онлайн и офлайн, теория и практика
https://habr.com/ru/companies/visiology/articles/811955/
Фундамент AI: обратное распространение ошибки простыми словами
https://habr.com/ru/companies/raft/articles/811371/
Real-time data processing using Change Data Capture and event-driven architecture
https://medium.com/macquarie-engineering-blog/real-time-data-processing-using-change-data-capture-and-event-driven-architecture-006cf30cc449
Data Engineer : What is DataMart
https://premvishnoi.medium.com/data-engineer-what-is-datamart-1745ede1c070
Aspects of Data Architecture
https://medium.com/@josephreeves1990/aspects-of-data-architecture-b204a4b12ff8
Data сontract: давайте попробуем договориться
https://habr.com/ru/articles/812149/
Data Governance: Key takeaways from the Gartner Data & Analytics Summit
https://medium.com/selectstar/data-governance-key-takeaways-from-the-gartner-data-analytics-summit-41572285a7d9
Roadmap to Learn AI in 2024
https://medium.com/bitgrit-data-science-publication/a-roadmap-to-learn-ai-in-2024-cc30c6aa6e16
Как LLM учат понимать синтаксис
https://habr.com/ru/companies/ntr/articles/812107/
Как стать BI-аналитиком? Онлайн и офлайн, теория и практика
https://habr.com/ru/companies/visiology/articles/811955/
Фундамент AI: обратное распространение ошибки простыми словами
https://habr.com/ru/companies/raft/articles/811371/
Real-time data processing using Change Data Capture and event-driven architecture
https://medium.com/macquarie-engineering-blog/real-time-data-processing-using-change-data-capture-and-event-driven-architecture-006cf30cc449
Data Engineer : What is DataMart
https://premvishnoi.medium.com/data-engineer-what-is-datamart-1745ede1c070
Aspects of Data Architecture
https://medium.com/@josephreeves1990/aspects-of-data-architecture-b204a4b12ff8
Хабр
Data сontract: давайте попробуем договориться
у всех свои контракты Единственное, что есть в нашей жизни постоянного, — это изменения . (Цитата из книги "Конвоиры зари" Дона Уинслоу). Фраза чуть отредактирована, но не об этом ли пойдёт речь?...
В копилку: This repository contains everything you need to become proficient in Data Engineering
https://github.com/Coder-World04/Complete-Data-Engineering
https://github.com/Coder-World04/Complete-Data-Engineering
GitHub
GitHub - Coder-World04/Complete-Data-Engineering: This repository contains everything you need to become proficient in Data Engineering
This repository contains everything you need to become proficient in Data Engineering - Coder-World04/Complete-Data-Engineering