[Перевод] Одновременная генерация структурированных табличных данных и изображений при помощи GAN |
Мы хорошо знаем GAN за успехи в создании реалистичных изображений. Не так хорошо знаем о формировании табличных данных. Однако их возможно применять при одномоментной реализации табличных данных и изображений.
Зачем генерировать одновременно табличные данные и изображение?
Я создал приложение coronarography.ai. На вход нейронной сети подаются структурированные данные (факторы риска развития сердечных заболеваний) и изображение ЭКГ, на выходе получаем патологию магистральных артерий сердца. Мне стало интересно проверить точность прогнозирования обученной нейронной сети на синтетических сгенерированных данных. Почему бы и нет) Проведем аугментацию выборки при помощи GAN и посмотрим точность обученной нейронной сети на синтетических данных. Для этого необходимо эти синтетические данные получить.
Описание проблемы.
Мы имеем структурированные данные. В них содержится информация по каждому наблюдаемому пациенту в виде наличия факторов риска развития сердечно-сосудистых заболеваний в бинарной форме. К каждому наблюдению прикреплено ЭКГ изображение. То есть одному пациенту соответствуют факторы риска и одно изображение ЭКГ, снятое до суток до выполнения инвазивной коронарографии, это данные которые прогнозирует основная обученная нейронная сеть.
Нам необходимо одновременно генерировать структурированные данные (факторы риска и таргеты виде поражения артерий сердца) и картинку - ЭКГ изображение. Я в литературе не встречал подобных примеров, чтобы генерировали одновременно табличные данных и картинку. Что ж, сделаем впервые). Сгенерируем 1500000 синтетических наблюдаемых в виде табличных данных и ЭКГ изображения.
Читать далееhttps://habr.com/ru/post/709130/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709130
|
Метки: python Машинное обучение Искусственный интеллект Будущее здесь tensorflow gan neural mach |
Weak Pass Detector – запрет на использование утекших паролей в контроллере домена |
Всем привет! Меня зовут Иван Нагорнов, я руководитель направления в Лаборатории кибербезопасности Сбербанка. В данной статье будет сделан обзор и предложение к использованию одной из наших разработок, которая направлена на минимизацию использования утекших паролей из открытых источников в контроллере домена. Мы уверены, что данная идея и ее реализация будут полезны для ИБ сообщества.
Читать далееhttps://habr.com/ru/post/709128/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709128
|
Метки: Информационная безопасность active directory information security |
2022. Год из жизни CTO в GameDev |
Доброго времени, Хабр!
Сначала немного представлюсь. Меня зовут Сергей. В IT я уже более 13 лет из них в GameDev более восьми. Так вышло, что до написания статьи на хабр дошел только сейчас. И дошел только благодаря подписчикам моего небольшом канала по разработке игр в telegram.
К одному из моих постов читатели задали очень много хороших вопросов. Спрашивали они о том что поменялось за этот год, как выглядели собеседования на позицию технического менеджмента и CTO в GameDev. Когда я начал отвечать количество текста становилось все больше и больше. Поэтому пришла мысль оформить все это в отдельную статью. Надеюсь, что материал окажется кому-то интересным, а может даже полезным.
Читать далееhttps://habr.com/ru/post/709124/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709124
|
Метки: Разработка игр unity Управление разработкой Управление проектами gamedev gamedevelopment game development cto interview gamedeveloping unity3d |
Mockoon |
Привет, хотелось бы рассказать о приложении для организации мок-сервера Mockoon. Это довольно удобная и мощная программа, но в русскоязычном сегменте интернета про нее ничего не нашлось, поэтому решил поделиться опытом использования с примерами возможностей.
Читать далееhttps://habr.com/ru/post/709122/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709122
|
Метки: Тестирование веб-сервисов Тестирование мобильных приложений моки мок |
Как создать эвристический алгоритм онлайн-мастеринга и получить предупреждение от RIAA |
Добрый день, меня зовут Сергей. В своей статье я бы хотел осветить тему аудио мастеринга, а именно: автоматизированного онлайн-мастеринга музыки.
Я расскажу о своём пути от продюсера психоделического транса до мейнтейнера самой популярной open source библиотеки автоматизированного референсного мастеринга на Python, получившей предупреждение от американской ассоциации звукозаписывающих компаний RIAA.
Читать далееhttps://habr.com/ru/post/709120/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709120
|
Метки: Python Алгоритмы Развитие стартапа Биографии гиков Звук мастеринг аудио музыка звукорежиссура dsp цос pypi docker web application эвристика |
SQL за 2 месяца. Подробный план обучения |
То, что данные называют нефтью 21 века известно уже давно: на них учатся нейросети, их мгновенная обработка и передача сильно упростили нашу жизнь, и одной из самых распространенных структур хранения данных является реляционная. Именно с ней знакомы большинство разработчиков и, скорее всего, знания как с ней работать вам тоже понадобятся.
Основным инструментом для взаимодействия с реляционными БД является структурированный язык запросов или же SQL.
Читать далееhttps://habr.com/ru/post/709116/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709116
|
Метки: Программирование sql Data Mining Big Data Машинное обучение postgresql bigdata data science |
Не тормози, не тормози… |
Яндекс делает хорошие сервисы. Но иногда эти сервисы работают не так, как нужно. Хотя, может быть, как раз так, как нужно. Некоторое время я стал замечать, что стоимость заказа Такси, увиденная на экране приложения, меняется в сторону увеличения по факту окончания поездки. В этом лонгриде предлагаю посмотреть на правовые моменты такого изменения, а по итогу пожурить Яндекс или напротив восхититься их продуманностью.
0. Принимаем за аксиому тот факт, что отображаемая на экране приложения Яндекс.Такси стоимость заказа после нажатия на кнопку «Заказать» может измениться. Грубо говоря, увидели вы, что маршрут будет выполнен за условные 200 рублей, нажали на кнопку «Заказать», и вуаля – вы едете уже за 250. Дополнительно принимаем за аксиому тот факт, что вы можете опоздать на несколько минут и вам насчитают платное ожидание.
1. Молчаливое согласие часто означает, что сильный берёт всё, что захочет, а слабый отдаёт и терпит, потому что ничего не может переменить.
Гражданский кодекс РФ и сидящая в его основе правовая система считают, что договор заключается тогда, когда между сторонами достигнуто соглашения по всем существенным условиям договора. Такое соглашение может быть достигнуто и тогда, когда одна сторона принимает (акцептует) направленные другой стороной условия (оферту). Причем такой акцепт должен быть полным и безоговорочным, во всяком случае, в отношении существенных условий.
Яндекс регулирует этот вопрос в пункте 1.3. Пользовательского соглашения, в котором говорится, что «Начиная использовать Сервис/его отдельные функции, Пользователь считается принявшим настоящие Условия … в полном объеме, без всяких оговорок и исключений. В случае несогласия Пользователя с какими-либо из положений Условий Пользователь не вправе использовать Сервис…».
Читать далееhttps://habr.com/ru/post/709114/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709114
|
Метки: Законодательство в IT IT-компании таксидермисты таксиагрегатор legaltech право яндекс.такси |
[Перевод] Квазицитирование в Lisp |
Квазицитирование (quasiquotation) — это технология, обычно используемая в Lisp для создания программ, генерирующих другие программы. В статье объясняется механизм работы квазицитирования, поясняется почему он работает именно так и каковы его ограничения, а также даётся экскурс в историю квазицитирования.
Читать дальше →https://habr.com/ru/post/709106/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709106
|
Метки: lisp Функциональное программирование quasiquotation string interpolation |
Небольшая ретроспектива по статистике статей Хабра |
Хабр недавно написал статью про итоги ушедшего 2022 года. В комментариях у меня и нескольких пользователей возник вопрос, что мол статистика как-то странно подана, мол люди перемешаны с конями, почему так? Мне стало интересно.
По идее, чтобы дать нормальную статистику, достаточно просто спарсить Хабр, и скорее всего задача не из самых сложных, но мне не очень хотелось этим заниматься в последних числах декабря. Я пошел другим путем - вооружился поиском, и постарался найти все статьи с похожим содержанием за последние лет 5. Пальма первенства по "итогам года" только недавно перешла к редакции, раньше "итоги" публиковали в том числе обычные пользователи.
Меня интересуют следующие гипотезы, которые зачастую блуждают у меня в голове и секции комментариев:
Читать далееhttps://habr.com/ru/post/709104/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709104
|
Метки: Habr Социальные сети и сообщества хабрахабр статистика черт знает что |
Изучаем Python за 6 месяцев. Подробный план обучения |
Простой и красивый синтаксис, множество библиотек под самые разные задачи и большое комьюнити делают Python одним из самых популярных языков программирования на сегодняшний день, который активно используется в data science и машинном обучении, веб-разработке и прочих областях.
Когда я начал изучать питон, у меня возникло несколько вопросов.
Читать далееhttps://habr.com/ru/post/709102/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709102
|
Метки: программирование python разработка веб-сайтов план обучения машинное обучение big data data science учебный процесс в it карьера в it-индустрии веб-разработа |
Делаем новый контроллер сервоприводов |
Каждый год мы приступаем к созданию нового контроллера взамен какого-либо старого. Пришла очередь контроллера сервопривода. Нужно больше универсальности, технологичности, удобства эксплуатации и инсталляции, больше новых программных технологий, протоколов и готовность к ИИ.
Читать далееhttps://habr.com/ru/post/707738/?utm_source=habrahabr&utm_medium=rss&utm_campaign=707738
Децентрализованные облачные вычисления — благо или зло? |
Привет, Хабр!
В данной статье рассмотрим незаслуженно забытую тему децентрализованных облачных вычислений, проведём анализ существующих решений и попробуем ответить на главный вопрос - почему мастодонты AWS / Azure до сих пор остаются единственным production-ready решением для облачных вычислений, не оставляя шансов децентрализованным пулам мощностей?
Читать далееhttps://habr.com/ru/post/709100/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709100
|
Метки: децентрализованные сети IT-инфраструктура Amazon Web Services Блокчейн децентрализация децентрализованные платформы облачные вычисления |
Релокация и налоги 2023 — изменения НДФЛ, запрет дистанционной работы — обсуждение законопроектов |
Версия статьи от 04.01.2023 г.
Сводная информация по законопроекту "О внесении изменений в части первую и вторую Налогового кодекса РФ" ID 02/04/01-22/00124239 от 19.01.2022 г.
Друзья, я всех приветствую! Это Федор Андреев, с небольшим и как мне кажется, общественно значимым лонгридом, о налоговых законопроектах в РФ, влияющих на доходы релокантов и схемы оптимального налогообложения бизнеса при релокации.
Триггером для написания данного материала, стала серия публикаций в СМИ, о разработке правительством РФ ряда законопроектов, направленных на агрессивное налоговое администрирование, в том числе и налогов нерезидентов РФ, физических лиц, включая самозанятых (НПД) и ИП на УСН и даже прозвучали инициативы, о полном запрете определенным IT-специалистам дистанционно работать из иностранных юрисдикций, что я просто не мог обойти стороной.
Читать далееhttps://habr.com/ru/post/708702/?utm_source=habrahabr&utm_medium=rss&utm_campaign=708702
|
Метки: IT-эмиграция Финансы в IT законопроект ндфл законопроект налоги законопроект релокация работников законопроект удаленная работа юрист федор андреев |
Копирайт на нейросетевое искусство – сравнение пользовательских соглашений |
Мы изучили пользовательские соглашения нейросеток, генерирующих картинки, чтобы понять, какие права у нас есть.
Вот, что у нас получилосьhttps://habr.com/ru/post/709098/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709098
|
Метки: Копирайт Искусственный интеллект copyright AI AI art generated content intellectual property ip law |
Как алгоритм 1972 года спас наш проект и при чем тут Тарьян? |
Я часто вижу в интернете дискуссии, а должен ли True-разработчик знать теорию алгоритмов и стандартные алгоритмы. Про алгоритмические собеседования вообще молчу - мнения на этот счет у всех разные, оно и понятно.
Читать далееhttps://habr.com/ru/post/709096/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709096
|
Метки: Алгоритмы алгоритм Тарьян кейс по проекту |
Heatmap на интерактивной карте с помощью folium |
Возникла необходимость изобразить на интерактивной карте актуальное предложение вакансий в сфере Data Science с агрегацией по городам.
Действовать будем в 3 этапа:
https://habr.com/ru/post/709092/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709092
|
Метки: python Data Mining api Визуализация данных Data Engineering folium geopy |
[Перевод] Ретроразработка драйвера для Windows 3.1 |
https://habr.com/ru/post/709008/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709008
|
Метки: Блог компании RUVDS.com Assembler Реверс-инжиниринг Разработка под Windows Старое железо ruvds_ переводы windows драйверы ассемблер windows 3.1 masm |
Стенд для безопасного питания сетевых устройств |
В радиолюбительской практике, а также в практике разработчика электроники часто возникает необходимость безопасного включения устройств, имеющих питание от сети переменного тока 220-230 В. Одному из вариантов решения этой задачи и посвящена эта статья.
Читать далееhttps://habr.com/ru/post/709090/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709090
|
Метки: Схемотехника Производство и разработка электроники Электроника для начинающих стенд питание 220 источники питания трансформатор |
Пишем простой классификатор текста на Python |
Многие хотят написать простой классификатор текста, но теряются в тоннах книг по машинному обучению, и сложных математических формулах. Сегодня я покажу вам относительно простой пример классификации на Python, который работает просто и понятно.
Читать далееhttps://habr.com/ru/post/709052/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709052
|
Метки: python Машинное обучение машинное+обучение классификатор |
Холодно, теплее, горячо: как «мусорное» тепло европейских дата-центров использовать для обогрева домов |
https://habr.com/ru/post/709028/?utm_source=habrahabr&utm_medium=rss&utm_campaign=709028
|
Метки: Блог компании Selectel IT-инфраструктура Энергия и элементы питания IT-компании тепло дата-центры проекты |
