References: AI 💾
FakeAVCeleb - ディープフェイク技術で作った顔と話し声のデータセット
👨👩👦
DeepDream, Style Transferなどを使ったミュージックビデオ – Hardcore Anal Hydrogen “Jean-Pierre”
📄
ビデオカメラの前で一回転→人の3Dモデル – Video Based Reconstruction of 3D People Models 👨👩👦
“忘れることを覚えた服” – Maison book girl「レインコートと首の無い鳥」 GAN + 人間のデザイナーで椅子をデザイン – The chAIr Project 💾
画像認識モデルが苦手とする画像のデータセット – Natural Adversarial Examples 📄
WaveNetを使ったAutoencoderで音楽のドメイン間の変換を可能に! – A Universal Music Translation Network 👨👩👦
ロボットを交えての即興コメディHumanMachine – Artificial Intelligence Improvisation 📄
自律的人工アーティストプロジェクト Artist in the Cloud: Towards an Autonomous Artist 👨👩👦
機械学習でキュレーションした写真集 – Computed Curation: a photobook created by a computer 👨👩👦
GAN + 人間のデザイナーで椅子をデザイン The Chair Project ある楽器の音色が別の楽器に!? – TimbreTron: A WaveNet(CycleGAN(CQT(Audio))) Pipeline for Musical Timbre Transfer SpaceSheets スプレッドシート型UIでの潜在空間探索 – SpaceSheets: Interactive Latent Space Exploration through a Spreadsheet Interface 記号創発問題 ─記号創発ロボティクスによる記号接地問題の本質的解決に向けて─ 歌詞からメロディを生成 – Conditional LSTM-GAN for Melody Generation from Lyrics ファッションデザイナーを助けるツール – Human and GAN collaboration to create haute couture dress AIを用いたAudio Visual – Stylizing Audio Reactive Visuals ピアノを即興演奏できるインターフェース – Piano Genie
📄
進化と創造性 – The Surprising Creativity of Digital Evolution: A Collection of Anecdotes from the Evolutionary Computation and Artificial Life Research Communities 👨👩👦
ボットのみを見分ける?CAPTCHA – Humans Not Invited. 📄
ウィットに富んだキャプション生成 – Punny Captions: WittyWordplay in Image Descriptions 📄
MIDIの演奏に強弱をつけてより自然に! – Neural Translation of Musical Style 👨👩👦
GANによるカラーパレットの生成 – Colormind 👨👩👦
まるでアルチンボルド? GANを用いて野菜で顔を描く – The Electronic Curator 📄
深層学習を用いたウェーブ・シェーピング合成 - NEURAL WAVESHAPING SYNTHESIS 👨👩👦
クリエイティブ ・チューリングテスト- Turing Tests in the Creative Arts 📄
SoundNet: Learning Sound Representations from Unlabeled Video 📄
DeepBach: a Steerable Model for Bach chorales generation by Gaëtan Hadjeres, François Pachet 👨👩👦
Pix2Pixを使った風景画像の生成 – Imaginary landscapes using pix2pix 📄
Learning What and Where to Draw 📄
Learning to Protect Communications with Adversarial Neural Cryptography
ドキュメンタリー – The Automation of Creativity: How man & AI will work together to improve the ad industry 👨👩👦
T-SNE MAP – Google Arts and Culture Experiments 👨👩👦
How many animals can one find in a random image? 📄
音源からそれぞれの楽器を分離するツール – SPLEETER 📄
GANによる音の生成 – Synthesizing Audio with Generative Adversarial Networks 📄
モノラル音源を映像とdeep learningを用いて立体音源に 👨👩👦
機械学習を用いたシンセサイザーが持つ可能性 – Making a Neural Synthesizer Instrument – 👨👩👦
機械学習を用いたドラムマシン – The Infinite Drum Machine : Thousands of everyday sounds, organized using machine learning. 👨👩👦
Web MIDIでMagentaとセッション – Magenta Session 📄
GAN を使って音楽ジャンルを変換 – Symbolic Music Genre Transfer with CycleGAN 📄
観客もDJの演奏に参加？？ – Experio: a Design for Novel Audience Participation in Club Settings 📄
音源分離 – Deep Clustering and Conventional Networks for Music Separation: Stronger Together
📄
CycleGAN 対訳がなくても画像を翻訳(変換) – Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks 👨👩👦
機械学習による、「演奏」の学習
– Performance RNN: Generating Music with Expressive Timing and Dynamics – ⚒️
進化の仕組みを応用した音楽ツール – Musical Novelty Search – Evolutionary Algorithms + Ableton Live ⚒️
声質をコピーする音声合成システム – Lyrebird 📄
画像⇆音の生成 – Deep Cross-Modal Audio-Visual GenerationDeep Cross-Modal Audio-Visual Generation 📄
動画からそれにあった音を生成 – Visual to Sound: Generating Natural Sound for Videos in the Wild 📄
音と映像の関係性の学習 – Audio-Visual Scene Analysis with Self-Supervised Multisensory Features 📄
音楽⇄動画のクロスモーダルな検索技術 – Deep Learning for Content-Based, Cross-Modal Retrieval of Videos and Music ⚒️
衛星写真から住民の所得を推定 – Penny, an AI to predict wealth from space 📄
一枚の写真からその後の人の動きを予測 – Forecasting Human Dynamics from Static Images 📄
見えない体を見る. 一人称視点の映像からカメラをつけている人の姿勢を推定. – Seeing Invisible Poses: Estimating 3D Body Pose from Egocentric Video 📄
画像から、好みのメッシュの3Dモデルを作成する -Neural 3D Mesh Renderer- 📄
一枚の写真からヘアスタイル全体が分かる技術 – AutoHair: Fully Automatic Hair Modeling from A Single Image 📄
人工知能の力を借り、3Dモデルを共作する – Interactive 3D Modeling with a Generative Adversarial Network – 📄
Learning What and Where to Draw 👨👩👦
Deep Learningを用いた音楽生成手法のまとめ – Deep Learning Techniques for Music Generation – A Survey 👨👩👦
AIとの共作で行う「過去との対話」ー Maison book girl 「cotoeri」 📄
過去の作品を学習することで本当に新しい作品が作れるのか?? – CAN: Creative Adversarial Networks Generating “Art” by Learning About Styles and Deviating from Style Norms 📄
ファッション・トレンドの解析. 東京は… – Changing Fashion Cultures 👨👩👦
AIで表現するとは？壮大なデジタルの歴史から紐解く、その可能性について 👨👩👦
ドキュメンタリー – The Automation of Creativity: How man & AI will work together to improve the ad industry 👨👩👦
The Lakh MIDI Dataset v0.1 💾
ジョークを集めたデータセット – Collection of over 200,000 short jokes for humour research 💾
パラレルコーパスデータ集 : OPUS – the open parallel corpus 💾
200万ものサウンド・クリップのデータセット – AudioSet 💾
人の行動の動画データセット – AVA: A Video Dataset of Spatio-temporally Localized Atomic Visual Actions 💾
動植物の画像データセット – The iNaturalist Challenge 2017 Dataset 💾
車載カメラ画像データセット – Mapillary Vistas Dataset 👨👩👦
機械とともに描くポートレート – Delusions 👨👩👦
顔写真から3Dモデルを生成 – Large Pose 3D Face Reconstruction from a Single Image via Direct Volumetric CNN Regression 👨👩👦
マシンと共に書く- Writing with the machine 👨👩👦
未来を予測して動画を生成 – Generating Videos with Scene Dynamics – 👨👩👦
目が回ります – DeepWarp: Photorealistic Image Resynthesis for Gaze Manipulation 👨👩👦
food2vec – Augmented cooking with machine intelligence 👨👩👦
畳み込みニューラルネットワークの識別能力を用いて抽象画を描く- Perception Engine 👨👩👦
AIとともに紡ぐホラーストーリー – Sherry, AI-Powered Horror Stories 👨👩👦
”意識の流れを読む”「意識の辞書」 – A Dictionary of Consciousness 👨👩👦
変化し続ける架空の人物ポートレート – Portraits of Imaginary People 📄
横顔から正面から見た顔を生成 – Beyond Face Rotation: Global and Local Perception GAN for Photorealistic and Identity Preserving Frontal View Synthesis 📄
Attributesによる画像の美しさ判定 – Photo Aesthetics Ranking Network with Attributes and Content Adaptation 📄
ストリートビューの画像の解析による人口統計調査 – Using Deep Learning and Google Street View to Estimate the Demographic Makeup of the US 📄
論文からポスターを自動生成 – Learning to Generate Posters of Scientific Papers 📄
写真のStyle Transfer- Deep Photo Style Transfer 📄
fMRIの脳の反応を機械学習に利用 ?!? – Using human brain activity to guide machine learning 📄
CRNNで鳥の声の識別 – Convolutional Recurrent Neural Networks for Bird Audio Detection 📄
顔写真から肥満度を推定 – Face-to-BMI: Using Computer Vision to Infer Body Mass Index on Social Media 📄
AENet: Learning Deep Audio Features for Video Analysis 📄
Unsupervised Learning of 3D Structure from Images 📄
様々なメディアのフレームを補間する – Depth-Aware Video Frame Interpolation 📄
ドラムパターンとメロディの生成 - Artificial Neural Networks Jamming on the Beat 📄
NSynth: Neural Audio Synthesis—WaveNetを用いたAutoencoderで楽器音を合成 📄
VAEベースのリズム生成モデル - Creating Latent Spaces for Modern Music Genre Rhythms Using Minimal Training Data 📄
見本 - (記事のタイトル）PerformanceRNN - より自然のピアノ演奏の生成 📄
MuseMorphose: Transformerを用いたVAEによる音楽のスタイル変換
👨👩👦
AAI - AIを用いたMouse on Marsのアルバム
📄
Symbolic Music Generation with Diffusion Models
📄
Introducing Latent Timbre Synthesis 📄
Talking Drums: Generating drum grooves with neural networks. 📄
REAL-TIME TIMBRE TRANSFER AND SOUND SYNTHESIS USING DDSP 📄
A Bassline Generation System Based on Sequence-to-Sequence Learning 📄
Self-Supervised VQ-VAE for One-Shot Music Style Transfer 📄
Generating Long Sequences with Sparse Transformers 📄
Music transformer: Generating music with long-term structure 📄
Novel Recording Studio Features for Music Information Retrieval
📄
SING: Symbol-to-Instrument Neural Generator 📄
Neural Granular Sound Synthesis 📄
Multimodal Neurons in Artificial Neural Networks 📄
The Role of AI Attribution Knowledge in the Evaluation of Artwork ⚒️
essentia オーディオ/音楽解析ライブラリ 💾
1万以上のドラム、パーカッション音のデータセット — Freesound One-Shot Percussive Sounds 📄
パーカッション音の合成 - NEURAL PERCUSSIVE SYNTHESIS サーベイ - Deep Learningを用いたサウンド合成 📄
GANを使った環境音の生成→環境音の識別モデルの性能向上 📄
Visual indeterminacy in GAN art ⚒️
random_faces - ランダムに存在しない人の顔を生成するPythonライブラリ 💽
ArtEmis: Affective Language for Visual Art 📄
Neural Text Generation with Unlikelihood Training 📄
Attention is All You Need 💾
UAV-Human: A Large Benchmark for Human Behavior Understanding with Unmanned Aerial Vehicles
📄
On the Dangers of Stochastic Parrots: Can Language Models Be Too Big? 🦜 📄
Energy and Policy Considerations for Deep Learning in NLP 📄
AudioViewer: Learning to Visualize Sound 📄
Translating Paintings Into Music Using Neural Networks 💾
Label Errors in ML Test Sets 📄
監視カメラの画像と画像認識で世界の国々の幸福度を計測? - Measuring Happiness Around the World through AI 📄
Localizing Visual Sounds the Hard Way
📄
The Generative Electronic Dance Music Algorithmic System 📘
Leonard Music Journal (LMJ) 👨👩👦
CLIPと進化戦略ESを用いて、単純なかたちを組み合わせて描く抽象画. AIキュビズム ? 👨👩👦
"AI" - GPT3を用いた実験的な演劇 📄
創造性をどう評価するか – A Machine Learning Approach for Evaluating Creative Artifacts 📄
Deep Learningを活用した都市の”形態学” – Urban morphology meets deep learning: Exploring urban forms in one million cities, town and villages across the planet 📄
アフリカの野生動物の観測にDeep Learningを利用 – Automatically identifying wild animals in camera-trap images with deep learning 👨👩👦
衛星写真から住民の所得を推定 – Penny, an AI to predict wealth from space 👨👩👦
料理の写真 ↔︎ 材料とレシピ – Learning Cross-modal Embeddings for Cooking Recipes and Food Images 📄
GANで音楽生成 – MidiNet: A Convolutional Generative Adversarial Network for Symbolic-domain Music Generation using 1D and 2D Conditions 📄
グラフィックデザインにおける各要素の重要性を可視化 – Learning Visual Importance for Graphic Designs and Data Visualizations 📄
音楽の特徴に基づいたダンスの動きのリアルタイム生成 – GrooveNet: Real-Time Music-Driven Dance Movement Generation using Artificial Neural Networks 📄
連想の学習 – See, Hear, and Read: Deep Aligned Representations 📄
服を着ている人の画像を生成 – A Generative Model of People in Clothing 📄
適切なフォントの組み合わせを生成 – Fontjoy 👨👩👦
日々のニュース写真から似通った作品を検索(テートギャラリー) – Recognition Tate
📄
RobotArt – the Robot Art competition 📄
DeepDreamを用いたのドローイングツール- DreamCanvas 📄
GANを応用したSANによるSaliency Map(顕著性マップ)の生成 – Supervised Adversarial Networks for Image Saliency Detection – 📄
絵を「描く」プロセスの模倣 – A Neural Representation of Sketch Drawings 📄
機械学習を用いたドローイングツール – AutoDraw 👨👩👦
AIを言葉でナビして学習 – Beating Atari with Natural Language Guided Reinforcement Learning 👨👩👦
転移学習(Transfer Learning)概論 📄
ファッション・トレンドの解析. 東京は… – Changing Fashion Cultures 💾
synth1B1 - 10億以上のシンセ音と、そのパラメータがペアになったデータセット 📄
輪郭/物体抽出の新スタンダードになるか? – Mask R-CNN 📄
CNNとLSTMでダンスダンスレボリューションのステップ譜を生成 – Dance Dance Convolution 📄
人気があるから綺麗とは限らない！？ – An Image is Worth More than a Thousand Favorites: Surfacing the Hidden Beauty of Flickr Pictures 💾
ファッション写真のデータセット – Large-scale Fashion (DeepFashion) Database 📄
ビデオのフレーム補間 – Video Frame Synthesis using Deep Voxel Fl 📄
フォントのStyle Transfer? – Awesome Typography: Statistics-Based Text Effects Transfer 📄
ちょっとしたノイズを加えると…あら不思議 – Adversarial examples in the physical world 👨👩👦
food2vec – Augmented cooking with machine intelligence 👨👩👦
Learning to Draw: Generating Icons and Hieroglyphs 👨👩👦
画像と文章をつなげるモデル OpenAI CLIPを用いた「CLIPアート」 👨👩👦
The Flemish Scrollers - 議会中にサボっている議員を監視するボット 📄
Neural Loop Combiner — リズム、メロディー、ベースライン... どのループを組み合わせる？ 👨👩👦
Algorithms of Late-Capitalism — 行き過ぎた資本主義社会におけるAI/アルゴリズムの利用に光を当てるZine/Webサイト 👨👩👦
Paint with Music - DDSPを用いて絵筆のストロークを音楽に 📄
結局AI音楽ツールって使えるの？ AI音楽ツールに対する意識調査- A survey on the uptake of Music AI Software 👨👩👦
演奏者が自身の姿と音を学習したAIと向き合うオーディオビジュアルパフォーマンス: Alexander Schubert - Convergence ⚒️
Datagen - AIの学習データをAIで生成、提供するスタートアップ 💾
WebFace260M - インターネット上で集められた2億6千万枚の顔写真のデータセット 
