本文摘要:摘要:众所周知,声音是由振动产生的。在传统意义上,音乐属于耳朵,是用听觉体验美感的艺术。人们在欣赏音乐时,往往是在倾听的基础上,通过音响感知与情绪感受形象联想与理性感悟以及音乐美的体验与感悟等阶段,完成对音乐作品由感性到理性的审美体验过程
摘要:众所周知,声音是由振动产生的。在传统意义上,音乐属于耳朵,是用听觉体验美感的艺术。人们在欣赏音乐时,往往是在倾听的基础上,通过“音响感知与情绪感受”“形象联想与理性感悟”以及“音乐美的体验与感悟”等阶段,完成对音乐作品由感性到理性的审美体验过程。音乐具有形象思维的特点,在情感的伴随下,通过想象联想,获得音乐形象、生活情景以及意境等形象,音乐可视化变为现实。
关键词:声音可视化;processing编程艺术;数字媒体艺术
一、简介
(一)项目背景及作品创意众所周知,声音是由振动产生的。在传统意义上,音乐属于耳朵,是用听觉体验美感的艺术。人们在欣赏音乐时,往往是在倾听的基础上,通过“音响感知与情绪感受”“形象联想与理性感悟”以及“音乐美的体验与感悟”等阶段,完成对音乐作品由感性到理性的审美体验过程。音乐具有形象思维的特点,在情感的伴随下,通过想象联想,获得音乐形象、生活情景以及意境等形象,音乐可视化变为现实。我们计划塑造一个能将音乐可视化的产品,以更好地呈现音乐所带来的情绪。同时,我们期望这款产品在未来的迭代过程中,实现能够帮助听障人士感受音乐的功能。
媒体技术论文范例:基于大数据可视化技术的信息系统AC审计
(二)作品功能
第一部分的作品包括MySong和麦克风输入。这两者都是将音频进行图像化处理的程序,这两者是根据音频的振幅变化来生成图像,所以使用Processing自身创建amplitude对象。第二部分的作品包括键盘钢琴与电子琴,这一部分的作品是对于图像音频化的诠释。其中,电子琴一共有32个键位,键盘上的三排字母都可以成为按键。最低音是G3最高音到D8,因为G3是扬声器所能发出的最低音;而最高音则是受限于键盘数所以只排到D8,实际最高音未知。电子琴的琴音是电脑自生成音,与钢琴不同,不需要data文件夹来添加音频文件。
(三)系统开发平台
开发工具与编程语言:Processing;源码支持环境:Windows/Linux/MacOS,需在ProcessingDevelopmentEnvironment-processing.exe中运行;开发使用的库文件:Minim2.2.2,Sound2.2.3;音乐、视觉效果均为团队原创,使用工具有:AdobeIllustrator,AdobePhotoshop,库乐队,AdobeAudition。
(四)作品特色第一部分的作品包括MySong和麦克风输入。
这两者都是将音频进行图像化处理的程序,在使用方面,如果想要套入使用的音频格式不是mp3,则需要去源码中找到XXX=newSoundFile(this,”Xxx.mp3”)这一行,将双引号中的文件名与格式改成想要播放的音频文件。如果还是无法播放则降低音频质量,因为受Processing自身频谱分析限制,无法分析过高质量音频。麦克风输入则如其字面意思一般,通过输入、捕捉外界声音,利用minim库来分析音频,进而生成图案变化——声音越低沉波动越平缓,音调越高则波动越剧烈。
第二部分的作品包括键盘钢琴与电子琴,这一部分的作品是对于图像音频化的诠释。琴音是根据每个键位输入的每个音所代表的频率来产生的。在编程时考虑的听众感受,采用的是体感最舒适的矩形波所生成的电子音。当然,也可以通过将源码第三行第一个单词改成SinOsc、SawOsc、TriOsc或Pulse来分别用正弦波、锯齿波、三角波或脉冲波形成音频。另外,电子琴在弹奏的时候屏幕随机出现会变化颜色的矩形,这些颜色变化是根据音频频率变化而产生的。
二、多媒体系统详细设计
根据作品类别任选一类(可包含但不限于下列内容)。构想(创意):我们作品的设计方向是围绕着“图像”与“音频”这两个概念展开的。其背后想法就是将“图像”可听化以及将“音频”可视化。交互规则:我们参考了诸多乐器与麦克风的声音呈现方式,探索视觉、触觉对听觉具象化的可能性。视觉艺术:采用AdobeIllustrator、AdobePhotoshop设计样稿,在Processing中通过编程实现样稿的可视化效果。
程序系统设计与编程(参考非媒体类的系统结构设计与数据库结构设计):全部使用Processing开发完成,调用的库文件有:Minim2.2.2,Sound2.2.3。美术、声效:团队成员使用钢琴、架子鼓录制基础音频,在库乐队,AdobeAudition中进行优化处理。编剧、角色、道具、场景:本作品中不涉及任何人物角色、道具与场景。界面设计:由Processing封装的基础可视化界面。
二、多媒体系统详细设计
根据作品类别任选一类(可包含但不限于下列内容)。构想(创意):我们作品的设计方向是围绕着“图像”与“音频”这两个概念展开的。其背后想法就是将“图像”可听化以及将“音频”可视化。交互规则:我们参考了诸多乐器与麦克风的声音呈现方式,探索视觉、触觉对听觉具象化的可能性。视觉艺术:采用AdobeIllustrator、AdobePhotoshop设计样稿,在Processing中通过编程实现样稿的可视化效果。程序系统设计与编程(参考非媒体类的系统结构设计与数据库结构设计):全部使用Processing开发完成,调用的库文件有:Minim2.2.2,Sound2.2.3。
美术、声效:团队成员使用钢琴、架子鼓录制基础音频,在库乐队,AdobeAudition中进行优化处理。编剧、角色、道具、场景:本作品中不涉及任何人物角色、道具与场景。界面设计:由Processing封装的基础可视化界面。Processing进行图形设计的编程语言并不是Java,而是重新开发了一门类C的编程语言,这也让非计算机科班出身的设计师很容易上手。
(一)构建Processing环境第一步是安装Processing环境。去Processing.org(https://processing.org/download/),单击DownloadProcessing并选择您的操作系统。此外,还需要确保Java技术已经可用。在windows上,下载解压后直接运行processing.exe即可。这应该会弹出ProcessingDevelopmentEnvironment(PDE或ProcessingIDE)。占此窗口较大的部分是文本编辑器。如果输入图中所示的两行代码,然后单击Run(左上角的三角形),出现一个窗口,显示您所输入的简单程序(或Processing术语所指的sketch)的结果。单击Stop(左上角的方框)退出程序,窗口消失。
四、结语
我们作品的设计方向是围绕着“图像”与“音频”这两个概念展开的。其背后想法就是将“图像”可听化以及将“音频”可视化。本作品采用视觉、触觉等方式,令每一位体验者充分动用五感,感受音乐的魅力,其采用的交互效果也是音乐行业值得参考的。我们期待这款产品在未来的迭代过程中能够通过可视化的形式帮助听障人士认识、理解音乐。
作者:陶雨琦
转载请注明来自发表学术论文网:http://www.fbxslw.com/dzlw/26579.html
2023-2024JCR閻熸粍婢樺畷顒勫箹閻戣棄鐐婇柣妯垮皺閹斤拷
SCI 闁荤姳鑳堕崕銈夊几閸愵喗鐒诲璺猴工閻忎線鏌曢崱鏇犲妽濠殿喖娲ㄧ划娆戞啑閵堝倸浜惧ù锝夋敱閸欏繘鏌涢妷褍浠滈柛娆忕箻楠炴劙宕惰绾偓
SSCI缂備讲鍋撻柛娆嶅劤缁愭绱掓径瀣仴妞ゆ帞鍠栧鐢告偄瀹勬壆浜栭梺纭呭煐濞叉粍鐏欓柣鐘欏啫顏い鏃撴嫹
婵炴垶鎼╅崢濂杆囨繝姘闁搞儯鍔庢竟瀣叓閸パ冩殲婵犫偓閿熺姴绀嗗┑鐘辫兌閻瑧绱撴担鍝バ$紒妤€鐭傞獮搴ㄥ即閻樺苯缍婇獮鎰板炊瑜嶇涵鈧�
sci闂佸憡绮岄鎶痗i闂佸憡鐟ラ張顒勫极绾懌浜归柡鍥╁枑閸╁倿鏌涢幒鐐村
EI闂佽 鍋撻悹楦挎缁夊潡鏌i妸銉ヮ仹闁煎灚鍨垮畷鍫曟嚍閵夛箑鐒搁梺鍛婂釜閹凤拷
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁规彃妾籧i
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁规彃妯坕
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁硅京鐗猚i
EI闂佸搫鐗忛崰搴ㄥ垂閹跨兌XSourceList
闂佸憡锚濡鎯囩紞绶巗ci闂佸搫绉舵灙缂佹椽绠栧鐢告偄瀹勬壆浜栧┑顔炬嚀濞诧箓鍩€椤掑﹥瀚�
闂佸憡锚濡鎯囩紞绶巆d-婵炴垶鎼╅崢鐓幟瑰Δ鍐煋闁瑰瓨绻嶉崝鍛偓娈垮枟濞叉﹢寮搁崘顔兼瀬闁绘鐗嗙粊锕傚箹鐎涙ɑ灏版繛濂告涧閳瑰啴骞囬鐔风劯闂佸憡甯幏锟�
CSCD闂佹寧鍐婚幏锟�2023-2024闂佹寧鍐婚幏锟�
婵炴垶鎼╅崢楣冿綖閺嶎厽鈷旈柕蹇曞Т閻庡鏌涢弽顓犵窗闁靛棴鎷�2023
婵炴垶鎼╅崢鐓幟瑰Δ鍐煋闁瑰鍋涜灇闂佸搫绉舵灙缂佹椽绠栧鐢告偄瀹勬壆浜栭梺鍛娒Λ妤呮儑妤e啯鍎庢い鏃囧亹缁夛拷
2023濡ょ姷鍋涢顓熸櫠濡や胶鈻旀い鎾跺仦缁傚洨绱掓径瀣仸濠碘姍鍥у唨缂佸娉曟俊鍥煛閸垹鏋庨柛銊︽閹嫰顢欓懖鈺冃梺鎸庣☉閻楁劙宕靛⿰鍫熷€块柛鎾茬贰濞肩娀鎮楀☉瀹狀吅缂佹唻鎷�
2023濡ょ姷鍋涢顓熸櫠濡や胶鈻旀い鎾跺仦缁傚洨绱掓径瀣仸濠碘姍鍥у唨缂佸娉曟俊鍥煛閸垹鏋庨柛銊︽閹嫰顢欓懖鈺冃梺鎸庣☉閻楀繘濡甸悙鏉戭嚤婵﹢纭稿ḿ鐘绘倵濞戝疇顓虹紒鎲嬫嫹
闂佸憡锚濡鎯囨ィ鍐ㄧ婵°倐鍋撻柕鍥ф喘瀵晫绮欑捄銊ヮ洭
2023闂佺粯顨呴悧蹇涱敄閸ヮ剙纭€濞达絽鎼。鐓庘槈閹垮啫骞楅柡瀣暣瀵晫绮欑捄銊ヮ洭闂佺儵鏅╅崰鏍礊閿燂拷
2023-2024JCR閻熸粍婢樺畷顒勫箹閻戣棄鐐婇柣妯垮皺閹斤拷
SCI 闁荤姳鑳堕崕銈夊几閸愵喗鐒诲璺猴工閻忎線鏌曢崱鏇犲妽濠殿喖娲ㄧ划娆戞啑閵堝倸浜惧ù锝夋敱閸欏繘鏌涢妷褍浠滈柛娆忕箻楠炴劙宕惰绾偓
SSCI缂備讲鍋撻柛娆嶅劤缁愭绱掓径瀣仴妞ゆ帞鍠栧鐢告偄瀹勬壆浜栭梺纭呭煐濞叉粍鐏欓柣鐘欏啫顏い鏃撴嫹
婵炴垶鎼╅崢濂杆囨繝姘闁搞儯鍔庢竟瀣叓閸パ冩殲婵犫偓閿熺姴绀嗗┑鐘辫兌閻瑧绱撴担鍝バ$紒妤€鐭傞獮搴ㄥ即閻樺苯缍婇獮鎰板炊瑜嶇涵鈧�
sci闂佸憡绮岄鎶痗i闂佸憡鐟ラ張顒勫极绾懌浜归柡鍥╁枑閸╁倿鏌涢幒鐐村
EI闂佽 鍋撻悹楦挎缁夊潡鏌i妸銉ヮ仹闁煎灚鍨垮畷鍫曟嚍閵夛箑鐒搁梺鍛婂釜閹凤拷
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁规彃妾籧i
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁规彃妯坕
闂佸憡鑹剧€氼剟顢楅悢铏圭煋闁硅京鐗猚i
EI闂佸搫鐗忛崰搴ㄥ垂閹跨兌XSourceList
闂佸憡锚濡鎯囩紞绶巗ci闂佸搫绉舵灙缂佹椽绠栧鐢告偄瀹勬壆浜栧┑顔炬嚀濞诧箓鍩€椤掑﹥瀚�
闂佸憡锚濡鎯囩紞绶巆d-婵炴垶鎼╅崢鐓幟瑰Δ鍐煋闁瑰瓨绻嶉崝鍛偓娈垮枟濞叉﹢寮搁崘顔兼瀬闁绘鐗嗙粊锕傚箹鐎涙ɑ灏版繛濂告涧閳瑰啴骞囬鐔风劯闂佸憡甯幏锟�
CSCD闂佹寧鍐婚幏锟�2023-2024闂佹寧鍐婚幏锟�
婵炴垶鎼╅崢楣冿綖閺嶎厽鈷旈柕蹇曞Т閻庡鏌涢弽顓犵窗闁靛棴鎷�2023
婵炴垶鎼╅崢鐓幟瑰Δ鍐煋闁瑰鍋涜灇闂佸搫绉舵灙缂佹椽绠栧鐢告偄瀹勬壆浜栭梺鍛娒Λ妤呮儑妤e啯鍎庢い鏃囧亹缁夛拷
2023濡ょ姷鍋涢顓熸櫠濡や胶鈻旀い鎾跺仦缁傚洨绱掓径瀣仸濠碘姍鍥у唨缂佸娉曟俊鍥煛閸垹鏋庨柛銊︽閹嫰顢欓懖鈺冃梺鎸庣☉閻楁劙宕靛⿰鍫熷€块柛鎾茬贰濞肩娀鎮楀☉瀹狀吅缂佹唻鎷�
2023濡ょ姷鍋涢顓熸櫠濡や胶鈻旀い鎾跺仦缁傚洨绱掓径瀣仸濠碘姍鍥у唨缂佸娉曟俊鍥煛閸垹鏋庨柛銊︽閹嫰顢欓懖鈺冃梺鎸庣☉閻楀繘濡甸悙鏉戭嚤婵﹢纭稿ḿ鐘绘倵濞戝疇顓虹紒鎲嬫嫹
闂佸憡锚濡鎯囨ィ鍐ㄧ婵°倐鍋撻柕鍥ф喘瀵晫绮欑捄銊ヮ洭
2023闂佺粯顨呴悧蹇涱敄閸ヮ剙纭€濞达絽鎼。鐓庘槈閹垮啫骞楅柡瀣暣瀵晫绮欑捄銊ヮ洭闂佺儵鏅╅崰鏍礊閿燂拷
闁荤姴娲ら崲鏌ユ晲閻愬搫绀冩繛鍡楃凹缁诲棝鏌熼褍鐏茬紒杈ㄧ箞瀹曟瑦娼弶鍨潬/婵炴垶鎸婚幐鎼佸春閿燂拷/闂佹悶鍎村Λ鍕船鐎涙ê绶為柨鐕傛嫹/婵炴垶鎼╅崣鈧悗姘▕瀵剟鏁撻敓锟�/闂佺ǹ绻堥崝宀勵敆閻旇櫣鐭撻柟瀵稿仦閸╁倿鏌涢幒鎴敾閻㈩垰缍婇幊锟犲箛椤忓棛鎲块梺鍛婄懄閸ㄥジ濡撮崘顔肩闁搞儜灞芥