楽譜を撮ればメロディーを奏でるiPhoneアプリ

[From September Issue 2011]

In July, an iPhone application called “Gakufu Camera (musical score camera)” went on sale at the App Store for 350 yen. This application automatically recognizes notes scanned via an iPhone camera. However, since the camera range is limited, an app can only capture a segment of a score, rather than a whole page of sheet music.

The app can recognize both hand-written and printed notes, and any false recognition or adjustments can be amended by hand. All the scanned data can be saved in order to be played back later. Practical applications for the use of this app are limitless, and include aiding activities such as songwriting, rehearsing, and singing in a chorus.

The app comes with two playback models. Note length can be extended with a slow tap and a segment can be repeated by sliding your fingers over the desired phrase. Pitch can also be adjusted in order to match that of a particular musical instrument and there are six types of playback tones to choose from.

This application, which is the first of its kind, is developed by Kawai Musical Instruments Manufacturing Co., Ltd. The technology already existed 15 years ago and was operated by utilizing an image scanner and “Score Maker” computer software. However, modifying it for use with a mobile phone presented difficulties: memory was limited and it was difficult to capture a clear image of the page with a mobile phone camera.

KATSUTA Masanori, the development manager for the application software, reflects back on the difficulties developing the software: “‘Score Maker’ can play an entire sheet of music using an image scanner, so we were unable to break away from the concept of playing the entire song.”

Gakufu Camera is a product that marries the familiar camera functions of current mobile phones with a new way of enjoying music. The software was commercialized by getting away from the idea of capturing the entire music score and by narrowing its operation down to playing one phrase.

Although Kawai Musical Instruments have diversified into a variety of areas, such as providing music lessons and manufacturing musical instruments (both electronic and traditional), they initially started out as a manufacturer of pianos. Katsuta says this new app was created with the idea of “making music enjoyable” which is the philosophy that the company was founded on. Music is often referred to as “the universal language” and Gakufu Camera may well be a useful tool to translate it into reality.

Kawai Musical Instruments Manufacturing Co., Ltd.

Text: TAKAHASHI Yoshinori

[2011年9月号掲載記事]

楽譜をカメラで撮ると譜面通りにメロディーを奏でてくれるというiPhoneアプリ「楽譜カメラ」(350円)が7月にApp Storeで発売されました。このアプリはiPhoneカメラで撮った音符を自動認識します。撮影範囲が限られているので、認識できるのは楽譜のページごとではなく、楽譜の一部分になります。

印刷した楽譜に加え手書きの楽譜も認識可能で、認識に誤りがあった場合の修正など、全部の操作が片手で行えます。認識したデータは保存して後から再生できます。自分で作曲したり、練習したり、合唱したり、様々な利用法が考えられます。

演奏方法は2通り。ゆっくりタップして音を長く伸ばしたり、練習したい部分を何度も繰り返しなぞったりすることもできます。楽器のチューニングに合わせて基準ピッチを変更することも可能で、演奏時の音色は6種類から選べます。

世界初のこのアプリを開発したのは、株式会社河合楽器製作所です。発想はすでに15年前からあり、パソコン用のソフト「スコアメーカー」で、イメージスキャナーを使い同様のことを行なっていました。しかし、開発にあたり携帯電話ではメモリー使用が限られることや、楽譜全体をきれいに撮影することがむずかしいという問題がありました。

開発責任者の勝田雅則さんは、「『スコアメーカー』のほうは楽譜全部をイメージスキャナーひとつで演奏できるため、全曲演奏という発想を切り離せませんでした」と、その開発の苦労を語っています。

楽譜カメラは、写真を撮るという今ではあたりまえの携帯機能と音楽の楽しみ方をマッチングさせた商品です。楽譜全体という枠をはずし、ワンフレーズだけに絞りこむことで商品化につながりました。

河合楽器は、事業内容も電子楽器やその他楽器の製造、音楽教室をはじめ、様々に広がっていますが、元はピアノの製造会社からスタートしました。この商品化も、音楽を楽しむという創業当時の精神がすべて原点にあると勝田さんは言います。音楽は「世界共通の言語」とよくいわれますが、楽譜カメラは、それを実現するツールともいえます。

株式会社河合楽器製作所

文:高橋義則

Leave a Reply