Микширование аудио с Java (без Mixer API) - PullRequest
Новая
       30

Микширование аудио с Java (без Mixer API)

3 голосов
/ 07 мая 2011

Я пытаюсь смешать несколько разных аудиопотоков и пытаюсь заставить их воспроизводить одновременно вместо по одному.

Приведенный ниже код воспроизводит их по одному, и я не могу найти решение, которое не использует Java Mixer API.К сожалению, моя звуковая карта не поддерживает синхронизацию с помощью Mixer API, и я вынужден найти способ сделать это с помощью кода.

Пожалуйста, сообщите.НИЖЕ //// 

class MixerProgram {
public static AudioFormat monoFormat;
private JFileChooser fileChooser = new JFileChooser(); 
private static File[] files;
private int trackCount;   
private FileInputStream[] fileStreams = new FileInputStream[trackCount];
public static AudioInputStream[] audioInputStream;
private Thread trackThread[] = new Thread[trackCount];
private static DataLine.Info sourceDataLineInfo = null; 
private static SourceDataLine[] sourceLine;  

public MixerProgram(String[] s)
{
  trackCount = s.length;
  sourceLine = new SourceDataLine[trackCount];
  audioInputStream = new AudioInputStream[trackCount]; 
  files = new File[s.length];
}

public static void getFiles(String[] s)
{
  files = new File[s.length];
  for(int i=0; i<s.length;i++)
  {
    File f = new File(s[i]);
    if (!f.exists()) 
    System.err.println("Wave file not found: " + filename);
    files[i] = f;
  }
}


public static void loadAudioFiles(String[] s) 
{
  AudioInputStream in = null;
  audioInputStream = new AudioInputStream[s.length];
  sourceLine = new SourceDataLine[s.length];
  for(int i=0;i<s.length;i++){
    try 
    {
      in = AudioSystem.getAudioInputStream(files[i]); 
    } 
    catch(Exception e) 
    {
      System.err.println("Failed to assign audioInputStream");
    }
    monoFormat = in.getFormat();
    AudioFormat decodedFormat = new AudioFormat(
                                              AudioFormat.Encoding.PCM_SIGNED,
                                              monoFormat.getSampleRate(), 16, monoFormat.getChannels(),
                                              monoFormat.getChannels() * 2, monoFormat.getSampleRate(),
                                              false);
  monoFormat = decodedFormat; //give back name
  audioInputStream[i] = AudioSystem.getAudioInputStream(decodedFormat, in);
  sourceDataLineInfo = new DataLine.Info(SourceDataLine.class, monoFormat);
  try 
  {
    sourceLine[i] = (SourceDataLine) AudioSystem.getLine(sourceDataLineInfo); 
    sourceLine[i].open(monoFormat);
  } 
  catch(LineUnavailableException e) 
  {
    System.err.println("Failed to get SourceDataLine" + e);
  }
}               
}

public static void playAudioMix(String[] s)
{
  final int tracks = s.length;
  System.out.println(tracks);
  Runnable playAudioMixRunner = new Runnable()
  {
    int bufferSize = (int) monoFormat.getSampleRate() * monoFormat.getFrameSize();
    byte[] buffer = new byte[bufferSize]; 
    public void run()
    {
      if(tracks==0)
        return;
      for(int i = 0; i < tracks; i++)
      {
        sourceLine[i].start();
      }        
      int bytesRead = 0;
      while(bytesRead != -1)
      {
        for(int i = 0; i < tracks; i++)
        {
          try 
          {
            bytesRead = audioInputStream[i].read(buffer, 0, buffer.length);
          } 
          catch (IOException e) {
          // TODO Auto-generated catch block
            e.printStackTrace();
          }            
          if(bytesRead >= 0)
          {
            int bytesWritten = sourceLine[i].write(buffer, 0, bytesRead);
            System.out.println(bytesWritten);
          }
        }
      }
    }
  };
  Thread playThread = new Thread(playAudioMixRunner);
  playThread.start();
}
}

1 Ответ

5 голосов
/ 09 мая 2011

Проблема в том, что вы не добавляете образцы вместе.Если мы рассмотрим 4 дорожки, 16-битные данные PCM, вам нужно сложить все различные значения вместе, чтобы «смешать» их в один конечный результат.Итак, с чисто числовой точки зрения это будет выглядеть так: 

[Track1]  320  -16  2000   200  400
[Track2]   16    8   123   -87   91
[Track3]  -16  -34  -356  1200  805
[Track4] 1011 1230 -1230  -100   19
[Final!] 1331 1188   537  1213 1315

В приведенном выше коде вы должны писать только один байтовый массив.Этот байтовый массив является окончательным соединением всех треков, добавленных вместе.Проблема в том, что вы пишете байтовый массив для каждой отдельной дорожки (поэтому, как вы заметили, микширование не происходит).

Если вы хотите гарантировать, что у вас нет "отсечения", вам следуетвозьмите среднее значение всех треков (поэтому добавьте все четыре трека выше и разделите на 4).Однако при выборе этого подхода есть артефакты (например, если у вас есть тишина на трех дорожках и одной громкой дорожке, конечный результат будет намного тише, чем громкость одной дорожки, которая не молчит).Есть более сложные алгоритмы, которые вы можете использовать для микширования, но к тому времени вы пишете свой собственный микшер: P.

...