要使用Apache POI为多行单元格设置不同的样式，可以按照以下步骤进行操作：

1. 创建一个XSSFWorkbook对象或HSSFWorkbook对象，表示Excel文档。

Workbook workbook = new XSSFWorkbook(); // 或者使用HSSFWorkbook

2. 创建一个CellStyle对象来定义单元格的样式。可以设置字体、颜色、边框等属性。

CellStyle style1 = workbook.createCellStyle();
Font font1 = workbook.createFont();
font1.setBold(true);
style1.setFont(font1);

CellStyle style2 = workbook.createCellStyle();
Font font2 = workbook.createFont();
font2.setColor(IndexedColors.RED.getIndex());
style2.setFont(font2);

3. 创建一个Sheet对象，表示Excel中的一个工作表。

Sheet sheet = workbook.createSheet("Sheet1");

4. 创建多行单元格，并为每一行的单元格设置不同的样式。

Row row1 = sheet.createRow(0);
Cell cell1 = row1.createCell(0);
cell1.setCellValue("Row 1, Cell 1");
cell1.setCellStyle(style1);

Row row2 = sheet.createRow(1);
Cell cell2 = row2.createCell(0);
cell2.setCellValue("Row 2, Cell 1");
cell2.setCellStyle(style2);

5. 最后，将Workbook对象写入到文件中或输出到流中。

FileOutputStream fileOut = new FileOutputStream("workbook.xlsx");
workbook.write(fileOut);
fileOut.close();

workbook.close();

以上代码示例创建了一个包含两行单元格的Excel文档，每行单元格具有不同的样式。第一行单元格使用了粗体字体，第二行单元格使用了红色字体。

请注意，上述代码只是示例，你可以根据自己的需求进行修改和扩展。