使用python将mysql数据导入elasticsearch时index_not_found_exception 的解决办法

如果 Elasticsearch 配置中禁用了自动创建索引的功能，则在尝试向一个尚未存在的索引写入数据时会抛出此错误。可以通过修改配置文件或动态设置来启用自动创建索引功能。 修改配置文件路径下的 `elasticsearch....

为了实现将 MySQL 数据库中的数据导入到 Elasticsearch，可以使用 Spring Boot 框架结合 Spring Data JPA 和 Spring Data Elasticsearch 来完成。以下是详细的实现步骤和配置说明： ### 3.1 添加必要的依赖 首先，在 `pom.xml` 文件中添加以下 Maven 依赖项，以支持 MySQL、Spring Data JPA 和 Elasticsearch 的整合： ```xml <dependencies> <!-- MySQL数据库驱动 --> <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <scope>runtime</scope> </dependency> <!-- Spring Data JPA --> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-jpa</artifactId> </dependency> <!-- Spring Data Elasticsearch --> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-elasticsearch</artifactId> </dependency> </dependencies> ``` ### 3.2 配置 MySQL 和 Elasticsearch 连接信息 在 `application.properties` 文件中添加以下配置，以设置 MySQL 和 Elasticsearch 的连接参数： ```properties #--------------------------------------- # MySQL 数据库配置 #--------------------------------------- spring.datasource.url=jdbc:mysql://localhost:3306/your_database?useSSL=false&serverTimezone=UTC spring.datasource.username=root spring.datasource.password=your_password spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver #--------------------------------------- # Elasticsearch 配置 #--------------------------------------- spring.data.elasticsearch.cluster-nodes=localhost:9200 spring.data.elasticsearch.cluster-name=your-elasticsearch-cluster ``` ### 3.3 创建实体类 创建一个与 MySQL 数据库表对应的实体类。例如，假设有一个名为 `User` 的表，可以创建如下实体类： ```java import javax.persistence.Entity; import javax.persistence.GeneratedValue; import javax.persistence.GenerationType; import javax.persistence.Id; @Entity public class User { @Id @GeneratedValue(strategy = GenerationType.IDENTITY) private Long id; private String name; private String email; // Getters and Setters } ``` ### 3.4 创建 Repository 接口 创建一个用于访问 MySQL 数据的 Repository 接口，例如 `UserRepository`： ```java import org.springframework.data.jpa.repository.JpaRepository; public interface UserRepository extends JpaRepository<User, Long> { } ``` 同样，创建一个用于操作 Elasticsearch 的 Repository 接口，例如 `UserElasticsearchRepository`： ```java import org.springframework.data.elasticsearch.repository.ElasticsearchRepository; public interface UserElasticsearchRepository extends ElasticsearchRepository<User, Long> { } ``` ### 3.5 实现数据同步逻辑 创建一个服务类，用于从 MySQL 中读取数据并将其写入 Elasticsearch。例如，`UserService` 类可以如下所示： ```java import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Service; import java.util.List; @Service public class UserService { @Autowired private UserRepository userRepository; @Autowired private UserElasticsearchRepository userElasticsearchRepository; public void syncDataFromMySQLToElasticsearch() { List<User> users = userRepository.findAll(); userElasticsearchRepository.saveAll(users); } } ``` ### 3.6 创建控制器 创建一个控制器类，用于触发数据同步操作。例如，`UserController` 类可以如下所示： ```java import org.springframework.beans.factory.annotation.Autowired; import org.springframework.web.bind.annotation.GetMapping; import org.springframework.web.bind.annotation.RequestMapping; import org.springframework.web.bind.annotation.RestController; @RestController @RequestMapping("/api") public class UserController { @Autowired private UserService userService; @GetMapping("/sync") public String syncData() { userService.syncDataFromMySQLToElasticsearch(); return "Data synchronized successfully!"; } } ``` ### 3.7 启动应用并测试 启动 Spring Boot 应用，并通过访问 `/api/sync` 端点来触发数据同步操作。这将从 MySQL 数据库中读取所有用户数据，并将其导入到 Elasticsearch 中。 ###